linux - sshfs fuse mount多用户目录rsync失败

标签 linux rsync fuse sshfs

我使用 rsync 自动定期同步多个人使用的 linux 服务器中的主文件夹(root 用户)。用户需要的一项服务是可以通过 sshfs 挂载远程目录。但是,当存在 sshfs 挂载时,rsync 无法给出以下消息

rsync: readlink_stat("/home/???/???") failed: Permission denied (13)
IO error encountered -- skipping file deletion
...
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1183) [sender=3.1.1]

由于此错误,自动同步无法按预期工作,特别是由于跳过文件删除和非零退出代码。只有挂载 home 的文件系统才需要同步,因此所需的行为是忽略 sshfs 挂载。 -x/--one-file-system rsync 选项不能解决它。

这个问题在https://www.agwa.name/blog/post/how_fuse_can_break_rsync_backups中有清楚的解释。 .后续文章 ( https://www.agwa.name/blog/post/easily_running_fuse_in_an_isolated_mount_namespace) 提出了一个解决方案,但不是一个可以接受的解决方案,因为 fuse 安装仅对创建安装的进程可见。

我正在寻找一种不影响 sshfs 可用性并且对用户透明的解决方案。

最佳答案

问题是 FUSE 拒绝其他用户(包括 root)的统计访问。 Rsync 需要对所有指定的源文件和目录进行统计访问。但是,当另一个用户拥有的 rsync 进程统计 FUSE 挂载点时,FUSE 拒绝该进程访问挂载点的属性,导致 rsync 抛出上述“权限被拒绝”错误。 Mauricio Villega 的解决方案通过告诉 rsync 跳过 mount 命令列出的 FUSE 挂载点来工作。这是 Villega 解决方案的另一个版本,它使用 findmnt 命令指定文件系统类型的白名单。我选择了 ext3 和 ext4,但您可以根据需要添加其他类型。

#!/bin/sh
# Which paths to rsync (note the lack of trailing slash tells rsync to preserve source path name at destination).
SOURCES=(
/home
)
# Which filesystem types are supported.
FSTYPES=(
ext3
ext4
)
# Rsync each source.
for SOURCE in ${SOURCES[@]}; do
  # Build exclusion list (array of "--exclude=PATH").
  excludedPaths=$(findmnt --invert --list --noheadings --output TARGET --types $(IFS=',';echo "${FSTYPES[*]}"))
  printf -v exclusionList -- "--exclude=%s " ${excludedPaths[@]}
  # Rsync.
  rsync --archive ${exclusionList[@]} --hard-links --delete --inplace --one-file-system ${SOURCE} /backup
done

请注意,它在循环内构建排除列表以解决此解决方案的基本问题。该问题是由于 rsync 来自实时系统,用户可以在 rsync 运行时创建新的 FUSE 挂载点。排除列表需要足够频繁地更新以包含新的 FUSE 安装点。您可以通过修改 SOURCES 数组,按每个用户名进一步划分主目录。

SOURCES=(
/home/user1
/home/user2
)

如果您使用的是 LVM,另一种解决方案是从 LVM 快照进行 rsync。 LVM 快照提供了一个简单的(例如,没有 FUSE 挂载点)和它所链接的逻辑卷的卡住 View 。缺点是您必须为 LVM 快照的写时复制 (COW) 事件保留空间。使用完 LVM 快照后丢弃它是至关重要的;否则,随着修改的进行,LVM 快照的大小将继续增长。下面是一个使用 LVM 快照的示例脚本。请注意,它不需要为 rsync 构建排除列表。

# Create and mount LVM snapshot.
lvcreate --extents 100%FREE --snapshot --name snapRoot /dev/vgSystem/lvRoot
mount -o ro /dev/mapper/snapRoot /root/mnt # Note that only root has access to this mount-point.
# Rsync each source.
for SOURCE in ${SOURCES[@]}; do
  rsync --archive --hard-links --delete --inplace --one-file-system /root/mnt/${SOURCE} /backup
done
# Discard LVM snapshot.
umount /root/mnt
lvremove vgSystem/snapRoot

引用资料:

"How FUSE Can Break Rsync Backups"

关于linux - sshfs fuse mount多用户目录rsync失败,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/43457360/

相关文章:

c - 我加载了一个 seccomp 过滤器以禁止 fork(),但仍然可以毫无问题地使用 fork()

linux - 最大文件的打印尺寸和平均文件尺寸

linux - 使用 cp 命令会损坏跨不同文件系统传输的文件吗?我应该使用 rsync 之类的东西吗?

我可以在 FUSE 中实现带有打开文件表的文件系统吗?

go - 使用 FUSE 以目录形式命名管道

linux - 如何获取/etc/security/limits.conf 更改反射(reflect)在 headless 用户下运行的进程?

linux - 如何使用 bash 从文件中提取特定行

linux - Rsync 排除除 1 个目录树以外的所有内容

linux - 使用 find 从远程同步文件

python - 如何在基于 Fuse 的自定义文件系统中捕获复制/移动文件操作?