在终端输入 juicefs
并执行,就能看到所有可用的命令。在每个子命令后面添加 -h/--help
并运行,就能获得该命令的详细帮助信息,例如 juicefs format -h
。
NAME:
juicefs - A POSIX file system built on Redis and object storage.
USAGE:
juicefs [global options] command [command options] [arguments...]
VERSION:
1.2.0
COMMANDS:
ADMIN:
format Format a volume
config Change configuration of a volume
quota Manage directory quotas
destroy Destroy an existing volume
gc Garbage collector of objects in data storage
fsck Check consistency of a volume
restore restore files from trash
dump Dump metadata into a JSON file
load Load metadata from a previously dumped JSON file
version Show version
INSPECTOR:
status Show status of a volume
stats Show real time performance statistics of JuiceFS
profile Show profiling of operations completed in JuiceFS
info Show internal information of a path or inode
debug Collect and display system static and runtime information
summary Show tree summary of a directory
SERVICE:
mount Mount a volume
umount Unmount a volume
gateway Start an S3-compatible gateway
webdav Start a WebDAV server
TOOL:
bench Run benchmarks on a path
objbench Run benchmarks on an object storage
warmup Build cache for target directories/files
rmr Remove directories recursively
sync Sync between two storages
clone clone a file or directory without copying the underlying data
compact Trigger compaction of chunks
GLOBAL OPTIONS:
--verbose, --debug, -v enable debug log (default: false)
--quiet, -q show warning and errors only (default: false)
--trace enable trace log (default: false)
--log-id value append the given log id in log, use "random" to use random uuid
--no-agent disable pprof (:6060) agent (default: false)
--pyroscope value pyroscope address
--no-color disable colors (default: false)
--help, -h show help (default: false)
--version, -V print version only (default: false)
COPYRIGHT:
Apache License 2.0
自动补全
通过加载 hack/autocomplete
目录下的对应脚本可以启用命令的自动补全,例如:
source hack/autocomplete/bash_autocomplete
source hack/autocomplete/zsh_autocomplete
请注意自动补全功能仅对当前会话有效。如果你希望对所有新会话都启用此功能,请将 source
命令添加到 .bashrc
或 .zshrc
中:
echo "source path/to/bash_autocomplete" >> ~/.bashrc
echo "source path/to/zsh_autocomplete" >> ~/.zshrc
另外,如果你是在 Linux 系统上使用 bash,也可以直接将脚本拷贝到 /etc/bash_completion.d
目录并将其重命名为 juicefs
:
cp hack/autocomplete/bash_autocomplete /etc/bash_completion.d/juicefs
source /etc/bash_completion.d/juicefs
全局选项
项 | 说明 |
---|
-q --quiet | 仅显示警告及错误日志。 |
-v --verbose --debug | 开启调试日志。 |
--trace | 开启比 --debug 选项更详细的调试日志。 |
--no-agent | 关闭 pprof 代理。 |
--pyroscope | 配置 Pyroscope 地址,如 http://localhost:4040 。 |
--no-color | 关闭日志的颜色。 |
创建并格式化文件系统,如果 META-URL
中已经存在一个文件系统,不会再次进行格式化。如果文件系统创建后需要调整配置,请使用 juicefs config
。
juicefs format [command options] META-URL NAME
juicefs format sqlite3://myjfs.db myjfs
juicefs format redis://localhost myjfs --storage=s3 --bucket=https://mybucket.s3.us-east-2.amazonaws.com
juicefs format mysql://jfs:mypassword@(127.0.0.1:3306)/juicefs myjfs
META_PASSWORD=mypassword juicefs format mysql://jfs:@(127.0.0.1:3306)/juicefs myjfs
juicefs format sqlite3://myjfs.db myjfs --inodes=1000000 --capacity=102400
juicefs format sqlite3://myjfs.db myjfs --trash-days=0
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
NAME | 文件系统名称。 |
--force | 强制覆盖当前的格式化配置,默认为 false。 |
--no-update | 不要修改已有的格式化配置,默认为 false。 |
项 | 说明 |
---|
--storage=file | 对象存储类型,例如 s3 、gs 、oss 、cos 。默认为 file ,参考文档查看所有支持的对象存储类型。 |
--bucket=path | 存储数据的桶路径(默认:$HOME/.juicefs/local 或 /var/jfs )。 |
--access-key=value | 对象存储的 Access Key,也可通过环境变量 ACCESS_KEY 设置。查看如何设置对象存储以了解更多。 |
--secret-key=value | 对象存储的 Secret Key,也可通过环境变量 SECRET_KEY 设置。查看如何设置对象存储以了解更多。 |
--session-token=value | 对象存储的临时访问凭证(Session Token),查看如何设置对象存储以了解更多。 |
--storage-class=value 新增自 v1.1 | 默认存储类型。 |
项 | 说明 |
---|
--block-size=4M | 块大小,单位为 KiB,默认 4M。4M 是一个较好的默认值,不少对象存储(比如 S3)都将 4M 设为内部的块大小,因此将 JuiceFS block size 设为相同大小,往往也能获得更好的性能。 |
--compress=none | 压缩算法,支持 lz4 、zstd 、none (默认),启用压缩将不可避免地对性能产生一定影响。这两种压缩算法中,lz4 提供更好的性能,但压缩比要逊于 zstd ,他们的具体性能差别具体需要读者自行搜索了解。 |
--encrypt-rsa-key=value | RSA 私钥的路径,查看数据加密以了解更多。 |
--encrypt-algo=aes256gcm-rsa | 加密算法 (aes256gcm-rsa, chacha20-rsa) (默认:"aes256gcm-rsa") |
--hash-prefix | 对于部分对象存储服务,如果对象存储命名路径的键值(key)是连续的,那么坐落在对象存储上的物理数据也将是连续的。在大规模顺序读场景下,这样会带来数据访问热点,让对象存储服务的部分区域访问压力过大。
启用 --hash-prefix 将会给每个对象路径命名添加 hash 前缀(用 slice ID 对 256 取模,详见内部实现),相当于“打散”对象存储键值,避免在对象存储服务层面创造请求热点。显而易见,由于影响着对象存储块的命名规则,该选项必须在创建文件系统之初就指定好、不能动态修改。
目前而言,AWS S3 已经做了优化,不再需要应用侧的随机对象前缀。而对于其他对象对象存储服务(比如 COS 就在文档里推荐随 机化前缀),因此,对于这些对象存储,如果文件系统规模庞大,建议启用该选项以提升性能。 |
--shards=0 | 如果对象存储服务在桶级别设置了限速(或者你使用自建的对象存储服务,单个桶的性能有限),可以将数据块根据名字哈希分散存入 N 个桶中。该值默认为 0,也就是所有数据存入单个桶。当 N 大于 0 时,bucket 需要包含 %d 占位符,例如 --bucket=juicefs-%d 。--shards 设置无法动态修改,需要提前规划好用量。 |
项 | 说明 |
---|
--capacity=0 | 容量配额,单位为 GiB,默认为 0 代表不限制。如果启用了回收站,那么配额大小也将包含回收站文件。 |
--inodes=0 | 文件数配额,默认为 0 代表不限制。 |
--trash-days=1 | 文件被删除后,默认会进入回收站,该选项控制已删除文件在回收站内保留的天数,默认为 1,设为 0 以禁用回收站。 |
--enable-acl=true 新增自 v1.2 | 启用POSIX ACL,该选项启用后暂不支持关闭。 |
juicefs config
修改指定文件系统的配置项。注意更新某些设置以后,客户端未必能立刻生效,需要等待一定时间,具体的等待时间可以通过 --heartbeat
选项控制。
juicefs config [command options] META-URL
juicefs config redis://localhost
juicefs config redis://localhost --inodes 10000000 --capacity 1048576
juicefs config redis://localhost --trash-days 7
juicefs config redis://localhost --min-client-version 1.0.0 --max-client-version 1.1.0
项 | 说明 |
---|
--yes, -y | 对所有提示自动回答 "yes" 并以非交互方式运行 (默认值:false) |
--force | 跳过合理性检查并强制更新指定配置项 (默认:false) |
数据存储参数
项 | 说明 |
---|
--storage=file 新增自 v1.1 | 对象存储类型,例如 s3 、gs 、oss 、cos 。默认为 file ,参考文档查看所有支持的对象存储类型。 |
--bucket=path | 存储数据的桶路径(默认:$HOME/.juicefs/local 或 /var/jfs )。 |
--access-key=value | 对象存储的 Access Key,也可通过环境变量 ACCESS_KEY 设置。查看如何设置对象存储以了解更多。 |
--secret-key=value | 对象存储的 Secret Key,也可通过环境变量 SECRET_KEY 设置。查看如何设置对象存储以了解更多。 |
--session-token=value | 对象存储的临时访问凭证(Session Token),查看如何设置对象存储以了解更多。 |
--storage-class=value 新增自 v1.1 | 默认存储类型。 |
--upload-limit=0 | 上传带宽限制,单位为 Mbps (默认:0) |
--download-limit=0 | 下载带宽限制,单位为 Mbps (默认:0) |
管理参数
项 | 说明 |
---|
--capacity value | 容量配额,单位为 GiB |
--inodes value | 文件数配额 |
--trash-days value | 文件被自动清理前在回收站内保留的天数 |
--enable-acl 新增自 v1.2 | 开启 POSIX ACL(不支持关闭),同时允许连接的最小客户端版本会提升到 v1.2 |
--encrypt-secret | 如果密钥之前以原格式存储,则加密密钥 (默认值:false) |
--min-client-version value 新增自 v1.1 | 允许连接的最小客户端 版本 |
--max-client-version value 新增自 v1.1 | 允许连接的最大客户端版本 |
--dir-stats 新增自 v1.1 | 开启目录统计,这是快速汇总和目录配额所必需的 (默认值:false) |
juicefs quota
新增自 v1.1
管理目录配额
juicefs quota command [command options] META-URL
juicefs quota set redis://localhost --path /dir1 --capacity 1 --inodes 100
juicefs quota get redis://localhost --path /dir1
juicefs quota list redis://localhost
juicefs quota delete redis://localhost --path /dir1
juicefs quota check redis://localhost
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
--path value | 卷中目录的全路径 |
--capacity value | 目录空间硬限制,单位 GiB (默认:0) |
--inodes value | 用于硬限制目录 inode 数 (默认:0) |
--repair | 修复不一致配额 (默认:false) |
--strict | 在严格模式下计算目录的总使用量 (注意:对于大目录可能很慢) (默认:false) |
juicefs destroy
销毁一个已经存在的文件系统,将会清空元数据引擎与对象存储中的相关数据。详见「如何销毁文件系统」。
juicefs destroy [command options] META-URL UUID
juicefs destroy redis://localhost e94d66a8-2339-4abd-b8d8-6812df737892
项 | 说明 |
---|
--yes, -y 新增自 v1.1 | 对所有提示自动回答 "yes" 并以非交互方式运行 (默认值:false) |
--force | 跳过合理性检查并强制销毁文件系统 (默认:false) |
juicefs gc
如果对象存储块因为某种原因,完全脱离了 JuiceFS 的管理,也就是对象存储上依然还存在,但在 JuiceFS 元数据已经不复存在,无法被回收释放,这种现象称作「对象泄漏」。如果你并没有进行任何特殊操作,那么对象泄露通常昭示着 bug,建议提交 GitHub Issue。
与此同时,你可以用该命令清理泄漏对象。顺带一提,该命令还能够清理失效的文件碎片。详见「状态检查 & 维护」。
juicefs gc [command options] META-URL
juicefs gc redis://localhost
juicefs gc redis://localhost --compact
juicefs gc redis://localhost --delete
项 | 说明 |
---|
--compact | 对所有文件执行碎片合并。 |
--delete | 删除泄漏的对象,以及因不完整的 clone 命令而产生泄漏的元数据。 |
--threads=10 | 并发线程数,默认为 10。 |
juicefs fsck
检查文件系统一致性。
juicefs fsck [command options] META-URL
juicefs fsck redis://localhost
项 | 说明 |
---|
--path value 新增自 v1.1 | 待检查的 JuiceFS 中的绝对路径 |
--repair 新增自 v1.1 | 发现损坏后尽可能修复 (默认:false) |
--recursive, -r 新增自 v1.1 | 递归检查或修复 (默认值:false) |
--sync-dir-stat 新增自 v1.1 | 同步所有目录的状态,即使他们没有损坏 (注意:巨大的文件树可能会花费很长时间) (默认:false) |
juicefs restore
新增自 v1.1
重新构建回收站文件的树结构,并将它们放回原始目录。如果需要恢复文件存在命名冲突,程序会直接跳过,不会覆盖新创建的文件(注意日志中会有提示)。
juicefs restore [command options] META HOUR ...
juicefs restore redis://localhost/1 2023-05-10-01
项 | 说明 |
---|
--put-back | 将恢复的文件移动到原始目录,面对命名冲突时会直接跳过,不会覆盖已有文件。 |
--threads=10 | 线程数,默认 10,如果恢复速度慢,增加并发以提速。 |
juicefs dump
导出元数据。阅读「元数据备份」以了解更多。
juicefs dump [command options] META-URL [FILE]
juicefs dump redis://localhost meta-dump.json
juicefs dump redis://localhost sub-meta-dump.json --subdir /dir/in/jfs
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
FILE | 导出文件路径,如果不指定,则会导出到标准输出。如果文件名以 .gz 结尾,将会自动压缩。 |
--subdir=path | 只导出指定子目录的元数据。 |
--keep-secret-key 新增自 v1.1 | 导出对象存储认证信息,默认为 false 。由于是明文导出,使用时注意数据安全。如果导出文件不包含对象存储认证信息,后续的导入完成后,需要用 juicefs config 重新配置对象存储认证信息。 |
--threads=10 新增自 v1.2 | 并发线程数,默认 10。 |
--fast 新增自 v1.2 | 使用更多内存来加速导出。 |
--skip-trash 新增自 v1.2 | 跳过回收站中的文件和目录。 |
juicefs load
将元数据导入一个空的文件系统。阅读「元数据恢复与迁移」以了解更多。
juicefs load [command options] META-URL [FILE]
juicefs load redis://127.0.0.1:6379/1 meta-dump.json
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
FILE | 导入文件路径,如果不指定,则会从标准输入导入。如果文件名以 .gz 结尾, 将会自动解压。 |
--encrypt-rsa-key=path 新增自 v1.0.4 | 加密所使用的 RSA 私钥文件路径。 |
--encrypt-algo=aes256gcm-rsa 新增自 v1.0.4 | 加密算法,默认为 aes256gcm-rsa 。 |
juicefs status
显示 JuiceFS 的状态。
juicefs status [command options] META-URL
juicefs status redis://localhost
项 | 说明 |
---|
--session=0, -s 0 | 展示指定会话 (SID) 的具体信息 (默认:0) |
--more, -m 新增自 v1.1 | 显示更多的统计信息,可能需要很长时间 (默认值:false) |
juicefs stats
展示实时的性能统计信息,阅读「实时性能监控」以了解更多。
juicefs stats [command options] MOUNTPOINT
juicefs stats /mnt/jfs
juicefs stats /mnt/jfs -l 1
项 | 说明 |
---|
--schema=ufmco | 控制输出内容的标题字符串,默认为 ufmco ,含义如下:
u :usage
f :FUSE
m :metadata
c :block cache
o :object storage
g :Go |
--interval=1 | 更新间隔;单位为秒 (默认:1) |
--verbosity=0 | 详细级别;通常 0 或 1 已足够 (默认:0) |
juicefs profile
展示基于文件系统访问日志的实时监控数据,阅读「实时性能监控」以了解更多。
juicefs profile [command options] MOUNTPOINT/LOGFILE
juicefs profile /mnt/jfs
cat /mnt/jfs/.accesslog > /tmp/jfs.alog
juicefs profile /tmp/jfs.alog
juicefs profile /tmp/jfs.alog --interval 0
项 | 说明 |
---|
--uid=value, -u value | 仅跟踪指定 UIDs (用逗号分隔) |
--gid=value, -g value | 仅跟踪指定 GIDs (用逗号分隔) |
--pid=value, -p value | 仅跟踪指定 PIDs (用逗号分隔) |
--interval=2 | 显示间隔;在回放模式中将其设置为 0 可以立即得到整体的统计结果;单位为秒 (默认:2) |
juicefs info
显示指定路径或 inode 的内部信息。
juicefs info [command options] PATH or INODE
juicefs info /mnt/jfs/foo
cd /mnt/jfs
juicefs info -i 100
项 | 说明 |
---|
--inode, -i | 使用 inode 号而不是路径 (当前目录必须在 JuiceFS 挂载点内) (默认:false) |
--recursive, -r | 递归获取所有子目录的概要信息,当指定一个目录结构很复杂的路径时可能会耗时很长) (默认:false) |
--strict 新增自 v1.1 | 获取准确的目录概要 (注意:巨大的文件树可能会花费很长的时间) (默认:false) |
--raw | 显示内部原始信息 (默认:false) |
juicefs debug
新增自 v1.1
从运行环境、系统日志等多个维度收集和展示信息,帮助更好地定位错误
juicefs debug [command options] MOUNTPOINT
juicefs debug /mnt/jfs
juicefs debug --out-dir=/var/log /mnt/jfs
juicefs debug --out-dir=/var/log --limit=1000 /mnt/jfs
项 | 说明 |
---|
--out-dir=./debug/ | 结果输出目录,若目录不存在则自动创建,默认为 ./debug/ 。 |
--limit=value | 收集的日志条目数,从新到旧,若不指定则收集全部条目 |
--stats-sec=5 | .stats 文件采样秒数 (默认:5) |
--trace-sec=5 | trace 指标采样秒数 (默认:5) |
--profile-sec=30 | profile 指标采样秒数 (默认:30) |
juicefs summary
新增自 v1.1
显示目标目录树摘要。
juicefs summary [command options] PATH
juicefs summary /mnt/jfs/foo
juicefs summary --depth 5 /mnt/jfs/foo
juicefs summary --entries 20 /mnt/jfs/foo
juicefs summary --strict /mnt/jfs/foo
项 | 说明 |
---|
--depth value, -d value | 显示树的深度 (0 表示只显示根) (默认:2) |
--entries value, -e value | 显示前 N 个 entry (按大小排序)(默认:10) |
--strict | 显示准确的摘要,包括目录和文件 (可能很慢) (默认值:false) |
--csv | 以 CSV 格式打印摘要 (默认:false) |
juicefs mount
挂载一个已经创建的文件系统。
JuiceFS 支持用 root 以及普通用户挂载,但由于权限不同,挂载时所使用的的缓存目录和日志文件等路径会有所区别,详见下方参数说明。
juicefs mount [command options] META-URL MOUNTPOINT
juicefs mount redis://localhost /mnt/jfs
juicefs mount redis://:mypassword@localhost /mnt/jfs -d
META_PASSWORD=mypassword juicefs mount redis://localhost /mnt/jfs -d
juicefs mount redis://localhost /mnt/jfs --subdir /dir/in/jfs
juicefs mount redis://localhost /mnt/jfs -d --writeback
juicefs mount redis://localhost /mnt/jfs -d --read-only
juicefs mount redis://localhost /mnt/jfs --backup-meta 0
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
MOUNTPOINT | 文件系统挂载点,例如:/mnt/jfs 、Z: 。 |
-d, --background | 后台运行,默认为 false。 |
--no-syslog | 禁用系统日志,默认为 false。 |
--log=path | 后台运行时日志文件的位置 (默认:$HOME/.juicefs/juicefs.log 或 /var/log/juicefs.log ) |
--force | 强制挂载即使挂载点已经被相同的文件系统挂载 (默认值:false) |
--update-fstab 新增自 v1.1 | 新增/更新 /etc/fstab 中的条目,如果不存在将会创建一个从 /sbin/mount.juicefs 到 JuiceFS 可执行文件的软链接,默认为 false。 |
FUSE 相关参数
项 | 说明 |
---|
--enable-xattr | 启用扩展属性 (xattr) 功能,默认为 false。 |
--enable-ioctl 新增自 v1.1 | 启用 ioctl (仅支持 GETFLAGS/SETFLAGS) (默认:false) |
--root-squash value 新增自 v1.1 | 将本地 root 用户 (UID=0) 映射到一个指定用户,如 UID:GID |
--prefix-internal 新增自 v1.1 | 挂载 JuiceFS 后,挂载点下默认创建 .stats , .accesslog 等虚拟文件。如果这些内部文件和你的应用发生冲突,可以启用该选项,添加 .jfs 前缀到所有内部文件。 |
-o value | 其他 FUSE 选项,详见 FUSE 挂载选项 |
项 | 说明 |
---|
--subdir=value | 挂载指定的子目录,默认挂载整个文件系统。 |
--backup-meta=3600 | 自动备份元数据到对象存储的间隔时间;单位秒,默认 3600,设为 0 表示不备份。 |
--backup-skip-trash 新增自 v1.2 | 备份元数据时跳过回收站中的文件和目录。 |
--heartbeat=12 | 发送心跳的间隔(单位秒),建议所有客户端使用相同的心跳值 (默认:12) |
--read-only | 只读模式,只允许 lookup 和 read 请求。注意,只读模式隐含了 --no-bgjob ,因此只读客户端不会运行后台任务。 |
--no-bgjob | 禁用后台任务,默认为 false,也就是说客户端会默认运行后台任务。后台任务包含: 特别地,与企业版不同,社区版碎片合并(Compaction)不受该选项的影响,而是随着文件读写操作,自动判断是否需要合并,然后异步执行(以 Redis 为例,在 pkg/meta/base.go 中搜索 compactChunk ) |
--atime-mode=noatime 新增自 v1.1 | 控制如何更新 atime(文件最后被访问的时间)。支持以下模式:
noatime (默认):仅在文件创建和主动调用 SetAttr 时设置,平时访问与修改文件不影响 atime 值。考虑到更新 atime 需要运行额外的事务,对性能有影响,因此默认关闭。relatime :仅在 mtime(文件内容修改时间)或 ctime(文件元数据修改时间)比 atime 新,或者 atime 超过 24 小时没有更新时进行更新。strictatime :持续更新 atime
|
--skip-dir-nlink=20 新增自 v1.1 | 跳过更新目录 nlink 前的重试次数 (仅用于 TKV, 0 代表永不跳过) (默认:20) |
--skip-dir-mtime=100ms 新增自 v1.2 | 如果 mtime 差异小于该值(默认值:100ms),则跳过更新目录的属性。 |
元数据缓存的介绍和使用,详见「内核元数据缓存」及「客户端内存元数据缓存」。
项 | 说明 |
---|
--attr-cache=1 | 属性缓存过期时间;单位为秒,默认为 1。 |
--entry-cache=1 | 文件项缓存过期时间;单位为秒,默认为 1。 |
--dir-entry-cache=1 | 目录项缓存过期时间;单位为秒,默认为 1。 |
--open-cache=0 | 打开的文件的缓存过期时间,单位为秒,默认为 0,代表关闭该特性。 |
--open-cache-limit=value 新增自 v1.1 | 允许缓存的最大文件个数 (软限制,0 代表不限制) (默认:10000) |
数据存储参数
项 | 说明 |
---|
--storage=file | 对象存储类型 (例如 s3 、gs 、oss 、cos ) (默认:"file" ,参考文档查看所有支持的对象存储类型) |
--bucket=value | 为当前挂载点指定访问对象存储的 Endpoint。 |
--storage-class value 新增自 v1.1 | 当前客户端写入数据的存储类型 |
--get-timeout=60 | 下载一个对象的超时时间;单位为秒 (默认:60) |
--put-timeout=60 | 上传一个对象的超时时间;单位为秒 (默认:60) |
--io-retries=10 | 网络异常时的重试次数,元数据请求的重试次数也由这个选项控制。如果超过重试次数将会返回 EIO Input/output error 错误。(默认:10) |
--max-uploads=20 | 上传并发度,默认为 20。对于粒度为 4M 的写入模式,20 并发已经是很高的默认值,在这样的写入模式下,提高写并发往往需要伴随增大 --buffer-size , 详见「读写缓冲区」。但面对百 K 级别的小随机写,并发量大的时候很容易产生阻塞等待,造成写入速度恶化。如果无法改善应用写模式,对其进行合并,那么需要考虑采用更高的写并发,避免排队等待。 |
--max-stage-write=0 新增自 v1.2 | 异步写入数据块到缓存盘的最大并发数,如果达到最大并发数则会直接上传对象存储(此选项仅在启用「客户端写缓存」时有效)(默认值:0,即没有并发限制) |
--max-deletes=10 | 删除对象的连接数 (默认:10) |
--upload-limit=0 | 上传带宽限制,单位为 Mbps (默认:0) |
--download-limit=0 | 下载带宽限制,单位为 Mbps (默认:0) |
数据缓存相关参数
项 | 说明 |
---|
--buffer-size=300 | 读写缓冲区的总大小;单位为 MiB (默认:300)。阅读「读写缓冲区」了解更多。 |
--prefetch=1 | 并发预读 N 个块 (默认:1)。阅读「客户端读缓存」了解更多。 |
--writeback | 后台异步上传对象,默认为 false。阅读「客户端写缓存」了解更多。 |
--upload-delay=0 | 启用 --writeback 后,可以使用该选项控制数据延迟上传到对象存储,默认为 0 秒,相当于写入后立刻上传。该选项也支持 s (秒)、m (分)、h (时)这些单位。如果在等待的时间内数据被应用删除,则无需再上传到对象存储。如果数据只是临时落盘,可以考虑用该选项节约资源。阅读「客户端写缓存」了解更多。 |
--upload-hours 新增自 v1.2 | 启用 --writeback 后,只在一天中指定的时间段上传数据块。参数的格式为 <起始小时>,<结束小时> (含「起始小时」,但是不含「结束小时」,「起始小时」必须小于或者大于「结束小时」),其中 <小时> 的取值范围为 0 到 23。例如 0,6 表示只在每天 0:00 至 5:59 之间上传数据块、23,3 表示只在每天 23:00 至第二天 2:59 之间上传数据块。 |
--cache-dir=value | 本地缓存目录路径;使用 : (Linux、macOS)或 ; (Windows)隔离多个路径 (默认:$HOME/.juicefs/cache 或 /var/jfsCache )。阅读「客户端读缓存」了解更多。 |
--cache-mode value 新增自 v1.1 | 缓存块的文件权限 (默认:"0600") |
--cache-size=102400 | 缓存对象的总大小;单位为 MiB (默认:102400)。阅读「客户端读缓存」了解更多。 |
--free-space-ratio=0.1 | 最小剩余空间比例,默认为 0.1。如果启用了「客户端写缓存」,则该参数还控制着写缓存占用空间。阅读「客户端读缓存」了解更多。 |
--cache-partial-only | 仅缓存随机小块读,默认为 false。阅读「客户端读缓存」了解更多。 |
--verify-cache-checksum=full 新增自 v1.1 | 缓存数据一致性检查级别,启用 Checksum 校验后,生成缓存文件时会对数据切分做 Checksum 并记录于文件末尾,供读缓存时进行校验。支持以下级别:
none :禁用一致性检查,如果本地数据被篡改,将会读到错误数据;full (默认):读完整数据块时才校验,适合顺序读场景;shrink :对读范围内的切片数据进行校验,校验范围不包含读边界所在的切片(可以理解为开区间),适合随机读场景;extend :对读范围 内的切片数据进行校验,校验范围同时包含读边界所在的切片(可以理解为闭区间),因此将带来一定程度的读放大,适合对正确性有极致要求的随机读场景。
|
--cache-eviction=2-random 新增自 v1.1 | 缓存逐出策略(none 或 2-random )(默认值:2-random) |
--cache-scan-interval=1h 新增自 v1.1 | 扫描缓存目录重建内存索引的间隔(以秒为单位)(默认值:1h) |
--cache-expire=0 新增自 v1.2 | 超过设置的时间未被访问的缓存块将会被自动清除(即使 --cache-eviction 的值为 none ,这些缓存块也会被删除),单位为秒,值为 0 表示永不过期(默认值:0) |
监控相关参数
项 | 说明 |
---|
--metrics=127.0.0.1:9567 | 监控数据导出地址,默认为 127.0.0.1:9567 。 |
--custom-labels | 监控指标自定义标签,格式为 key1:value1;key2:value2 (默认:"") |
--consul=127.0.0.1:8500 | Consul 注册中心地址,默认为 127.0.0.1:8500 。 |
--no-usage-report | 不发送使用量信息 (默认:false) |
juicefs umount
卸载 JuiceFS 文件系统。
juicefs umount [command options] MOUNTPOINT
juicefs umount /mnt/jfs
项 | 说明 |
---|
-f, --force | 强制卸载一个忙碌的文件系统 (默认:false) |
--flush 新增自 v1.1 | 等待所有暂存块被刷新 (默认值:false) |
juicefs gateway
启动一个 S3 兼容的网关,详见「配置 JuiceFS S3 网关」。
juicefs gateway [command options] META-URL ADDRESS
export MINIO_ROOT_USER=admin
export MINIO_ROOT_PASSWORD=12345678
juicefs gateway redis://localhost localhost:9000
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
ADDRESS | S3 网关地址和监听的端口,例如:localhost:9000 |
--log value 新增自 v1.2 | 网关日志路径 |
--access-log=path | 访问日志的路径 |
--background, -d 新增自 v1.2 | 后台运行(默认:false) |
--no-banner | 禁用 MinIO 的启动信息(默认:false) |
--multi-buckets | 使用第一级目录作为存储桶(默认:false) |
--keep-etag | 保留对象上传时的 ETag(默认:false) |
--umask=022 | 新文件和新目录的 umask 的八进制格式(默认值:022) |
--object-tag 新增自 v1.2 | 启用对象标签 API |
--domain value 新增自 v1.2 | 虚拟主机样式请求的域 |
--refresh-iam-interval=5m 新增自 v1.2 | 重新加载网关 IAM 配置的间隔时间(默认值:5 分钟) |
项 | 说明 |
---|
--subdir=value | 挂载指定的子目录,默认挂载整个文件系统。 |
--backup-meta=3600 | 自动备份元数据到对象存储的间隔时间;单位秒,默认 3600,设为 0 表示不备份。 |
--backup-skip-trash 新增自 v1.2 | 备份元数据时跳过回收站中的文件和目录。 |
--heartbeat=12 | 发送心跳的间隔(单位秒),建议所有客户端使用相同的心跳值 (默认:12) |
--read-only | 只读模式,只允许 lookup 和 read 请求。注意,只读模式隐含了 --no-bgjob ,因此只读客户端不会运行后台任务。 |
--no-bgjob | 禁用后台任务,默认为 false,也就是说客户端会默认运行后台任务。后台任务包含: 特别地,与企业版不同,社区版碎片合并(Compaction)不受该选项的影响,而是随着文件读写操作,自动判断是否需要合并,然后异步执行(以 Redis 为例,在 pkg/meta/base.go 中搜索 compactChunk ) |
--atime-mode=noatime 新增自 v1.1 | 控制如何更新 atime(文件最后被访问的时间)。支持以下模式:
noatime (默认):仅在文件创建和主动调用 SetAttr 时设置,平时访问与修改文件不影响 atime 值。考虑到更新 atime 需要运行额外的事务,对性能有影响,因此默认关闭。relatime :仅在 mtime(文件内容修改时间)或 ctime(文件元数据修改时间)比 atime 新,或者 atime 超过 24 小时没有更新时进行更新。strictatime :持续更新 atime
|
--skip-dir-nlink=20 新增自 v1.1 | 跳过更新目录 nlink 前的重试次数 (仅用于 TKV, 0 代表永不跳过) (默认:20) |
--skip-dir-mtime=100ms 新增自 v1.2 | 如果 mtime 差异小于该值(默认值:100ms),则跳过更新目录的属性。 |
元数据缓存的介绍和使用,详见「内核元数据缓存」及「客户端内存元数据缓存」。
项 | 说明 |
---|
--attr-cache=1 | 属性缓存过期时间;单位为秒,默认为 1。 |
--entry-cache=1 | 文件项缓存过期时间;单位为秒,默认为 1。 |
--dir-entry-cache=1 | 目录项缓存过期时间;单位为秒,默认为 1。 |
--open-cache=0 | 打开的文件的缓存过期时间,单位为秒,默认为 0,代表关闭该特性。 |
--open-cache-limit=value 新增自 v1.1 | 允许缓存的最大文件个数 (软限制,0 代表不限制) (默认:10000) |
数据存储参数
项 | 说明 |
---|
--storage=file | 对象存储类型 (例如 s3 、gs 、oss 、cos ) (默认:"file" ,参考文档查看所有支持的对象存储类型) |
--bucket=value | 为当前挂载点指定访问对象存储的 Endpoint。 |
--storage-class value 新增自 v1.1 | 当前客户端写入数据的存储类型 |
--get-timeout=60 | 下载一个对象的超时时间;单位为秒 (默认:60) |
--put-timeout=60 | 上传一个对象的超时时间;单位为秒 (默认:60) |
--io-retries=10 | 网络异常时的重试次数,元数据请求的重试次数也由这个选项控制。如果超过重试次数将会返回 EIO Input/output error 错误。(默认:10) |
--max-uploads=20 | 上传并发度,默认为 20。对于粒度为 4M 的写入模式,20 并发已经是很高的默认值,在这样的写入模式下,提高写并发往往需要伴随增大 --buffer-size , 详见「读写缓冲区」。但面对百 K 级别的小随机写,并发量大的时候很容易产生阻塞等待,造成写入速度恶化。如果无法改善应用写模式,对其进行合并,那么需要考虑采用更高的写并发,避免排队等待。 |
--max-stage-write=0 新增自 v1.2 | 异步写入数据块到缓存盘的最大并发数,如果达到最大并发数则会直接上传对象存储(此选项仅在启用「客户端写缓存」时有效)(默认值:0,即没有并发限制) |
--max-deletes=10 | 删除对象的连接数 (默认:10) |
--upload-limit=0 | 上传带宽限制,单位为 Mbps (默认:0) |
--download-limit=0 | 下载带宽限制,单位为 Mbps (默认:0) |
数据缓存相关参数
项 | 说明 |
---|
--buffer-size=300 | 读写缓冲区的总大小;单位为 MiB (默认:300)。阅读「读写缓冲区」了解更多。 |
--prefetch=1 | 并发预读 N 个块 (默认:1)。阅读「客户端读缓存」了解更多。 |
--writeback | 后台异步上传对象,默认为 false。阅读「客户端写缓存」了解更多。 |
--upload-delay=0 | 启用 --writeback 后,可以使用该选项控制数据延迟上传到对象存储,默认为 0 秒,相当于写入后立刻上传。该选项也支持 s (秒)、m (分)、h (时)这些单位。如果在等待的时间内数据被应用删除,则无需再上传到对象存储。如果数据只是临时落盘,可以考虑用该选项节约资源。阅读「客户端写缓存」了解更多。 |
--upload-hours 新增自 v1.2 | 启用 --writeback 后,只在一天中指定的时间段上传数据块。参数的格式为 <起始小时>,<结束小时> (含「起始小时」,但是不含「结束小时」,「起始小时」必须小于或者大于「结束小时」),其中 <小时> 的取值范围为 0 到 23。例如 0,6 表示只在每天 0:00 至 5:59 之间上传数据块、23,3 表示只在每天 23:00 至第二天 2:59 之间上传数据块。 |
--cache-dir=value | 本地缓存目录路径;使用 : (Linux、macOS)或 ; (Windows)隔离多个路径 (默认:$HOME/.juicefs/cache 或 /var/jfsCache )。阅读「客户端读缓存」了解更多。 |
--cache-mode value 新增自 v1.1 | 缓存块的文件权限 (默认:"0600") |
--cache-size=102400 | 缓存对象的总大小;单位为 MiB (默认:102400)。阅读「客户端读缓存」了解更多。 |
--free-space-ratio=0.1 | 最小剩余空间比例,默认为 0.1。如果启用了「客户端写缓存」,则该参数还控制着写缓存占用空间。阅读「客户端读缓存」了解更多。 |
--cache-partial-only | 仅缓存随机小块读,默认为 false。阅读「客户端读缓存」了解更多。 |
--verify-cache-checksum=full 新增自 v1.1 | 缓存数据一致性检查级别,启用 Checksum 校验后,生成缓存文件时会对数据切分做 Checksum 并记录于文件末尾,供读缓存时进 行校验。支持以下级别:
none :禁用一致性检查,如果本地数据被篡改,将会读到错误数据;full (默认):读完整数据块时才校验,适合顺序读场景;shrink :对读范围内的切片数据进行校验,校验范围不包含读边界所在的切片(可以理解为开区间),适合随机读场景;extend :对读范围内的切片数据进行校验,校验范围同时包含读边界所在的切片(可以理解为闭区间),因此将带来一定程度的读放大,适合对正确性有极致要求的随机读场景。
|
--cache-eviction=2-random 新增自 v1.1 | 缓存逐出策略(none 或 2-random )(默认值:2-random) |
--cache-scan-interval=1h 新增自 v1.1 | 扫描缓存目录重建内存索引的间隔(以秒为单位)(默认值:1h) |
--cache-expire=0 新增自 v1.2 | 超过设置的时间未被访问的缓存块将会被自动清除(即使 --cache-eviction 的值为 none ,这些缓存块也会被删除),单位为秒,值为 0 表示永不过期(默认值:0) |
监控相关参数
项 | 说明 |
---|
--metrics=127.0.0.1:9567 | 监控数据导出地址,默认为 127.0.0.1:9567 。 |
--custom-labels | 监控指标自定义标签,格式为 key1:value1;key2:value2 (默认:"") |
--consul=127.0.0.1:8500 | Consul 注册中心地址,默认为 127.0.0.1:8500 。 |
--no-usage-report | 不发送使用量信息 (默认:false) |
juicefs webdav
启动一个 WebDAV 服务,阅读「配置 WebDAV 服务」以了解更多。
juicefs webdav [command options] META-URL ADDRESS
juicefs webdav redis://localhost localhost:9007
项 | 说明 |
---|
META-URL | 用于元数据存储的数据库 URL,详情查看「JuiceFS 支持的元数据引擎」。 |
ADDRESS | WebDAV 服务监听的地址与端口,例如:localhost:9007 |
--cert-file 新增自 v1.1 | HTTPS 证书文件 |
--key-file 新增自 v1.1 | HTTPS 密钥文件 |
--gzip | 通过 gzip 压缩提供的文件(默认值:false) |
--disallowList | 禁止列出目录(默认值:false) |
--log value 新增自 v1.2 | WebDAV 日志路径 |
--access-log=path | 访问日志的路径 |
--background, -d 新增自 v1.2 | 后台运行(默认:false) |
项 | 说明 |
---|
--subdir=value | 挂载指定的子目录,默认挂载整个文件系统。 |
--backup-meta=3600 | 自动备份元数据到对象存储的间隔时间;单位秒,默认 3600,设为 0 表示不备份。 |
--backup-skip-trash 新增自 v1.2 | 备份元数据时跳过回收站中的文件和目录。 |
--heartbeat=12 | 发送心跳的间隔(单位秒),建议所有客户端使用相同的心跳值 (默认:12) |
--read-only | 只读模式,只允许 lookup 和 read 请求。注意,只读模式隐含了 --no-bgjob ,因此只读客户端不会运行后台任务。 |
--no-bgjob | 禁用后台任务,默认为 false,也就是说客户端会默认运行后台任务。后台任务包含: 特别地,与企业版不同,社区版碎片合并(Compaction)不受该选项的影响,而是随着文件读写操作,自动判断是否需要合并,然后异步执行(以 Redis 为例,在 pkg/meta/base.go 中搜索 compactChunk ) |
--atime-mode=noatime 新增自 v1.1 | 控制如何更新 atime(文件最后被访问的时间)。支持以下模式:
noatime (默认):仅在文件创建和主动调用 SetAttr 时设置,平时访问与修改文件不影响 atime 值。考虑到更新 atime 需要运行额外的事务,对性能有影响,因此默认关闭。relatime :仅在 mtime(文件内容修改时间)或 ctime(文件元数据修改时间)比 atime 新,或者 atime 超过 24 小时没有更新时进行更新。strictatime :持续更新 atime
|
--skip-dir-nlink=20 新增自 v1.1 | 跳过更新目录 nlink 前的重试次数 (仅用于 TKV, 0 代表永不跳过) (默认:20) |
--skip-dir-mtime=100ms 新增自 v1.2 | 如果 mtime 差异小于该值(默认值:100ms),则跳过更新目录的属性。 |
元数据缓存的介绍和使用,详见「内核元数据缓存」及「客户端内存元数据缓存」。
项 | 说明 |
---|
--attr-cache=1 | 属性缓存过期时间;单位为秒,默认为 1。 |
--entry-cache=1 | 文件项缓存过期时间;单位为秒,默认为 1。 |
--dir-entry-cache=1 | 目录项缓存过期时间;单位为秒,默认为 1。 |
--open-cache=0 | 打开的文件的缓存过期时间,单位为秒,默认为 0,代表关闭该特性。 |
--open-cache-limit=value 新增自 v1.1 | 允许缓存的最大文件个数 (软限制,0 代表不限制) (默认:10000) |
数据存储参数
项 | 说明 |
---|
--storage=file | 对象存储类型 (例如 s3 、gs 、oss 、cos ) (默认:"file" ,参考文档查看所有支持的对象存储类型) |
--bucket=value | 为当前挂载点指定访问对象存储的 Endpoint。 |
--storage-class value 新增自 v1.1 | 当前客户端写入数据的存储类型 |
--get-timeout=60 | 下载一个对象的超时时间;单位为秒 (默认:60) |
--put-timeout=60 | 上传一个对象的超时时间;单位为秒 (默认:60) |
--io-retries=10 | 网络异常时的重试次数,元数据请求的重试次数也由这个选项控制。如果超过重试次数将会返回 EIO Input/output error 错误。(默认:10) |
--max-uploads=20 | 上传并发度,默认为 20。对于粒度为 4M 的写入模式,20 并发已经是很高的默认值,在这样的写入模式下,提高写并发往往需要伴随增大 --buffer-size , 详见「读写缓冲区」。但面对百 K 级别的小随机写,并发量大的时候很容易产生阻塞等待,造成写入速度恶化。如果无法改善应用写模式,对其进行合并,那么需要考虑采用更高的写并发,避免排队等待。 |
--max-stage-write=0 新增自 v1.2 | 异步写入数据块到缓存盘的最大并发数,如果达到最大并发数则会直接上传对象存储(此选项仅在启用「客户端写缓存」时有效)(默认值:0,即没有并发限制) |
--max-deletes=10 | 删除对象的连接数 (默认:10) |
--upload-limit=0 | 上传带宽限制,单位为 Mbps (默认:0) |
--download-limit=0 | 下载带宽限制,单位为 Mbps (默认:0) |
数据缓存相关参数
项 | 说明 |
---|
--buffer-size=300 | 读写缓冲区的总大小;单位为 MiB (默认:300)。阅读「读写缓冲区」了解更多。 |
--prefetch=1 | 并发预读 N 个块 (默认:1)。阅读「客户端读缓存」了解更多。 |
--writeback | 后台异步上传对象,默认为 false。阅读「客户端写缓存」了解更多。 |
--upload-delay=0 | 启用 --writeback 后,可以使用该选项控制数据延迟上传到对象存储,默认为 0 秒,相当于写入后立刻上传。该选项也支持 s (秒)、m (分)、h (时)这些单位。如果在等待的时间内数据被应用删除,则无需再上传到对象存储。如果数据只是临时落盘,可以考虑用该选项节约资源。阅读「客户端写缓存」了解更多。 |
--upload-hours 新增自 v1.2 | 启用 --writeback 后,只在一天中指定的时间段上传数据块。参数的格式为 <起始小时>,<结束小时> (含「起始小时」,但是不含「结束小时」,「起始小时」必须小于或者大于「结束小时」),其中 <小时> 的取值范围为 0 到 23。例如 0,6 表示只在每天 0:00 至 5:59 之间上传数据块、23,3 表示只在每天 23:00 至第二天 2:59 之间上传数据块。 |
--cache-dir=value | 本地缓存目录路径;使用 : (Linux、macOS)或 ; (Windows)隔离多个路径 (默认:$HOME/.juicefs/cache 或 /var/jfsCache )。阅读「客户端读缓存」了解更多。 |
--cache-mode value 新增自 v1.1 | 缓存块的文件权限 (默认:"0600") |
--cache-size=102400 | 缓存对象的总大小;单位为 MiB (默认:102400)。阅读「客户端读缓存」了解更多。 |
--free-space-ratio=0.1 | 最小剩余空间比例,默认为 0.1。如果启用了「客户端写缓存」,则该参数还控制着写缓存占用空间。阅读「客户端读缓存」了解更多。 |
--cache-partial-only | 仅缓存随机小块读,默认为 false。阅读「客户端读缓存」了解更多。 |
--verify-cache-checksum=full 新增自 v1.1 | 缓存数据一致性检查级别,启用 Checksum 校验后,生成缓存文件时会对数据切分做 Checksum 并记录于文件末尾,供读缓存时进行校验。支持以下级别:
none :禁用一致性检查,如果本地数据被篡改,将会读到错误数据;full (默认):读完整数据块时才校验,适合顺序读场景;shrink :对读范围内的切片数据进行校验,校验范围不包含读边界所在的切片(可以理解为开区间),适合随机读场景;extend :对读范围内的切片数据进行校验,校验范围同时包含读边界所在的切片(可以理 解为闭区间),因此将带来一定程度的读放大,适合对正确性有极致要求的随机读场景。
|
--cache-eviction=2-random 新增自 v1.1 | 缓存逐出策略(none 或 2-random )(默认值:2-random) |
--cache-scan-interval=1h 新增自 v1.1 | 扫描缓存目录重建内存索引的间隔(以秒为单位)(默认值:1h) |
--cache-expire=0 新增自 v1.2 | 超过设置的时间未被访问的缓存块将会被自动清除(即使 --cache-eviction 的值为 none ,这些缓存块也会被删除),单位为秒,值为 0 表示永不过期(默认值:0) |
监控相关参数
项 | 说明 |
---|
--metrics=127.0.0.1:9567 | 监控数据导出地址,默认为 127.0.0.1:9567 。 |
--custom-labels | 监控指标自定义标签,格式为 key1:value1;key2:value2 (默认:"") |
--consul=127.0.0.1:8500 | Consul 注册中心地址,默认为 127.0.0.1:8500 。 |
--no-usage-report | 不发送使用量信息 (默认:false) |