云存储同步详细设置

支持S3、七牛云、Backblaze B2、腾讯云OSS、阿里云OSS、其它服务器、谷歌云、Bunny、CF R2、华为云、Wasabi、Blob。

Tags:

一般我们转码后，有的对播放速度不满意，除了使用CDN加速外，还可以将切片上传到其它服务器、阿里云OSS、七牛云或者其他云存储进行加速。

目前已支持以下存储：

亚马逊S3，也适用于接口支持AWS S3的存储服务
Minio存储，适用于同步到其它服务器
Cloudflare R2
华为云
七牛云
阿里云OSS
腾讯云OSS
又拍云
Wasabi
Bunny
Google Cloud Storage
Azure Blob Storage
Backblaze B2

同步原理

提示：最新版已新增剧集封面同步，如当前使用版本无同步剧集封面功能，则推荐更新到最新版后使用。

同步期间会自动扫描所有已转码完成的视频切片文件夹和已发布的剧集封面文件夹，并根据你的同步设置，对文件夹里的截图、切片等文件进行上传和删除处理。

当某个视频的所有指定文件均上传成功，则会记录该视频，下次自动扫描的时候，会跳过该视频，也就不会再次上传，如果你更换了云存储，想重新上传该视频，可清空该视频的同步记录，从而会重新扫描并上传该视频，清空教程可看下面。

当某个视频有一个文件因网络问题上传失败，则该文件会有3次重试次数，如果3次依旧失败，那么该文件在本轮扫描不会再次上传，并且该文件所属的视频也不会被记录，也就是在下轮自动扫描中，会重新再次被扫描上传，可尽量防止因网络问题造成同步缺切片导致出现播放问题。

操作步骤

先前往EFV后台左侧 ⇒ 转码相关 ⇒ 云储存设置，添加对应的云存储，然后开启同步。

同步参数

云存储需要的同步参数在每个类型添加页面都有说明，这里说一下比较难找的几个。

S3的endpoints参考 ⇒ 点击查看。

Wasabi的endpoints参考 ⇒ 点击查看，基本上组成就是s3.region.wasabisys.com。

CF R2的endpoints参考 ⇒ 点击查看，基本上组成就是https://ACCOUNT_ID.r2.cloudflarestorage.com。

Backblaze B2的region查看方法，如果桶的endpoint为s3.us-west-002.backblazeb2.com那region可以填us-west-002，也就是中间的那段字符串。

Minio存储需要在接收同步的服务器上安装Minio，安装教程 ⇒ 点击查看；还需要让转码服务器和Minio服务器的时间一致，不然同步会失败，可使用date命令进行时间查看。

如果两台服务器时间不一样，可以分别在ssh客户端运行命令改一下：

rm -rf /etc/localtime
ln -s /usr/share/zoneinfo/Asia/Shanghai /etc/localtime

#查看修改后的时间
date

如何查看视频是否已同步

前往视频管理，先去标题栏把是否已同步调出来，方便标题栏查看。

然后点击其它筛选，选择已同步或未同步的视频即可。

如果你想查看剧集的封面是否已同步，可前往剧集状态筛选进行相关选择即可。

如何批量设置同步指定视频

提示：程序默认同步所有已转码完成的视频数据和已添加的剧集封面数据，如使用指定同步功能，则在配置云存储同步的时候，开启指定同步功能。

前往视频管理 ⇒ 然后批量选择你要同步的视频，点击下方批量设置同步即可

然后可以点击其它筛选，选择未设置指定同步，筛选出未设置的，方便快速进行设置其它视频。

指定剧集就需要前往剧集管理设置，方法都一样，最后如果你想清空设置的信息，可前往云存储设置页面，点击清空按钮，进行清空。

如何一键清空所有视频和剧集同步记录

可直接在云存储设置页面，点击清空按钮，进行清空，清空后，已同步的所有记录均会清空，这时候可重新同步所有数据。

同步日志查看

使用SSH客户端，比如Xshell软件，登录服务器，再使用命令：

pm2 log efvasync

修改监控间隔时间

目前默认间隔3分钟，先编辑helper/newcloud.js文件，需要修改代码await agenda.every("3 minutes", "auto async")，修改如下：

#分钟单位minute，且大于1分钟用minutes
1 minute
2 minutes
3 minutes

#秒钟单位，比如20秒
20 seconds

#如果我要修改为30秒，则具体代码
await agenda.every("30 seconds", "auto async");

根据自行情况进行相关修改，不建议改太低，否则会占用资源；修改完重新开启同步即可。

如何加快同步速度

提示：机器性能一般的默认即可，不然上传太猛服务器容易崩掉，或者被云存储服务商限制，导致上传出错，不是太赶速度就微调下即可。

目前同步原理就是，按时监听未同步的视频，然后每次只处理2个未同步视频，处理该未同步视频的时候，每次同时上传5个切片，依次传完。

如果你的视频量大，且都是长视频，并且同步远远赶不上秒切速度，则可以修改如下配置进行同步加速，编辑helper/newcloud.js文件，修改如下：

#同时处理未同步的视频数，默认2
asyncMapLimit(unAsyncFiles, 2, async (file)

#处理每个未同步的视频的时候，每次上传的切片数，默认5
await asyncMapLimit(files, 5, async (file)

最后修改完毕后，重新点击开启同步就行了。