征集类似于群晖Hyper Backup的多重/差量文件备份解决方案

以前备份一直都靠右手（鼠标流），后来增加了老婆、老爸老妈的文档照片数据也一起备份，就开始启用FreeFileSync，存为ffs_batch批处理，通过开机启动的命令行自动化。

举个栗子：

1. net use K:\\MYNAS\backup
   
2. REM 备份用户文件到 NAS 服务器
   
3. echo 备份用户文件到 NAS 服务器……
   
4. "C:\ProgramFiles\FreeFileSync\FreeFileSync.exe""%USERPROFILE%\Documents\FreeFileSync\同步我的全部文档.ffs_batch"
   
5. echo 用户文件备份和同步任务全部完成，3秒钟后自动关闭此窗口。
   
6. ping 127.0.0.1 -n 3 > nul
   

复制代码

这样Windows每次开机用户登录就能自动备份用户数据了。

但是最近数据备份的内容和范围越来越大了，一蛋疼连单位的OA和网站每日备份也要扛下来，都靠人肉明显操作太复杂工作量太大。

自己家好办，因为入了群晖，群晖Hyper Backup，Cloud Station Backup，Cloud Station Drive功能很强。

大概的说要求有以下几点——


备份目录不暴露——可以取消NFS和CIFS访问权限，只有存储内部或者通过6690端口群晖私有协议访问，不会被加密勒索木马直接写入替换加密文件


可以备份指定目录下文件和指定应用的数据


添加计划任务定时备份或者Once备份

差量备份，只备份上一个版本的新增删除差量文件，备份空间占用较小。


多版本备份，可以按月，按周，按天保留最后的指定个数版本，哪怕定时炸弹一样潜伏的勒索病毒也不能经年累月的潜伏，加密所有历史文件。


内建备份文件浏览器，可以按时间逐一review所有的历史文件版本


可以按备份版本，时间批次，目录，逐个文件选择还原文件到原备份地址或者提取查看文件内容。

这完全是理想中的备份方式和方案，感人的是群晖Hyper Backup一站式解决。

那么问题来了，我不方便推荐单位买台群晖NAS，也不可能装一台黑群晖——单位的数据安全和责任不能都落在自己头上，

Windows，Linux不同系统下有同样功能的一站式备份解决方案吗？

求大家推荐。

这个帖子里干货很多呀

刚刚报明年预算里面 采购备份系统，参考品牌：爱数 飞腾

wheat0r 发表于 2017-8-13 12:00
作为爱数某地区的代理商，我觉得LZ这个需求做一个软件版AnyBackup就好了，价格我不知道 ...

刚刚报明年预算里面 采购备份系统，参考品牌：爱数 飞腾

不过前面有个人先提到爱数了，所以最佳答案给他了。

Urbackup  解决你的一切困扰，公司用也没问题。

作为爱数某地区的代理商，我觉得LZ这个需求做一个软件版AnyBackup就好了，价格我不知道

LZ人呢。最后结果如何啊

jedi1029 发表于 2017-7-23 23:54
下面是 Bvckup 2 的 log，这次因为虚拟机关机了，释放了内存对应的VMDK文件，总数据量减少了

2017.07.23 2 ...

数据比对和网络带宽有什么关系？
数据比对的时候服务器和客户端仅需要交换极少量数据即可（类似于一个BT种子的数据量而已），又不是客户端要通过网络读取服务器端的对应文件，真正占用带宽的是后续的差异数据传输过程

而且你这个 throughput 226.20 MBps是怎么回事？千兆局域网才跑到200MBps的速度？还是计算速度的时候把比对消耗的时间也加入算了一个平均速度？

下面是 Bvckup 2 的 log，这次因为虚拟机关机了，释放了内存对应的VMDK文件，总数据量减少了

2017.07.23 23:24:09.078 (UTC+8) 2 1     Completed in 7 min 51 sec with no errors
2017.07.23 23:24:09.078 (UTC+8) 3 2         Read 104.00 GB, wrote 8.08 GB, throughput 226.20 MBps / 237184160 bps

可以看到 Bvckup 2 是需要读取源数据，然后去和目标数据比对的，这也是为什么百兆LAN下性能不满意的地方。而据我以前做IT听介绍（大概意思，太久不做IT了），赛门铁克的Netbackup 、康袱 等商用备份软件，他们的重复数据销重可以进行客户端销重的，减少传输数据量

resilio sync 的最新2.56版本更新说明提到修复CPU消耗问题，可能和我这种几十GB的文件处理有关系

jedi1029 发表于 2017-7-21 17:00
我用resilio sync试过2种 从头开始传输，和同步修改过的VMDK文件，因为效果不显，主要用 Bvckup 2同步虚拟 ...

难道 Bvckup 2 文件粒度 可变，所以对VMDK这种大块头文件计算的效率更高？

我一般同步的文件都是单个10G(大部分单个文件 1-2G)以内，没发现resilio有什么问题

我用resilio sync试过2种 从头开始传输，和同步修改过的VMDK文件，因为效果不显，主要用 Bvckup 2同步虚拟机文件

jedi1029 发表于 2017-7-21 15:42
Bvckup 2 同步说花20分钟 是好久没看作业状态了（以前没Bitlock加密数据在VMDK里面，好像是数分钟），一般 ...

遇到bug了？

我用J1800 CPU，2T数据也就丢一个晚上就计算完成了（另一台开的选择性同步，所以只需要计算，没有实际的数据传输，webui里看的状态），接近100G的数据也就20分钟搞定，CPU占用其实还好，可能瓶颈在硬盘读取速度

而且resilio sync同步也不需要全部计算完成才开始呀，计算完一个文件就可以开始传输这个文件了

另外resilio sync千兆跑不满倒是真的，可能是因为加密以及协议额外消耗了资源，向J1800 8G RAM的NAS上同步文件，大概速度可以到60M，直接SMB可以轻易跑到100M

Bvckup 2 同步说花20分钟 是好久没看作业状态了（以前没Bitlock加密数据在VMDK里面，好像是数分钟），一般都是后台启动后就去做美剧、动画了，经常是等中途插播时，看下作业情况，显示已于20分钟前完成（默认程序显示是这样的，如果等看完一集再去看会变成40分钟）。

Resilio sync 2.4 试过，不管是强制LAN传输或是默认传输，4MB数据分割，完全是个悲剧，CPU消耗很多，测试过2台不同配置的客户端，每次等了20分钟以上，还没开始传输。。。

jedi1029 发表于 2017-7-21 13:59
Bvckup 2，基于类似linux下Rsync的算法，在不同网络下，同步效果完全是2种感受：
千兆有线内网，最大60G ...

千兆局域网 100+G花了20分钟，这就是把整个文件传过去了，还什么仅传输修改部分呀

简单的差分同步软件，用Resilio sync（原BT sync）就可以了，默认4M粒度对文件分块，跨平台支持，使用私有协议，全程加密传输

909648183 发表于 2017-7-21 13:10
数据比对和是内网还是外网有什么关系？

消耗的都是机器自己的CPU和RAM资源，对网络带宽的占用没区别

Bvckup 2，基于类似linux下Rsync的算法，在不同网络下，同步效果完全是2种感受：
千兆有线内网，最大60G、最小22G的VMDK文件，其中VMDK里面有bitlock加密的驱动器文件，一共1XX G，完成同步是在 20分钟内
换成真千兆电力猫 D-LINK AV701 1对，平时TCP类测速可达到 80-9X Mbps，近似百兆有线网络的速度，要完成这一组的同步（差异数据差不多），需要2小时以上

wwh0501 发表于 2017-7-21 11:09
傲梅轻松备份专业版   

这个有人用过么？  如果个人用的话 不知道如何

AOMEI Backupper 就是你说的奥美备份，免费版国外有测试过，备份、恢复性能都还不错

jedi1029 发表于 2017-7-21 00:25
偷偷说下，在国内的某ODAY网站，能看到我推荐的大部分备份软件的XX版（这几年的新版本哦），不要PM我，自己 ...

数据比对和是内网还是外网有什么关系？

消耗的都是机器自己的CPU和RAM资源，对网络带宽的占用没区别

傲梅轻松备份专业版   

这个有人用过么？  如果个人用的话 不知道如何

偷偷说下，在国内的某ODAY网站，能看到我推荐的大部分备份软件的XX版（这几年的新版本哦），不要PM我，自己duckduckgo搜索吧

文件级别同步的话 我推荐 Syncovery，虽然是英文界面，比起 Goodsync、2BrightSparks 在超多小文件的目录同步上（比如某企鹅系列软件的聊天记录），性能有优势，并且不容易出错（同步到坚果云WebDAV模式，后2者比对目录时容易报错）
对VMDK、VHD等大体积虚拟机文件，或是镜像文件，推荐在千兆内网下用 Bvckup 2，基于类似linux下Rsync的算法，只同步修改的文件数据，如果是互联网环境，数据比对的开销非常大，还不如用贵的多的 double-take、R1soft，是的，没看错，这些实时同步数据软件，当然也支持同步离线数据，毕竟后者是商业环境设计的

我要释放最终推荐了：Acronis 系列软件，支持自己的付费云存储、好像支持备份到国际大的云服务商，Acronis专用文件协议备份到远程服务器，支持一键恢复、支持恢复盘在其他机器裸机恢复、支持无人的计划任务调度，应该支持无窗口的执行作业（命令行调配是没问题的），支持虚拟机备份、颗粒度恢复虚拟机里面的文件（单独恢复VMDK、VHD里面的某个文件，还有SQL、EXCHANGE邮箱，自然也支持历史文件列表），支持Linux、WIN、MAC 多平台OS，备份、恢复速度都比较快，对勒索软件也有专门的小软件（收购了其他厂商），支持重复数据删除，支持差异、增量备份，支持文件级、驱动级的备份，而且订阅广告邮件的话，经常有促销信息发过来。国内有不少代理商，某宝也有。

缺点：必须付费购买，版本很多（按功能模块区别卖的），贵的工作站版本自然支持上面的绝大多数功能，反勒索需要单独购买，不同OS版本需要单独买授权。不知道他家的云存储是否被墙。微软的 onedriver 抽风就是悲剧

为什么我用了好像、应该，因为这个软件太大，我以前作IT时用过很老的11系列（嘿嘿，暴露了我的年纪），效率能接受（备份开销、恢复时间都基本满意，还能控制开销）。

jedi1029 发表于 2017-7-20 17:33
是通过驱动，在源服务器内存中复制一份IO操作发到备机上，性能有一定影响。我现在不做IT了。
增量备份，不 ...

对了，我还有一个要求是无人值守，支持纯cmdline最好。