» 您尚未登录:请 登录 | 注册 | 标签 | 帮助 | 小黑屋 |


发新话题
打印

数据私有云同步方案【20170830 Syncthing可堪一用】

posted by wap, platform: Chrome
Syncthing有个非常严重的问题,就是数据显示是不准的。最主要的就是传输速度。

我一直以为这玩意的客户端显示的速度是准确的,其实并不是,它显示的只是刷新速度显示周期点上的传输速度。同样的显示不准确的还有同步完成之类的,两端其实没同比完毕,但是依然显示同步完成

这也是我误以为大量细小文件传输速度慢的原因,其实实际上并不慢。今天我偶尔发现可能是数据不准,所以我决定不相信它显示的数据,通过实际同步完成时间看,发现确实可以在和Resilio Sync差不多的时间内完成大量细小文件的传输。

最后做了一次较大的测试,把24万多个文件,28000多个目录总共29G左右,包含大大小小各种类型的数据,一起也就花了5个多小时就同步完了,因为大量文件同时传输,所以速度基本把带宽占满,查看系统线程大概100~200个,非常吃资源,期间还把explorer搞死,最后只能掐死进程再启动解决。

测试了一整天,确定无误后,终于可以放心,这玩意确实可以取代Resilio Sync,多线程速度快,支持差分同步,支持多种版本管理,虽然配置略繁琐,而且有些小毛病,首次同步资源吃得太厉害,但是配好了还是OK,大部分设备的客户端都有(甚至几种BSD都有,但是没iOS,有Mac版)。


稍后有时间我还会尝试无中继,无发现服务器的情况下的运行情况,毕竟Resilio Sync就是被这样掐死的
===================================
用ubuntu的snap安装了nextcloud,测试了一整夜:

结果是,大量细小文件速度也很糟糕,和其它方案一样,这样就没啥意义了,如果大家都这样,我还不如用syncthing,好歹还比较接近resilio sync

===================================
在用SNAP安装nextCloud的同时挺无聊的,所以就顺便把SRC源代码目录同步了。结果发现,靠,又是非常非常慢了,几十K的速度,可见syncthing对于这类文件应该是硬伤了,好怀念resilio sync,那玩意真是神器。

snap是个好东西,让linux可以像Android一样装软件,一个包搞定,还是在沙盒里面跑,ubuntu自带的snap才几个软件,而且速度很慢,刚找到一个好网站,都是别人打包好的软件,用idm下载飞快
===================================
在GEN8上装好Syncthing,目前测试的内网,至少内网,这速度十分惊人。因为是WiFi连的,路由器没网线口了,插多了。看IP还是内网直连,这个速度绝对是极限了,而且相当稳定,7G的DATA目录同步了15分钟搞定。

但是移动端还是有硬伤,现在Android的权限管理严格,在Android上对照片放在存储卡上的情况,因为这类同步都要写数据文件到同步目录中去,所以导致你没权限写文件到DCIM目录下,所以同步不了!我日了个狗啊,换。Ubuntu装nextCloud很方便,直接用snap(下一代的包管理器):snap install nextcloud 就好了。

syncthing我还是继续挂着,明天到公司看看远程PC互联效果如何。
==========================
之所以把QNAP出掉,是因为感觉这厂方向离普通用户越来越远,哪怕是开发者这类比较爱折腾的用户也有点不喜欢了,每次发新闻邮件都是整了些啥啊?基础的扩展不更新也就算了,还时不时少几个。Qsync越来越难用,还出重大BUG,例如最近连点开头的文件也没法同步了,导致我.git目录全挂,而且设置里面把.开头目录从不同步里面移除也没用,BUG了,国外用户几个月前就提了,就是不改……
里面的软件也是老掉牙的,owncloud还是8,官方都10了,nextcloud都12了,还8.据说是因为自带的动态链接库版本太低,想升级都不行。

第三方软件市场也是,一个apache要1.2G,本来准备装个最新版owncloud,结果依赖这个玩意,我擦~,而且第三方市场还是国外的,速度贼慢,我花大量时间下载装好后,还他妈的挂了,起不起来,消耗了大量时间和精力。还有resiliosync也是,我装了官方打包好的版本,结果各种异常,不是起不起来,就是直接挂壁,导致只能把老的resilisync删掉,结果删掉后就没办法重新和我其他设备连上了,因为服务器被墙了嘛,哎。

痛定思痛,这类不花心思在普通用户身上的厂商,估计也就这样了,还是我自己折腾吧。所以出掉QNAP,换了GEN8。
==========================
折腾了2天Gen8,从完全白痴到至少会用了 。期间尝试装系统和各种服务走了很多弯路,导致来来回回安装了很多次,期间非常想念QNAP,那玩意太好用了!太傻瓜了!一般人千万不要折腾GEN8,折腾出来还不如QNAP好用!像我现在折腾了好久,也就把基本的玩意折腾好,离QNAP的水准还差老大一届,而且没有整合的统一GUI管理环境,各种Linux命令打来打去十分不方便。

目前我用Ubuntu为主,ESXi不支持4G内存,忘记加内存了,导致安装检测就过不去,虽然能修改代码通过,但是没意义,4G跑虚拟机其实不合适,就走容器和Docker吧。

Unraid也测试了,但是刚开始就卡住了,因为开始有个要输入邮箱地址给你验证的,这一步就过不去,无论如何死活收不到邮件,国内这环境真妈的操蛋!

本帖最后由 jun4rui 于 2017-8-29 12:19 通过手机版编辑


本帖最近评分记录
  • prowander 激骚 +1 最骚 Rated by wap 2017-8-6 08:05

TOP

posted by wap, platform: iPhone
iCloud



TOP

posted by wap, platform: Android
bysync局域网不是可以么


TOP

posted by wap, platform: Android
我之前用的owncloud,看样子要再拣回来了

TOP

posted by wap, platform: Chrome
引用:
原帖由 @藕是张力  于 2017-8-4 15:24 发表
iCloud
我觉得是各类软件里面最蠢的一个,没有之一

TOP

posted by wap, platform: Chrome
引用:
原帖由 @狂奔的牛牛  于 2017-8-4 15:41 发表
我之前用的owncloud,看样子要再拣回来了
有个分支叫NextCloud可以试试

TOP

posted by wap, platform: iPhone
引用:
原帖由 @jun4rui  于 2017-8-5 11:46 发表
我觉得是各类软件里面最蠢的一个,没有之一
哈哈,iCloud蠢到全自动,不适合你这样的聪明人

TOP

posted by wap, platform: Chrome
引用:
原帖由 @n2  于 2017-8-4 15:37 发表
bysync局域网不是可以么
局域网又没啥用,起码家里和公司就不好同步了,难道天天用手机做中转?

目前的选择还是有几个的:
- 话说国产有个开源的叫seafiles的,准备试试。
- OwnCloud和NextCloud
- QNAP自带的同步功能
- Syncthing


还有几个例如AeroFS号称去中心化IPFS直接就是个web文件系统等等也准备试试

TOP

posted by wap, platform: Samsung
引用:
原帖由 @藕是张力  于 2017-8-5 11:52 发表
哈哈,iCloud蠢到全自动,不适合你这样的聪明人
icloud如果容量200GB需要多少钱?

TOP

posted by wap, platform: iPhone
引用:
原帖由 @jiangst  于 2017-8-5 11:56 发表
icloud如果容量200GB需要多少钱?
200G21块,2T68块,不过50G6块够用了

还能全家共享容量

TOP

posted by wap, platform: ZUK Z1
owncloud不如seafile

TOP

posted by wap, platform: Samsung
引用:
原帖由 @藕是张力  于 2017-8-5 12:41 发表
200G21块,2T68块,不过50G6块够用了

还能全家共享容量
块是刀还是元?一年还是一月?国内速度还堪忧吗?

TOP

posted by wap, platform: Android
syncthing。

TOP

posted by wap, platform: Chrome
iCloud明显不如买Office365划算,至少一年的OneDrive是1TB的,淘宝就算不在打折的时候买,日常折扣也只要250左右。
iCloud光200G一年就要252了。

当然,对APPLE用户来说是刚需,非APPLE用户或者混合用户iCloud一点都不划算

TOP

posted by wap, platform: Android
引用:
原帖由 @jun4rui  于 2017-8-5 13:16 发表
iCloud明显不如买Office365划算,至少一年的OneDrive是1TB的,淘宝就算不在打折的时候买,日常折扣也只要250左右。
iCloud光200G一年就要252了。

当然,对APPLE用户来说是刚需,非APPLE用户或者混合用户iCloud一点都不划算
onedrive那抽风式同步我可不敢用。。。

TOP

发新话题
     
官方公众号及微博