上传1GBs,下载1KBs的原因终于找到了!细说网盘储存机制

有没有疑惑为什么云盘上传速度挺快,但是下载很慢?这和网盘储存机制是息息相关的。

2012年,一款名为「百度云」的“云储存软件”横空出世,凭借其便捷的资源分享和在线预览文件功能,赢得了大部分用户好评。并在短短的两个月时间内,个人用户就已突破1000万,让无数人看到了云存储的潜力。

图片1.百度云.png

起初,由于云服务的储存规模较小,再分到每个用户身上就更少了,大约仅有10个G左右。但随着云存储的不断发展,各类网盘也相继出现,并互相竞争。为了吸引用户,厂商们就开始免费送储存空间,所以用户的个人空间慢慢变成了1T、2T甚至是10T。

随着慢慢的使用,目前大多数的网盘都有一个特点:上传速度超快,个人剩余空间多,唯独下载速度很慢慢,这究竟是什么原因造成的呢?下面就跟着小编从网盘储存机制入手,来一探究竟吧!

网盘储存机制

首先来看看网盘为什么可用空间多,上传速度快?这和网盘储存机制息息相关。

假设需要为每个用户提供1G的云存储空间,按照正常思维来看,如果硬盘的储存空间为1000G,那么就可以为1000个用户提供数据储存。但是实际上,每个用户根本不会上传 1G 的数据将容量占满。

图片2.网盘容量.png

也就是说,1000G的硬盘分给 1000个用户使用,其有效利用的空间仅仅占很少一部分。比如以每个人上传50M的数据为例,总利用空间为 50M*1000=50G(大约),而剩余的950G 就完全浪费了。

为了解决上述问题,各大厂商就发明了「存储集群」。

图片3.服务器.png

通过将一个用户的数据,分配到多个服务器中存储,并确保在个人用户那里,仍然是 1G 的连续储存空间。甚至还可以将前一个服务器充分塞满后,在将数据储存再下一个服务器中。简单来说,就是用多个硬盘来储存同一个数据。这样既保证了储存空间的利用率,也避免了部分用户在上传大数据时,能够提供足量的空间支持。

图片4.存储.png

但是随着用户的不断增长,存储的数据就会出现重叠现象,不仅浪费了储存空间,还会影响到用户们的上传速度,所以厂商们又推出了「秒传」技术。

图片5.秒传.png

当用户在上传一个文件时,秒传技术可通过比较现有文件的「MD5值」,来判断上传的数据是否存在。如果数据库中本身就存在相同的文件,只是文件名不同时,系统将会自动为其分配文件名,并将数据“引用”到个人数据库下;如果完全一致,那么系统就会直接将现有文件引用到个人数据库下,进而达到“秒传”的目的。

图片6.流程示意图.png

但是如果每上传一个文件,都需要进行MD5 值对比的话,就将使得原本负荷就大的服务器变得更是雪山加霜。

所以工程师们改进网盘储存机制,在每个客户端上,设计了一个「上传控件」,用于检测用户上传的数据,一旦发现与服务器中的某个数据一致,就取消上传,直接在用户端标记出此文件,并未真的占有储存空间。

图片7.某些上传控件.png

经过以上两种方法,就基本满足了用户在快速上传文件的同时,拥有了超大的存储空间。

说完了上传文件和储存文件后,我们再回过头来看看,为什么大多数网盘都存在文件下载速度慢的现象,这到底是什么原因造成的?

图片8.网盘下载速度慢.png

通过网盘下载文件,其实就是将网盘服务器中的数据,「拷贝」到本地计算机中。简单来说,就是一个文件复制过程,只不过这个过程是在线上进行的。

就大多数网盘而言,它们会在「本地客户端」中内嵌一种专用的「FTP服务器」,并与总服务器之间建立一种特殊的链接关系。

图片9.下载.png

当用户需要下载文件时,位于本地端的FTP服务器,就会给总服务器发送一条下载「密钥」,总服务器在接受到密钥后,就会调取储存文件并返回到本地FTP服务器当中,当用户再次点击下载按钮后,文件即可被下载下来。

图片10.FTP服务器.png

但如果在FTP服务器和用户之间,或是FTP服务器与总服务器之间有一方受到限制,下载速度就将受到影响。除此之外,如果资源过于久远,下载速度慢的情况依然会出现。所以,造成文件下载速度慢的原因是多方面的,任何环节受到影响,就会导致下载速度变慢。

但以目前环境来看,云存储这项服务对厂商的成本要求越来越高,不仅需要在服务器硬件、网络带宽、数据维护等方面花费成本,而且还需要对非法数据进行监管。

图片11.网盘开通会员界面.png

毕竟厂商也是需要吃饭的,所以根据网盘储存机制,他们就在某个环节中设卡,有需求和对比才会有购买,进而促使大家开通会员,获取利润。结果大家也很清楚,非会员和会员之间的差距显而易见。

目前,网盘厂家在争夺市场,百度网盘、阿里云盘、夸克网盘等等,在千方百计留住用户、争夺市场,厂家的竞争对于消费者来说是个好消息。

结论

总的来说,厂家为了盈利,根据网盘储存机制给下载和上传设限,所以有时下载速度才会这么慢。

云服务虽然便利,但目前为止,存在的问题还比较多。同时不少「违法数据」还需要得到相关部门的监管。然而小伙伴们所吐槽的“只有开会员才能提升下载速度”的现象(甚至开了会员依旧慢),对厂商而言,仍然是一大难题。 当然,对我们自身而言,可以选择适合自己的方式,比如IDM、FDM下载器等。

本文编辑:@ 小淙

©本文著作权归电手所有,未经电手许可,不得转载使用。