揭秘红包场景下的高性能本地存储架构设计

前言:红包是最近兴起的全民参与的活动,2017年新春红包在参与人数和业务峰值上都到达了历史新高,其中红包除夕开奖峰值达到90W/s。近日,阿里云系统和块存储负责人、资深专家马涛从高性能本地存储架构设计、高性能本地存储要点分享、高性能本地存储性能数据等方面分享了高性能本地存储的实战经验。

以下内容根据现场分享和幻灯片整理而成。

红包业务特点

支付宝红包的大致业务架构包括单元化部署、统一接入、网关、DAO、数据库以及在线离线数据处理,整体流程很长。其中数据库在整理的交易链路中起到承上启下的作用。在红包业务中,数据库具有三大特点:

(1)峰值压力大。除夕夜开奖峰值达到90W/s,但这仅仅是从业务层面考虑,由于业务对数据库不仅仅是一次事务的压力,所以开奖峰值时数据库面临的压力可达百万之多。

(2)延迟要求苛刻。数据库单位时间内能承受的事务是有严格要求的,数据库延迟降低后,会大幅降低对数据库数目的需求,进而降低所需物理机配置,对整体的业务压力也会大幅度降低。

(3)自带容灾。对于大型互联网公司,他们的数据库业务实际上是有非常完善的容灾机制,数据库具备主从复制;业务层也会有本身的容灾机制。从存储来看,上层的容灾业务做得很全面。

针对红包业务,数据库的需求可以概括为两点:一是延迟要非常低,延迟要低于100us;二是IOPS一定要高,需要达到20W以上。

现有块存储产品

目前阿里提供了三种不同的块存储产品,分别是SSD云盘、高效云盘和普通云盘。三者详细的对比如上图所示,可以看到:三种块存储的产品都具有高可靠的优点,它们的数据可靠性都达到了99.9999999%;它们的缺点也非常明显,IOPS和延迟不达标,IOPS最高的SSD云盘也只有20000,延迟最低的SSD云盘也有500us之久,距离20w IOPS和100us延迟的要求还存在很大的差距,这就需要设计一款新的存储产品来满足双十一以及红包业务的要求。

因此,高性能本地存储应运而生。

高性能本地存储

高性能本地存储的设计目标是为了满足高性能数据库的要求,设计要点一是超高的IOPS;另一点是超低延迟。

通用的云本地存储常规架构如上图所示。以MySQL数据库为例,它通过POSIX API与云主机内核交互,云主机内核包括一个标准文件系统和标准的块设备接口;云主机内核下面是云物理机内核,它自上而下由标准文件系统、标准块设备接口、硬件驱动和硬件组成。当数据库发起IO访问时,要经过7个模块才能到达硬件;请求完成后,再经过7个模块才能返回给应用层,路径相当之长。云主机内核和云物理机内核中都包括标准文件系统和块设备层,也就是说同样的模块可能在云主机内跑了一遍,还需要在云物理机上再运行一遍,功能上重叠,实现方式上也基本类似;重叠的模块导致请求访问时的路径很长,对于业务和数据库性能造成的的直观影响是延迟高、性能差。

因此,采用通用的云本地存储常规架构是无法解决红包业务的需求,也不能设计出高性能的存储产品。那该如何将云本地存储的性能发挥到极致呢?我们的切入点是高性能存储架构。

上图是高性能存储架构,图中左侧是标准物理机情况下存储性能达到极致的框架:它的层次比较少,数据库经过POSIX API直接就到标准文件系统、块设备层、硬件驱动、硬件,请求所经过的模块比上文提到的云本地存储常规架构少2-3个,性能也相对有所提升。

那么如何在云主机的环境下搭建一个类似物理机的环境呢?首先云主机的必要模块是必须保留的,应该尽可能精简云物理机内核中的模块,进而达到性能的最佳值。如上图右侧所示,首先必须保留云主机内的标准文件系统和块设备层,因为它们和业务数据库是息息相关的,标准文件系统提供了标准的Open、Creat、Write之类的接口,如果省去该模块,业务是无法适配这种修改的。

对用户而言,云物理机内所有的修改都是透明的,因此在云物理机上只保留硬件驱动,从而达到最佳性能。

高性能本地存储关键组件

在云主机内,标准文件系统是不能变化的,因为它是存储与数据库、业务交互的地方。因此,想要进行性能优化,只能考虑在块设备层、硬件驱动、硬件三个模块入手加速本地存储的性能。

经过一系列的调研与研发测试,最终在块设备层使用了标准virtio blk驱动;硬件驱动使用了SPDK工具集;硬件使用了NVMe SSD。下面对这三个模块进行详细的解读与分析。

VirTio-blk

利用Virtio blk可以实现云主机和云物理机之间的高性能数据交互。Virtio提供了半虚拟化的接口,所谓半虚拟化就是在虚拟机和物理机之间通过某种方式(修改了虚拟机某些接口),从而使得虚拟机和物理机之间实现高速传输,性能比传统的全虚拟化有所提高。

Virtio blk是标准块设备接口,通过块设备接口可以对块设备进行格式化、分区、创建文件系统等标准操作,对用户完全透明,数据库无需任何更改。Virtio blk另一个优点是采用了Virtio协议,通过共享环交换数据。在上图中,蓝色部分是虚拟机,红色部分是物理机。虚拟机通过Virtio Front End将数据通过Virtio Ring传递到后端的Virtio Back End;Virtio Back End将这些数据处理后再回传给Virtio Front End,完成了一次数据的交互。

SPDK

除了Virtio blk之外,SPDK是另一个重要的组件。SPDK全称是Storage Performance Development Kit,它是一组用来编写高性能、高扩展性的用户态存储应用的工具集。

相比于SPDK,DPDK可能更为人知,它主要是为了解决网络方面的问题。SPDK在很多模块上是与DPDK共用的,它的核心观点是通过用户态协议加无锁设计加轮询机制达到高性能:

(1)用户态协议是指SPDK实现了用户NVMe协议,让用户可以在旁路内核的情况下去访问设备;其缺点是不支持posix API、不支持标准的文件系统,也没有标准的设备支持,应用性较差。

(2)无锁设计,对于高性能编程而言,无锁设计都是核心的思想,此次不再展开。

(3)轮询机制,SPDK提供了Polling Mode ,它摒弃了内核中常用的中断这类的机制,消除了中断的影响,提高了整体性能。

NVMe SSD

NVMe SSD有两个核心点:首先SSD是PCI-E的SSD,本身的访问速度是非常快的;采用NVMe之后,速度会更快,NVMe是用来代替SCSI的新协议,它具有高带宽、低延迟的特点,比SCSI协议更简单高效,提高了系统整体的性能。

数据链路

高性能本地云储存的数据链路如上图所示,在云主机中,核心数据库、POSIX API和标准文件系统保持不变。云数据库通过标准的POSIX API 访问标准文件系统;标准文件系统通过Virtio-Blk和SPDK用户态驱动直接交互,在SPDK用户态驱动中再与NVMe SSD交互,减少了数据链路的长度,同时提高了IO性能。

延迟分布

高性能本地云储存搭建之后,我们使用了fio磁盘测试工具在CentOS7上对通用虚拟化架构本地盘和阿里云高性能本地存储的随机IO平均延迟进行了对比测试。测试时块设备IO调度器均设置为noop,测试参数为–direct=1–bs=4k–iodepth=1–numjobs=1。

从上图可以看出,在随机读两方面,阿里云高IO本地盘延迟只有70us左右,而通用虚拟化架构本地盘延迟在130us左右;随机写方面,阿里云高IO本地盘的延迟只有30us左右;通用虚拟化架构本地盘延迟在60us左右。

数据库性能对比

上图是新旧数据库Index-Update性能对比,可以看到:在旧数据库实例的情况下,TPS只有14242.65、RT为8.21ms;新数据库实例下,TPS可以达到26969.81、RT为1.7ms,整体性能大幅度提升。

释放红包技术福利,即将在公有云上线

通过延迟分布和数据库性能的对比,可以看出高本地云存储对性能提升起到了很大的作用,在红包活动中发挥了很大的作用。在完成双十一及红包活动之后,阿里云希望将高性能本地云存储技术推广给其他用户使用。因此,在今年2月底,高性能本地云存储在公共云上线,它的技术架构与支撑支付宝红包的技术架构相同:采用NVMe SSD+SPDK技术,也是全球首家采用该技术的高性能本地盘。

本地盘2.0性能非常好,容量为3TB、IOPS为50万、延迟为50us、带宽为4GB。具体参数如下表所示:

可以看出,最优产品读写IOPS单盘可达24000;读带宽达2GBps;写带宽为1.2GBps。

高IO本地存储实例

有了本地盘作为基础,如果想要实现高性能本地存储实例,还需要在计算性能、存储IO性能、网络性能上进行相应地提升:

(1)为了保证计算性能稳定,采用了Intel Xeon E5-2682 v4(Broadwell)处理器,主频为2.5GHz,DDR4内存。

(2)为了保证存储IO性能稳定,采用了基于NVMe SSD和SPDK技术,提供高达数十万随机IO读写能力的同时,保持在us级别的时延水平。

(3)网络性能方面,实例网络性能与计算规格相对应(实例计算规格越大则网络性能越强)。

综上所述,将SPDK与NVMe SSD技术结合起来,能够让本地盘接近或类似物理机的性能,在双十一以及新春红包这类峰值压力很大的场景下,性能依旧很好。

关注Java架构头条不定时分享学习,共同进步!

关于分享者:

马涛,花名伯瑜,阿里云系统和块存储负责人、资深专家、国内知名Linux内核研发人员,10年以上操作系统以及存储研发经验,在块存储,文件系统等领域为Linux内核主线做出了卓越的贡献,在Linux内核主线有超过300个提交,同时对分布式文件系统,分布式存储等领域也有多年深入的研究。目前目前带领团队负责阿里巴巴Linux内核以及分布式块存储等相关的研发工作。

100G数据传输仅需1毫秒,超级宽带专线来了

100G带宽的全光网专线在京面市了,记者12月11日获悉,为了助力千行百业的数字化转型,北京电信在京发布了PERFECT京品专线。由华为与北京电信携手打造,该专线主要面向政府、企业等专业化客户,在北京市内点对点传输100G的超大数据包仅需1毫秒时间。

面对各产业数字化转型加速的趋势,中国电信明确提出了“云改数转”的战略,通过推进5G+全光网发展,打造更好的信息基础设施。这次北京电信带来的“京品”专线又带来了新的技术突破,有望推动经济社会数字化转型迈入新赛道。

市通信管理局二级巡视员黄平在会上表示,北京电信这次发布的高容量、低时延、高安全、高可靠专线,有望进一步助推首都新基建。

北京电信总经理肖金学称,目前已在北京全域完成了政企精品光网的建设,通过创新技术能力,为政企用户提供高质量定制化网络,同时推动云网深度融合,打造云网一体的数字化平台能力。

对此华为传送网领域副总裁刘玺表示,华为与北京电信携手打造的这一政企精品网有助于各行业数字化转型的需求,帮助千行百业“共赢未来”。

据北京电信政企客户部总经理李京介绍,这一“京品”专线是高达100G带宽的全光网通道,具备超灵活、快开通、云网一体等特性,将为数字政府、智慧城市、金融专网、工业互联网等提供强有力的网络和平台支撑。

图片来源:北京电信

来源 北京日报客户端 | 记者 赵鹏

编辑 赵鹏

流程编辑 刘伟利

联想个人云存储迎新版本更新 PC自动备份更方便

联想个人云存储官方APP数据守护者迎来重大版本更新,其中新增PC自动备份功能可大大增加数据备份的便利性,自上线起便广受用户好评。该功能是自联想个人云存储发布以来被用户呼声最高的功能,它主要是协助用户通过文件夹关联的方式及时将电脑上的文件备份到联想个人云存储上。

此功能的上线大大增加了电脑上数据备份的便利性,更有助于培养用户数据备份的好习惯。

我们知道,此前PC端备份资料基本依靠用户手动添加,而那些没有备份习惯的用户往往会忘记将资料上传备份,进行同步,给生活和工作带来不少不便之处。此次PC自动备份功能的加入对于文件量过大、没有数据备份习惯的用户尤其是内容创作者和职场白领来说尤为实用。一些重要文件、需要多场合使用的文件都可以通过此功能进行备份同步,这样就无须复制多份文件,也不必担心外出参会或下班后领导、客户急需资料的时候不能立即提供。除此之外,对于下班时还未完成的结尾性工作或者下班后的紧急需求,也可通过自动备份将文件直接同步,从此告别下班背电脑回家,即便是休假的时候,也能将领导同事和客户急需的文件资料快速分享传送。

可以说,PC自动备份功能的到来极大的简化了用户的数据备份过程,带来了更为便捷可靠的数据备份体验。与此同时,该功能设置十分简单,首先,保证联想个人云存储电脑客户端和联想个人云存储固件已升级至最新版本,然后只需设置需备份的电脑文件夹——设置个人云备份文件夹——设置备份模式三个步骤,整个过程十分方便。

(第一步:设置需备份的电脑文件夹)

(第二步:设置个人云备份文件夹)

(第三步:设置备份模式)

随着不断的产品功能迭代,联想个人云存储也不断带来惊喜给用户。此次PC自动备份功能上线,用户在原有的外接存储备份、云盘备份以及双盘RAID1备份模式之后又多了一种更灵活的备份模式选择,对于商务人士、从事设计和技术类工作以及文案策划人员来说尤为实用。而对于不习惯于数据资料备份以及因自己电脑文件架构混乱导致备份过程繁琐的用户来说更是一曲福音。

再产品上市短短5个月时间,联想个人云存储就凭借超大容量、安全加密、高速传输等特性帮助数万人完成数据安全备份,优异的品质得到了广大用户认可,并成为京东该品类线上市场份额前三选手。此次PC自动备份功能的上线,重塑了智慧办公生态结构,让资料的集中管理、多终端访问、随时随地获取成为现实。

据联想内部人士透露,未来联想将会针对用户呼声较高的功能进行优化和改进,本月联想个人云存储还将为大家带来一次重大更新,进一步提升用户使用体验,让我们拭目以待。

我国成功研制出EB级云存储系统 可满足大数据量存储落地需求

新华社天津11月30日电(记者周润健)国家863计划云计算关键技术与系统(二期)项目课题验收会11月29日在天津召开,由我国高性能计算领军企业中科曙光承担的“EB级云存储系统研制”课题通过技术验收。

为促进我国云计算核心软硬件产品的研发,“十二五”国家863计划信息技术领域“云计算关键技术与系统(二期)”重大项目于2013年2月正式批准实施,其中包括“EB级云存储系统研制”等多个课题。

随着云计算、互联网、移动终端和物联网的迅猛发展,信息数据爆炸性增长,传统的云平台的存储架构已经无法解决如此大数据量的存储落地需求。据中科曙光介绍,“EB级云存储系统研制”课题针对传统存储架构无法满足大数据量存储落地需求的问题,研制出具有超强的EB级扩展性和支持千亿级文件存储能力的新型存储系统。该系统采用可在线增缩、自动负载均衡的柔性架构平台设计,将平面数据提升到多层设计;采用先进的容错架构、高效的数据容错算法,配合用户认证和数据加密策略,用于应对数据的“丢”“错”和“偷”的问题,保证了系统的可靠性和安全性。

据了解,在“EB级云存储系统研制”课题研究成果的基础上,中科曙光2014年建立了国内首家EB级云存储实验室。

“三年来,除了进行技术突破性的研究之外,存储实验室还将各行业云的实际存储需求在实验环境中进行模拟和印证,开展了一系列的大规模云计算示范应用。”中科曙光副总裁沙超群说。

课题验收专家组组长、上海交通大学教授管海兵表示,EB级云存储系统作为下一代云计算关键技术和系统重大项目体系的重要组成部分,是云计算系统的关键基础设施,对云计算系统的运行效率、可靠性、可用性和安全性等各项性能指标有着至关重要的影响。它的成功研制,不仅意味着中国在云计算基础装备上取得核心技术突破,对保障中国云计算基础环境的安全可控具有重要意义。

康佳芯云存储芯片成功生产100K,全力攻坚半导体存储领域

10月17日,康佳芯云存储芯片成功生产100K的揭幕仪式在江苏省盐城市正式举行。集团总裁周彬、联席副总裁林洪藩等一行赴盐城康佳芯云封测工厂调研,并参加了揭幕仪式。

揭幕仪式的顺利举行,开启了康佳芯云工厂存储业务高效运行的新征程,进一步加速康佳集团向科技创新驱动的平台型公司转型升级。

此次康佳芯云存储芯片成功生产100K,有利于助推康佳抢占国内半导体存储市场。同时,存储芯片逐步规模化生产,将弥补目前国内存储芯片的产能缺口,加快存储芯片国产替代的步伐。

揭幕仪式上,工贸科技事业部总经理郁星夷表示:“康佳芯云是集团发展半导体产业的重要战略布局,存储芯片生产突破100K只是我们迈出长征的第一步,我们将充分发扬‘团结开拓,求实创新’的康佳精神,坚定不移地推动整体项目的达产达效。”

近年来,康佳半导体产业布局进程稳中向好。2018年康佳重兵布局半导体业务板块,在存储领域,用一年时间便实现存储主控芯片KS6581A的量产,首批10万颗芯片已于当月内出货。同时还推出了eMMC存储主控芯片及SSD固态硬盘产品,进一步完善产品矩阵。

作为央企控股的上市公司,康佳积极参与半导体存储领域的技术创新,目前已打通半导体存储的“设计+封测+渠道”产业链条,其中旗下的中康侧重半导体销售,合肥康芯威主打芯片设计,而康佳芯云作为康佳集团的全资子公司,全力攻坚存储领域,目标是打造国内领先的存储芯片半导体品牌。为此,康佳芯云每年投入大量科研经费作为研发支出、团队建设,专注于工艺技术的开发,以及研发新的存储产品,提高良率以及生产效率。

随着产能的逐步扩大,未来康佳芯云存储技术的产品落地将持续推进,丰富康佳自有品牌存储产品布局的同时,进一步扩大规模经济效益,实现产业链协同,还能在一定程度上弥补国内存储芯片的产能缺口,从而打开芯云工厂发展的新局面。而盐城存储芯片封测基地无人工厂主体的基本建成,也将为盐城打造面向半导体的高科技产业集群起到标杆性示范作用。

中国尖端科技产业遭遇“围追堵截”已是常态现象,尤其是半导体领域近年来已成为国际科技竞争的暴风眼。在当前国内半导体上下游产业链全面提升的背景下,康佳积极响应“科技强国”战略,以存储芯片生产能力的稳步快速提升来加强康佳集团在半导体领域的布局,这也是康佳打造面向半导体的高科技产业集群、迈入半导体潜力龙头公司行列的重要一步。康佳将抓住发展契机,结合自身优势资源,为品牌国际竞争力注入浓厚的创新基因。

聊一聊大涨的云存储版块,云存储到底前景如何

本文来自力场作者:cncoin

这几天一直给大家或有或无的提醒和讨论云存储版块,昨天写文的时候,我还专门看了下filecoin,当然也给大家提示,因为filecoin在三大交易所没有上市,因此可以布局,结果还没等到我下载好gateio的app,今天币价就大涨了。

其实明明知道这个币可能会涨,但是就是差那么半天,没买,结果活生生的错过了。

这个给我们一个警示,就是看好的币种,尽快下手,先买一点再说,哪怕投资个一百块钱,今天晚餐鸡腿都能有着落。

当然还好我之前布局了storj,也是云存储版块的币,之所以买了storj,其实一方面是别人推荐,另一方面,其实我在一段时间里还是了解了一下云存储版块。

云存储版块项目介绍

目前云存储版块其实相对来说,落地应用比较实用,对标的就是各种云盘之类的业务,国内国外项目都有,比较知名的国内类似的项目有nkn、bxc等,当然如果算上迅雷的玩客云的话,勉强也是。

国外主要的云存储目前种类相对比较多,比如storj、bhd、brust、siacoin等,这里当然我们需要找的实际有应用场景的其实很少,storj就是一个,再算一个的话,那么siacoin还是比较不错的。

其实国内的nkn和bxc我体验了一下,模式和storj是比较接近的,估计十有八九可能代码上存在借鉴行为,当然现在国内的这些项目也有自己的业务,比如有的已经在上面跑优酷、爱奇艺等视频网站的流量,这个我好几个月前都已经说过了,我目前就在挖,两个多月大概一百块钱的收益,唯一缺点就是对网络带宽要求比较高,每天的网络流量上传就要两百多G,大概才能赚1-2块钱。

因此按照这个价格来说其实是难以回本,这个我前几天也讲过,不过对于闲置宽带的利用倒是还是不错的,毕竟白天家里没人,宽带得到利用也不能白白便宜了三大通信运营商。

国内的nkn还是挺好的,已经上线了火币交易所,不过现在挖矿做存储的奖励,nkn竟然给的是usdt,而不是他们的代币,去年倒是给nkn代币的,但是因为变现比较麻烦,因此团队才给矿工发放usdt,这也是算是一个奇葩,这里可能是为了防止用户熊市砸盘吧,毕竟国内做这个的基本上就是为了赚现金,而不是投资数字货币。

Filecoin的上线自然在以后将会引起更大的场景应用,因为去中心化存储可以说太重要了,我们简单来说,存储各个公链的区块信息可能就是一个很大的场景,因此云存储的版块,我认为至少现在还是炒作初期。

骗局矿机可能会在未来纷纷得到利用

另外可能很多人以前受到云存储版块前期的矿机骗局,也就是很多大妈大爷买的ipfs矿机,当时确实有很多骗子也是欺骗了很多不懂的人参与,实际上大部分人当时可能买的就是一个带有很多硬盘的电脑,这个确实也是不好的事情。

但是既然已经被骗,那么那些高价矿机电脑,其实如何处理还是一个问题,总不能摆家里吧,相信那些被骗大妈大爷的家人肯定也是天天看着心里堵得慌。

其实这里自然有一个很好的利用方式,就是换做其他云存储挖矿项目,比如我们说的storj,不过storj是国外项目,主要的流量供应和业务方向还是在国外,国内用户挖矿的话,基本上也会受限于网速等问题,因此其实赚的币根本不多。

这个时候就可以考虑nkn挖矿,当然这个我也是查询过相关资料的,目前nkn挖矿已经支持x86和arm架构的系统进行挖矿,虽然nkn也有海外的节点和业务,但是对于国内用户还是比较友好的,中国节点其实占得是少数。

当然也可以进行挖矿brust或者bhd,brust和bhd都要进行所谓的p盘动作,这个就不是主要以网速为主了,同时兼顾硬盘的能力等等,步骤也比较复杂,一般人难以搞定。

区块链云存储项目市场发展的关键

区块链云存储项目其实在技术上还是比较稳定和较为成熟的,这在一部分方面其实借鉴了传统中心化云存储的技术,因此做起来也比较简单,这也是为什么国内的nkn和国外的storj都比较类似、brust和bhd比较类似的原因。

当然其实还有一点就是云存储项目往往重点其实在技术的方面要求不是特别的多,这个和一般的区块链项目还真有一些不同,云存储项目的重点大部分还是实际的应用场景,也就是激励措施和客户消费使用的能力。

简单来说,我们对比nkn和bxc,其实就可以发现,如果这两个项目没有搞定视频网站流量问题,那么即使项目做得再好,也没有用户愿意去上面贡献自己的带宽和硬盘存储能力,同样,storj其实主要还是趋向于企业云存储业务,也就是这个原因。

这里客户付费可能议价能力还是比较高的,比如客户想要用法币付款,那么对于项目方而言,自然也是可以接受的。

对于像filecoin这样的项目,那么主要的数据客户可能会面向区块链产业中的上下游关系,这样的话,就要采用另一种思维方式来进行,这里其实大部分用户就是我们说的区块链项目方,而不是传统的企业,毕竟在filecoin上存储东西,一般来说都是公共可查的东西。

我们在storj上和nkn上存储的东西其实是不可查询的状态,也就是说,我的硬盘,其实我也不知道这个项目跑的存储空间大概是什么内容。

然而在filecoin上就不一样了,只要我愿意公布,那么只需要一个地址,就可以通过filecoin的网络来下载这个存储内容,这里是带有相关的地址的,就和我们常见的网站地址类似。

虽然是一个版块,但是业务方向还是有一些不同,简单说,filecoin和storj两者之间的竞争关系其实并不是很强烈,不像预言机一样,defi应用使用预言机无非就是那么几家,要么就是这家的,要么就是那家的,另外还有两三家一起的,竞争关系比较足。

对于storj和filecoin,因为用户群体不一样,因此我才会大胆的布局storj项目,在后面的一段时间里,肯定云存储版块的币种,还会或多或少的有一些表演,在操作上面,我还是比较倾向于长拿,如果涨的高的话,那么出一点,然后等回调之后,再买入。

主要思路就是多拿点筹码,反正未来肯定是不会太亏的,一方面storj确实在市场上有硬性需求,业务也算发展的可以,未来网络规模我认为还有进一步扩大的可能性。

另外在filecoin上线之前,云存储的币还是会有一些搞事的,也就是慢慢布局,今天中午出了一部分storj,晚上跌下来的时候,我又接回来了,这也算是做个短线。

其实国内云存储的市场我认为未来还有很大的扩展空间,storj模式的云存储项目肯定在未来filecoin的炒作过程中顺带着就上去了,因此我们可以重点关注storj项目。

其中主要的因素是storj的挖矿要求其实是比较低的,一个简单的主机,然后外加硬盘,当然如果有固态硬盘的话效果更好,再多一点那么可以加上好一点的宽带,相信各位每家每户都有,主机的话可以选择专业的NAS主机,价格可能会比较高一点,但是稳定性比较不错。

同样从前面的图中,可以看到其实nkn的节点数量还是比较恐怖的,光在美国就有接近三万个节点,要知道现在全球比特币的节点数量也才一万多个,光一个大家不知道的nkn项目都超越比特币节点整整三倍之多

那么对于storj来说,这个是无法想象的,因此storj其实也算是我关注的项目。

当然其实filecoin其实也有很大的前景的,但是我们应该对于云存储版块的币种不要太过于乐观,去中心化总体上来说,效率肯定会有所下降,而云存储版块的项目的区块链项目基本上都号称去中心化,那么自然会带来数据的冗余现象。

也就是说一个数据可能在多个地方存储着,并且也有网络不稳定的现象,因此未来市场是否大规模为这样的项目买单,还是需要关注一下的。

对于普通用户来说,如果你对云存储项目感兴趣的话,建议先不要着急买币炒作 ,其实有时候花点时间去实践一把挖矿的感觉,就会体验到,然后才能对这样的项目更加熟悉,而不是简单的炒作,因为数字货币炒作终归还是风险比较大的,如果对某个项目看好的,那么长拿虽然是好的策略,但是我也不是特别建议,毕竟如果你判断错误的话,那么长拿就是给镰刀送人头,这个是得不偿失的。

说这么多,其实也不是表明storj这个项目会有多好,我们只是站在风口上而已,无论是前面的跨链,或者defi项目,或者之前的预言机项目,其实都是这样,运气好而已,但是需要注意的是风总会停。

曲终人未散,减仓看翻船!

声明:本文已加入由力场新媒体部发起的「好文流动计划」。该计划旨在增强力场好文流动性,进而提升力场内容价值。

“新基建、新技术、新未来”2021软云存储赋能实体经济产业峰会开幕

新湖南客户端5月13日讯 为积极响应2021年“全国两会”关于新基建及区块链数字经济的相关精神,促进数字技术与实体经济深度融合,赋能传统产业转型升级。今日下午,以“新基建、新技术、新机遇”为主题的“2021软云存储赋能实体经济产业峰会”在长沙拉开帷幕。本次峰会由湖南省工信厅指导,湖南日报社(集团公司)和软云存储科技有限公司联合主办。峰会分为开幕致辞、主题演讲、签约发布和媒体提问四个环节。

新基建直接关系着未来的国计民生,是名副其实的“国之重器”。2021年是新基建元年,“十四五”是“新基建”深度发展的关键时期。湖南日报与软云存储共同举办本次产业峰会是恰逢其时。在本次峰会上,我们可以看到围绕新基建,政府在做什么,企业在做什么?新基建的未来发展如何?如何激发我们社会的经济活力和创新动力?如何推动传统产业的转型升级等等。

行业大咖云集,共话中国新基建美好未来

据组委会介绍,本次峰会邀请了国内外众多行业领袖、技术专家、政府领导、企业代表等出席并发表主题演讲,深度解析新基建时代下行业发展趋势和机遇,共同探讨分布式存储行业的美好未来。

湖南日报社党组成员、社务委员、副总编辑夏似飞出席并致欢迎辞:“作为湖南省委机关报,湖南日报始终贯彻落实党中央的重大决策部署,积极响应2021两会关于新基建新经济的相关精神,密切关注我国新基建发展进程。在新基建迎来历史性发展机遇的重要节点,湖南日报将进一步发挥全媒体的传播优势,讲好湖南新基建故事,展示湖南新基建创新成果,为推动新基建发展营造良好的国际国内舆论环境”。

此外,华尔街投资协会主席庄兆基、深圳软云存储科技CEO 蔡定强、软云存储董事杨万山等行业专家,围绕“国家十四五规划战略布局新基建”、“技术变革赋能实体产业发展”“科技革命下的产业转型与经济发展”等话题,和在场的嘉宾展开了深入的交流和碰撞,共同探讨技术和产业热点,共谋新基建产业未来发展。

重磅发布签约,赋能湖南实体经济高质量发展

在与会领导与嘉宾的共同见证下,峰会正式发布软云存储生态布局与上市规划。作为分布式存储行业的领军代表,本次活动主办方之一的软云存储已先后在上海、浙江、长沙等地建立了分布式存储集群。站在新型基础建设“风口”,软云存储将顺应经济发展趋势,抓住新基建带来的新机遇,不断创新升级和完善生态布局,积极筹备并启动上市计划,力求带动行业跨越式发展。

此外,软云存储还分别与湖南日报文旅集团,湖南盟创集团达成了战略合作意向,签订了战略合作协议。双方通过资源整合,优势互补,促进分布式存储技术在文旅大数据、区块链领域应用与发展。此次的战略合作将有利于打破行业和市场壁垒,加速分布式存储在更多行业的应用,实现区域内创新要素资源集聚和共享,有效促进了数字经济和实体经济深度融合,共筑新基建,培育新动能。(袁丹)

[责编:周听听]

[来源:新湖南客户端]

支持最高80TB存储空间 联想个人云存储X1开箱图赏

近日,联想个人云存储X1新品正式推出,该产品最高支持80TB存储空间。搭载Intel第八代Gemini lake芯片N4020,主频可达2.7GHz,双核双线程,缓存4MB,并且内置联想独创的5Pro盘位架构设计。

包装盒内为联想个人云存储X1主机以及适配线包装盒。

在适配线方面,提供了电源线*1,网线*2,还有一包用来固定2.5寸硬盘的螺丝钉(联想个人云存储X1同时支持3.5英寸HDD硬盘与2.5英寸HDD、SSD硬盘,如果安装的是3.5英寸硬盘则可直接安装,无需使用螺丝钉)。

曜石金配色的联想个人云存储X1给人温暖精致的感觉,和家庭的装修风格可轻松搭配,自然融入。

材质方面,联想个人云存储X1采用6系航空铝材,一体成型工艺以及表面阳极氧化处理工艺,不仅外观更加精致轻奢也更加坚固耐用。

联想个人云存储X1正面左下角为开关键和各种指示灯。

正面右下角则为一个USB-3.0接口。

联想个人云存储X1背面一览,可看到硕大的散热口以及丰富的各类接口。

在机身背部下方,依次为电源接口、重置键、USB3.0接口、USB3.0 Type C接口以及两个网络接口。配备的双千兆网口,通过网络聚合可实现网络备份与负载平衡。其中,负载均衡将两个网口整合为一,使带宽突破单一网口所能负荷的最大值。

机身背部右下则为产品的相关信息铭牌以及设备绑定二维码。

透过机身背部硕大的散热孔,我们可以看到92*15mm大尺寸双风扇设计,配合独创隐形3D立体进风结构,可以迅速降低产品运行温度,保持高效性能。即便在满载运行时产品噪音也小于35分贝,让用户安心工作不受打扰。三通道进风与双静音风扇,配合硬盘的智能休眠,节能易用、低噪控温,可最大程度延长硬盘的使用寿命。

联想个人云存储X1采用5Pro盘位架构设计,支持JBOD/RAID1/5/10等多种磁盘组合,同时第五盘位支持多种扩展功能,可以满足用户的多种使用场景。

当希望更高安全性时,第五盘可为其他四块硬盘提供热备保护。在产品运行中,如果其他四块硬盘中某块硬盘出现故障,第五盘位的硬盘能随时自动替换故障硬盘,守护用户数据安全。

当需求更高容量时,五盘均可作存储盘,最高容量可达80TB,同时兼容3.5英寸和2.5英寸SATA3.0硬盘(产品本身不含硬盘,图中硬盘为笔者自备)。联想个人云存储X1的第五盘位具有热备份、加速、外挂三种扩展功能,用户可根据自身不同需求自主选择,在保证数据安全的前提下,提升数据管理效率。其中,热备份是指第五盘可作为存储空间的热备份盘使用,该盘为有数据保护的RAID存储空间提供热备份,当其中单块硬盘故障时可实现自动实时替换;加速是指第五盘可作为系统加速盘使用,通过SSD缓存加速提升系统性能;外挂是指第五盘可作为外部存储盘使用,比如已有数据硬盘(如,电脑硬盘、移动硬盘),如需保留数据可设置为外挂盘,作为外部存储盘使用,保留数据,不进行格式化。

联想个人云存储X1支持多系统(Windows,Android,iOS、Mac OS、AndroidTV)和多设备(手机、电脑、平板、智能电视等)。联想个人云存储X1在全球布局超过10大网络节点,支持全球高速漫游,保证用户可以用终端设备在安全高速的环境下与远方的个人云进行点对点连接,用SDVN技术加密传输,通过SDVN虚拟化网络在互联网真实网络之上建立安全的叠加网,实现IP层的网络虚拟化,可保证用户的数字资产安全与隐私。

悬浮式盖板设计,流沙金纹,意寓云端数据流动风生水起。

联想个人云存储X1保持了前作简单易用三步搭建的特点,图形化操作界面也十分人性化,更加注重产品的实用性,酷炫的机身外观也让人耳目一新。这款新品存储量巨大,尤其适合从事平面设计以及视频制作者,即便是日常办公也可用来存储和传输各类办公数据文件,而作为家庭数据中心也非常合适,外出游玩的照片和视频可快速的存储、下载和共享。

「荐读」云存储技术——分析与实践

《 云存储技术——分析与实践》

作者 :刘洋 著

出版日期: 2017年3月

开本:16开

出版社:经济管理出版社

小编推荐

《云存储技术:分析与实践》采用循序渐进的方法,引领读者逐步了解云存储领域的关键技术.在力求保持全面性、通俗性的同时,分析讨论了一系列云存储领域的高级话题,例如存储虚拟化、系统虚拟化、分布式存储系统、绿色存储、固态存储、重复数据删除和大数据近似求解等内容。《云存储技术:分析与实践》融入了作者的前期研究成果,并介绍了基于Hadoop、Swift构建云存储系统的实践经验。

《云存储技术:分析与实践》在内容上共分为七章,包括云存储概述、存储技术基础、虚拟化技术、分布式存储系统、云存储关键技术研究、基于Hadoop构建云存储系统和基于Openstack Swift构建云存储系统。

《云存储技术:分析与实践》作为科研课题结项的成果,既是对项目实践经验的总结,也是对前人研究工作的梳理,可供信息存储相关领域的系统管理人员及分析、设计、开发人员参考,也可作为高等院校相关专业的辅修教材。

作者简介

刘洋,男,1980年生,河南方城人,博士,河南财经政法大学云计算与大数据研究所所长。研究方向为固态存储、云存储和大数据处理等。主持完成省部级项目2项,参与完成国家863、973和国家自然科学基金重点项目1项,作为主要完成人参与省部级项目9项,发表SCI/EI检索论文6篇,核心论文7篇,编写专著1部,参编教材3部,CCF、ACM会员。

今日书里的“阅读路线图”下面请看——

第一章 云存储概述

第一节 引言

第二节 云存储概述

第三节 云存储的分类

第四节 云存储的系统架构

第五节 云存储的优势

第六节 云存储的主要思想

第七节 虚拟存储容器

第八节 云存储的互操作性

第九节 云存储技术基础

第二章 存储技术基础

第一节 外部存储设备

第二节 磁盘阵列

第三节 直连存储

第四节 附网存储

第五节 存储区域网

第六节 分布式文件系统

第七节 数据保护技术

第八节 数据备份

第九节 镜像与快照

第十节 分级存储管理

第十一节 存储系统的功能需求

第十二节 存储系统的评价指标

第三章 虚拟化技术

第一节 虚拟化概述

第二节 存储虚拟化

第三节 系统虚拟化

第四节 桌面虚拟化

第五节 应用虚拟化

第六节 典型虚拟化产品:VMware vSphere

第七节 典型虚拟化产品:Microsoft Azure

第八节 典型虚拟化产品:Xen

第九节 典型虚拟化产品:KVM

第四章 分布式存储系统

第一节 海量数据的分类

第二节 分布式文件系统

第三节 分布式键值系统

第四节 分布式表格系统

第五节 分布式数据库

第五章 云存储关键技术研究

第一节 一种基于工作集副本的存储虚拟化层节能技术

第二节 基于大规模云环境的绿色资源分配协议

第三节 基于MLC/SLC双模闪存芯片的闪存转换层

第四节 面向混合存储系统的块层多顺序流预取算法

第五节 云存储环境下基于HDFS的海量小文件装箱算法

第六节 一种基于两级随机抽样的近似求解方法

第六章 基于Hadoop构建云存储系统

第七章 基于Open Stack Swift构建云存储系统

参考文献

点击阅读原文 好书尽在掌握