文学起点网
当前位置: 首页 文学百科

热门的边缘计算节点(专业自研的QingStorU10000)

时间:2023-05-30 作者: 小编 阅读量: 1 栏目名: 文学百科

数据是自动驾驶实现的基础要素。具体而言,QingStorU10000提供海量数据存储能力,并保证性能。QingStorU10000支持多协议无损互通。谈及为何走上自研之路,冯相东表示一方面是青云对技术的追求。另一方面是青云的企业责任感。近十年的自研之路,也使得青云存储在发展过程中规避了很多风险。而这些问题,在QingStorU10000以及青云整个存储业务中均不存在。

数据是自动驾驶实现的基础要素。通常而言,一辆路测车每天产生1PB(1PB=1024TB)左右数据。这1PB的数据,需要通过四个环节的处理后才能被自动驾驶所用:

先是通过S3和NFS协议实现数据的上传和导入,接着通过HDFS分布式存储系统完成预处理,随后通过NFS协议完成AI训练,最后通过NFS、SMB协议完成仿真测试。

这一典型案例也反映出数字时代下存储的发展趋势:以图片、音频、视频为代表的非结构化数据的骤增,使得全球数据量呈指数级增长;自动驾驶、元宇宙等场景的出现,对算力提出了更高要求,间接推动着存储形态、功能的演进。

“海量数据的持续增加,使得越来越多人意识到简单存起来的静止数据没有什么价值可言。让数据流动起来,在不同生命阶段为数字化业务服务,才能充分挖掘出数据的价值。”青云科技存储产品总监冯相东表示。

如何“点石成金”

的确,尽管“数据是21世纪的石油”早已成为共识,但海量非结构化数据的存储,如果仅仅是囤积而不能“燃烧”为企业生产经营所用,那么于企业而言,只会增加存储和管理成本。

只有将其高效的存储、处理、分析,为业务经营、企业管理提供科学化决策,海量非结构化数据于企业而言,才能产生“点石成金”的效果。在青云科技产品技术解决方案总监张忠华看来,数据的“点石成金”是一次蜕变,自然并不容易实现:

如何对接多元算力?“清华大学天津电子信息研究院的算力平台有很多种,包括科学计算平台、标准云计算平台、高性能计算,还有AI算力、GPU算力。那么存储系统如何和多元化的算力对接?”张忠华举例道。

如何打通多种存储协议?除上述所描述的自动驾驶场景,苏州华兴源创所处的制造业同样面临这一困扰:包括ERP、MES、OA、CRM等在内的涉及生产、管理的业务系统上百套,数据来源各式各样,有需要离线处理的,有需要实时分析的,那么如何实现基于不同协议数据的统一汇总,实现数据驱动?

如何保证存储系统的性能以及安全?海量的非结构化数据要求存储系统的扩展性;新兴的自动驾驶、AI等场景要求存储系统的时延、I/O吞吐性能;中美贸易战以及信创等外部环境同时又要求存储系统自主可控。这均是数字时代下,企业需要思考的问题。

存得稳、算得快、管得好

“从专业技术角度来看,存储架构是没有银弹的。没有哪一种架构既能满足极致的性能要求,也能满足海量数据吞吐、计算、并发利用的需求。”面对海量非结构化数据的“汹涌而来”,冯相东认为面向数据库、云盘等传统结构化数据场景的存储架构并不适用,“青云希望通过专业的存储分工更好地服务专业的场景。”

因此,面向海量非结构化数据的应用场景,青云推出了统一存储平台QingStor U10000,其不仅继承了青云原来面向对象存储、文件存储的所有能力,同时在多个维度上实现了产品力的迭代和增强。

具体而言,QingStor U10000提供海量数据存储能力,并保证性能。QingStor U10000最小部署规模3节点,可横向扩展至数千节点;即便在数千节点的大规模集群下,QingStor U10000提供的EC配比仍能保证物理得盘率达90%以上;面向AI训练等海量小文件应用场景,QingStor U10000能做到单桶、单目录支持百亿级且性能无衰减。

QingStor U10000支持多协议无损互通。通过统一索引架构以及对POSIX、SMB、NFS、FTP、HDFS、S3、SDK等多种协议的支持,QingStor U10000对数据的存储和读取,无需再经过格式转化;多协议互通使得一份数据可重复利用于不同场景无需多次复制,实现数据分析的高效且不再冗余。

QingStor U10000实现多元算力无缝对接。得益于青云多年在云服务领域的积累,QingStor U10000提供一系列完善的API、SDK,可以轻松地对接各类大数据平台、数据处理框架和服务,实现数据和不同算力的高效结合。

QingStor U10000从多个维度保证数据安全。通过元数据和存储数据分层、多重访问安全机制、智能预警机制以及运维监控平台,QingStor U10000实现了数据从副本到访问、预警,再到运维全流程的安全保障。

可以看到,QingStor U10000涉及海量非结构化数据的存储、计算分析以及管理运维等维度,这也是冯相东希望QingStor U10000能实现的目标:“帮助客户把数据存得稳、算得快、管得好。”

专业、自研,持续助力数字中国建设

继承了QingStor对象存储和QingStor文件存储的能力,并在算力对接、协议互通、性能以及安全等方面提升的QingStor U10000,无疑是一款专业面向海量非结构化数据场景的统一存储平台。

事实上,QingStor U10000的特性不止专业,同时还包括自研。谈及为何走上自研之路,冯相东表示一方面是青云对技术的追求。“最初青云评估整个云平台业务时,通过技术评测之后发现市面上没有一款开源存储方案能满足通用大规模云计算平台对存储需求,出于对技术的严谨,青云存储从一开始就选择了自研道路。”

另一方面是青云的企业责任感。“青云作为一家中国云计算公司,希望通过自身的努力,消除企业对数据安全的顾虑,以真正自研的中国存储服务于数字中国。”

近十年的自研之路,也使得青云存储在发展过程中规避了很多风险。如基于开源框架开发的商业存储系统,经过十几年的发展,架构复杂且冗余,这使得工程师在面对复杂存储问题时难以处理。

同时,开源框架若基于传统机械硬盘开发,其“古老”的特性已不适用于全闪介质,无法全面发挥新介质的性能。

此外,中美贸易战、乌苏战争等政治因素更使得厂商意识到,如果开源项目社区没有掌握在自己手中,也会存在一定风险。

而这些问题,在QingStor U10000以及青云整个存储业务中均不存在。面向信创,青云存储也与鲲鹏、飞腾、海光等目前主流的国产硬件平台,以及麒麟软件、统信、openEuler等国产操作系统,实现完整的生态化兼容。

继续聚焦青云整个存储业务。QingStor U10000的发布,使得青云存储布局更加简洁明朗:QingStor NeonSAN面向结构化数据,提供极致性能;QingStor U10000面向海量非结构化数据,释放数据潜力。

在“QingStor NeonSANQingStor U10000”的双轮驱动下,青云存储也将更好地参与到新基建、“东数西算”、“十四五”数字经济发展规划等政策中去,持续助力数字中国建设。

    推荐阅读
  • 卖火柴的小女孩主要讲了什么(卖火柴的小女孩讲述的是什么)

    卖火柴的小女孩主要讲了什么它讲述的是一个在圣诞夜卖火柴的小女孩的悲惨命运。因为没有卖掉一根火柴,小女孩一天没有吃东西。创作背景:1845年10月,安徒生再次访问意大利。在圣诞节即将到来的时候,格洛斯顿城的朋友们再三邀请安徒生去那里过圣诞节。安徒生兴冲冲地坐上了去格洛斯顿的马车。安徒生的马车在格洛斯顿的街道上缓缓前进,他要体会一下城市里的圣诞节气氛。安徒生回去以后就写了《卖火柴的小女孩》。

  • 芹菜炒木耳大白菜(钙含量是牛奶的3倍)

    韭菜炒豆芽的做法,就是这么简单,掌握好技巧,口感能提升不少,如果你认为韭菜炒豆芽的做法还不错,欢迎收藏起来学着做,或者是分享给更多的人学习!

  • 雅典为什么会繁华(同属希腊地区的雅典和斯巴达)

    古希腊城邦奴隶制得到如此广泛推行为日后城邦时代社会经济的发展以及各行各业的繁荣提供了重要条件。这也使得希腊城邦的奴隶制经济得到了空前规模的发展,尤其是在以雅典和斯巴达两大城邦的代表下,古希腊城邦时代迎来了其奴隶制社会经济发展的黄金时代。雅典型的奴隶制经济代表着古希腊城邦时代奴隶制社会发展的整体面貌,而斯巴达型的奴隶制经济只是局限于那些经济较为落后的城邦当中。

  • 电饭锅腊肠饭做法(电饭锅腊肠饭最简单的做法介绍)

    下面希望有你要的答案,我们一起来看看吧!电饭锅腊肠饭做法主料是腊肠、米,辅料是胡萝卜、玉米、葱、盐、鸡粉。先把材料准备好,大米洗净,腊肠切丁,玉米粒胡萝卜切丁,备用。电饭锅内放少许油,依照顺序放入胡萝卜,玉米腊肠,加入盐,鸡粉,酱油翻炒片刻,接着放入米,水量和平常一样,按下开关煮饭就可以了。开关跳了后,撒上些香葱,加入些酱油调味拌匀即可出锅。

  • 地笼放什么饵料(地笼的介绍)

    下面内容希望能帮助到你,我们来一起看看吧!地笼放什么饵料地笼里面放的饵料比较好的:大骨头稍微有一点点肉屑。还有红虫但数量要多一些。还可以鸡鸭骨头等等腥味越大越好。地笼是中原地区的业余或专业捕鳝或泥鳅,河虾小鱼等的工具。地笼的长度可依据养殖水面的长度、宽度而定,一般为15节左右,总长约7~8米。材质为塑料纤维。地笼有很多入口,但内部构造比较复杂,鱼类进去后就很难出来。

  • 卡路里最低的食物排行(卡路里最低的食物有哪些)

    卡路里最低的食物排行芝麻菜。芝麻菜在日常生活中是比较常见,不仅含有低热量低脂肪和低胆固醇,而且高纤维和大量的维生素A,K,C以及其它丰富的营养。西兰花低热量、丰富维生素、大量矿物质及抗氧化剂,可降低各种癌变的发生率。绿豆芽热量较低,水分和膳食纤维较高。西红柿果实营养丰富,具特殊风味。

  • 新买的内衣有很大的味道怎么回事 新买的内衣有很大的味道怎么回事呀

    不少女性朋友可能有这样的困扰,新买的内衣挂在内衣店里没有异味,可是拿回家洗一遍之后却散发出很大的味道。内衣长期挤压产生味道新买的内衣从生产到购买经过了较长的时间,而在此期间内衣被长时间闷在包装袋里面或者是长时间受到挤压,这也容易使内衣在包装袋中产生很大的味道。

  • 修车最容易被更换的零件(更换下来的旧件哪些可以卖掉)

    可以最大程度上降低我们的损失呢?第4个零部件就是发动机以及空调压缩机了,相信我们都应该知道,车辆当中最为贵重的零部件就是发电机,所以如果我们的车辆出现问题时,发电机也能够卖到一个非常好的价钱。但前提是一定要经过维修之后还可以再次使用的,才能够进行售卖,如果没有维修价值了的话,也只能够是当废铁卖掉。

  • 孕妇晚期腰痛可以按摩吗(孕妇腰酸可以按摩缓解吗)

    孕妇腰酸可以按摩缓解吗孕期随着腹中胎儿越长越大,身体会变得笨重,由于重心前移,增大的子宫压迫脊柱导致背部肌肉紧张,可能就会引起腰酸背痛,这主要是一个生理性的表现怀孕期间运动量太少,体重明显的增加,怀孕的时候身体里面的激素水。

  • qq隐藏图标的方法(操作步骤)

    qq隐藏图标的方法我们打开QQ软件,输入账号密码登录,进入主界面后,点击个人头像,鼠标移到头像上,会出现浮动框,能看到当前使用的应用图标。确定上述操作后,重新查看自己的个人资料,图标已经隐藏成功,操作完以上步骤后,你的QQ好友就看不到你的手机QQ图标了。我们还可以打开QQ,点击最左侧的选项之后选择设置选项,在系统设置中点击登录选项,在主面板中选择在任务栏通知区域显示QQ图标的对勾去掉即可。