文学起点网
当前位置: 首页 文学百科

热门的边缘计算节点(专业自研的QingStorU10000)

时间:2023-05-30 作者: 小编 阅读量: 1 栏目名: 文学百科

数据是自动驾驶实现的基础要素。具体而言,QingStorU10000提供海量数据存储能力,并保证性能。QingStorU10000支持多协议无损互通。谈及为何走上自研之路,冯相东表示一方面是青云对技术的追求。另一方面是青云的企业责任感。近十年的自研之路,也使得青云存储在发展过程中规避了很多风险。而这些问题,在QingStorU10000以及青云整个存储业务中均不存在。

数据是自动驾驶实现的基础要素。通常而言,一辆路测车每天产生1PB(1PB=1024TB)左右数据。这1PB的数据,需要通过四个环节的处理后才能被自动驾驶所用:

先是通过S3和NFS协议实现数据的上传和导入,接着通过HDFS分布式存储系统完成预处理,随后通过NFS协议完成AI训练,最后通过NFS、SMB协议完成仿真测试。

这一典型案例也反映出数字时代下存储的发展趋势:以图片、音频、视频为代表的非结构化数据的骤增,使得全球数据量呈指数级增长;自动驾驶、元宇宙等场景的出现,对算力提出了更高要求,间接推动着存储形态、功能的演进。

“海量数据的持续增加,使得越来越多人意识到简单存起来的静止数据没有什么价值可言。让数据流动起来,在不同生命阶段为数字化业务服务,才能充分挖掘出数据的价值。”青云科技存储产品总监冯相东表示。

如何“点石成金”

的确,尽管“数据是21世纪的石油”早已成为共识,但海量非结构化数据的存储,如果仅仅是囤积而不能“燃烧”为企业生产经营所用,那么于企业而言,只会增加存储和管理成本。

只有将其高效的存储、处理、分析,为业务经营、企业管理提供科学化决策,海量非结构化数据于企业而言,才能产生“点石成金”的效果。在青云科技产品技术解决方案总监张忠华看来,数据的“点石成金”是一次蜕变,自然并不容易实现:

如何对接多元算力?“清华大学天津电子信息研究院的算力平台有很多种,包括科学计算平台、标准云计算平台、高性能计算,还有AI算力、GPU算力。那么存储系统如何和多元化的算力对接?”张忠华举例道。

如何打通多种存储协议?除上述所描述的自动驾驶场景,苏州华兴源创所处的制造业同样面临这一困扰:包括ERP、MES、OA、CRM等在内的涉及生产、管理的业务系统上百套,数据来源各式各样,有需要离线处理的,有需要实时分析的,那么如何实现基于不同协议数据的统一汇总,实现数据驱动?

如何保证存储系统的性能以及安全?海量的非结构化数据要求存储系统的扩展性;新兴的自动驾驶、AI等场景要求存储系统的时延、I/O吞吐性能;中美贸易战以及信创等外部环境同时又要求存储系统自主可控。这均是数字时代下,企业需要思考的问题。

存得稳、算得快、管得好

“从专业技术角度来看,存储架构是没有银弹的。没有哪一种架构既能满足极致的性能要求,也能满足海量数据吞吐、计算、并发利用的需求。”面对海量非结构化数据的“汹涌而来”,冯相东认为面向数据库、云盘等传统结构化数据场景的存储架构并不适用,“青云希望通过专业的存储分工更好地服务专业的场景。”

因此,面向海量非结构化数据的应用场景,青云推出了统一存储平台QingStor U10000,其不仅继承了青云原来面向对象存储、文件存储的所有能力,同时在多个维度上实现了产品力的迭代和增强。

具体而言,QingStor U10000提供海量数据存储能力,并保证性能。QingStor U10000最小部署规模3节点,可横向扩展至数千节点;即便在数千节点的大规模集群下,QingStor U10000提供的EC配比仍能保证物理得盘率达90%以上;面向AI训练等海量小文件应用场景,QingStor U10000能做到单桶、单目录支持百亿级且性能无衰减。

QingStor U10000支持多协议无损互通。通过统一索引架构以及对POSIX、SMB、NFS、FTP、HDFS、S3、SDK等多种协议的支持,QingStor U10000对数据的存储和读取,无需再经过格式转化;多协议互通使得一份数据可重复利用于不同场景无需多次复制,实现数据分析的高效且不再冗余。

QingStor U10000实现多元算力无缝对接。得益于青云多年在云服务领域的积累,QingStor U10000提供一系列完善的API、SDK,可以轻松地对接各类大数据平台、数据处理框架和服务,实现数据和不同算力的高效结合。

QingStor U10000从多个维度保证数据安全。通过元数据和存储数据分层、多重访问安全机制、智能预警机制以及运维监控平台,QingStor U10000实现了数据从副本到访问、预警,再到运维全流程的安全保障。

可以看到,QingStor U10000涉及海量非结构化数据的存储、计算分析以及管理运维等维度,这也是冯相东希望QingStor U10000能实现的目标:“帮助客户把数据存得稳、算得快、管得好。”

专业、自研,持续助力数字中国建设

继承了QingStor对象存储和QingStor文件存储的能力,并在算力对接、协议互通、性能以及安全等方面提升的QingStor U10000,无疑是一款专业面向海量非结构化数据场景的统一存储平台。

事实上,QingStor U10000的特性不止专业,同时还包括自研。谈及为何走上自研之路,冯相东表示一方面是青云对技术的追求。“最初青云评估整个云平台业务时,通过技术评测之后发现市面上没有一款开源存储方案能满足通用大规模云计算平台对存储需求,出于对技术的严谨,青云存储从一开始就选择了自研道路。”

另一方面是青云的企业责任感。“青云作为一家中国云计算公司,希望通过自身的努力,消除企业对数据安全的顾虑,以真正自研的中国存储服务于数字中国。”

近十年的自研之路,也使得青云存储在发展过程中规避了很多风险。如基于开源框架开发的商业存储系统,经过十几年的发展,架构复杂且冗余,这使得工程师在面对复杂存储问题时难以处理。

同时,开源框架若基于传统机械硬盘开发,其“古老”的特性已不适用于全闪介质,无法全面发挥新介质的性能。

此外,中美贸易战、乌苏战争等政治因素更使得厂商意识到,如果开源项目社区没有掌握在自己手中,也会存在一定风险。

而这些问题,在QingStor U10000以及青云整个存储业务中均不存在。面向信创,青云存储也与鲲鹏、飞腾、海光等目前主流的国产硬件平台,以及麒麟软件、统信、openEuler等国产操作系统,实现完整的生态化兼容。

继续聚焦青云整个存储业务。QingStor U10000的发布,使得青云存储布局更加简洁明朗:QingStor NeonSAN面向结构化数据,提供极致性能;QingStor U10000面向海量非结构化数据,释放数据潜力。

在“QingStor NeonSANQingStor U10000”的双轮驱动下,青云存储也将更好地参与到新基建、“东数西算”、“十四五”数字经济发展规划等政策中去,持续助力数字中国建设。

    推荐阅读
  • 云南省的气候特点(云南省的气候特点是什么)

    云南省的气候特点云南气候基本属于亚热带高原季风型,立体气候特点显著,类型众多、年温差小、日温差大、干湿季节分明、气温随地势高低垂直变化异常明显。滇西北属寒带型气候,长冬无夏,春秋较短;滇东、滇中属温带型气候,四季如春,遇雨成冬;滇南、滇西南属低热河谷区,有一部分在北回归线以南,进入热带范围,长夏无冬,一雨成秋。同日早晚较凉,中午较热,尤其是冬、春两季,日温差可达12℃~20℃。

  • 济南2022中小学教师资格面试退费申请截止什么时候?

    答:退费申请截止时间为5月20日24:00。接教育部教育考试院通知,受新冠肺炎疫情影响或因居住在有中高风险区的地区无法参加2022年5月中小学教师资格考试(面试)的考生,可申请退费。经教育部教育考试院核准退费的考生,其报名费将按原渠道全额退回,其通过的笔试科目合格成绩有效期同时自动延长半年,退费时间约为1-2个月,请务必保持原支付渠道畅通。

  • 前端javascript基础(干货前端开发中)

    前端开发中会遇到很多JS插件,在此为大家举例了一些,也是经常在项目中所应用到的,希望对大家有所帮助吧!也欢迎大家在下方热烈的留言。一.弹出层二.音频视频三.表单四.动画切版qieban(.cn)

  • 用星星纸自制手帐胶带(豆瓣日记:DIY)

    本文作者“peachbaby”,现居北京,目前已发表了65篇原创文字,至今活跃在豆瓣社区。下载豆瓣App搜索用户“peachbaby”关注Ta。这种方法做出的烫金是不会掉的哦黑色胶带、背景印章、离型纸、浮水印台、凸粉、热熔枪我试了好几种颜色的凸粉,效果都不错~各种图案的胶带、车票印章、油性速干印台、白色不干胶纸、剪刀可以尝试各种不同的花纹~我和朋友的手帐书上架啦~欢迎关注!

  • 兔肝煲粥(兔肝煲粥应该怎么做)

    我们一起去了解并探讨一下这个问题吧!兔肝煲粥兔肝煲粥是兔肝为主料制作的药膳。每次用兔肝洗净,大米适量。做法:大米洗净,浸泡30分钟。将足够量的水倒入锅中,加入大米煮沸,加入兔肝和食用油煮沸。再改小火熬煮成粥。食用时加盐调味即可。适用于肝肾虚之视力减退,肝虚头晕目眩,小儿角膜软化症等。

  • 上班族饮食应注意什么(上班族饮食应注意啥)

    上班族饮食应注意什么三餐定时研究显示,过了晚上8点之后,身体分泌的醣类物质越来越少,以至于消化系统分解食物的速度和效率也会逐渐降低。水果和纤维含量高的食物能帮助肠胃蠕动,有助于消化,可以在晚上食用。饭后适量运动饭后半小时适量运动能避免脂肪的囤积,尤其对于办公室女性来说,长时间伏案工作,腰腹部脂肪特别容易存积,所以午饭之后不能马上坐下来工作。

  • 顶流可以维持几年(怎么糊成了这样)

    继仝卓高考作弊翻车之后。2008年8月开播的《天天向上》,很快就冲进全国收视前三,被评为年度最佳节目。在周五晚七点半这个黄金时段播放,也足以证明了它在湖南台的地位。都是该话题范畴里的重量级人物,或者有着国民热度的典型代表。大量涌现的新形式节目虽然火爆,但始终没法撼动其内地综艺第一的位置。欧弟则是第二主持,负责助攻。这就是团队优先于个人的体现。例如采访机组人员的这一集,机长提醒大家坐飞机要注意保管财物。

  • 石菖蒲的功效与作用(石菖蒲的好处有哪些)

    石菖蒲的功效与作用祛痰开窍:石菖蒲可以化湿浊,它的气味芳香,也具有窍祛痰湿的功效,适用于清阳不升而引起的神识不清、耳聋目昏和精神迟钝等症状。临床上对于精神病患者有镇静和催眠的作用。

  • 早上去江边跑步好吗 早上在江边跑步好不好

    小贴士注意不要在空腹或者刚吃完饭后进行运动,容易导致肠胃不适。早上什么时候去跑步好一般是在7-9点左右较好。而一般到七点左右,太阳已经出来,植物进行了光合作用,空气质量会比较高,运动效果也会比较好。

  • 初音未来是哪个动漫的(初音未来哪首歌好听)

    初音未来是哪个动漫的初音未来并不是出自动漫,初音未来是CRYPTONFUTUREMEDIA以Yamaha的VOCALOID2语音合成引擎为基础开发贩售的虚拟女性歌手软件。由声优藤田咲提供原声。初音未来3首比较好听的歌:①《恋爱裁判》是主要由40mP制作的VOCALOID歌曲,发表在日本niconico动画网。目前已经是传说级歌曲。②《深海少女》是比较前早的歌了,也是不少人的入坑曲。③《胧月》是一首平和恬静的曲子。适合在一个月色朦胧的晚上出去散步听。歌词很美,很有诗意,旋律更是没的说。