- 为何新药研发、基因测序、卫星遥感的发展提速都需要它?
- 来源:华为
那么到底什么是HPC,这项技术对社会发展有什么深远影响,答案尽在本期鹏友会客厅。
数据存储承担
文明传承、生产生活改善、科技
创新三大重任
在数字化时代,数据存储是政企运行的生命线,更是国之重器:通过文物数字化保护,大量珍贵的遗迹以图片、视频、VR等数字化形式保存了下来,让文明得以传承;另外,存储对生产生活改善、科技创新方面的影响更加广泛,尤其是科技创新领域,现在已经成为国家和企业间竞相角逐的战略高地。
HPC与大数据/AI结合快速增长
HPC产业走向数据密集型
HPC诞生的前半个世纪,其发展核心矛盾在于计算,也就是我们所说的“计算密集型”HPC。随着技术发展及高性能数据分析的出现,数据量越来越大,数据重要性越来越高,HPC开始迎来“数据密集型”的新发展阶段。
没有高性能计算的加持,阿凡达的渲染可能需要上万年,而随着电影画幅和体验的提升,渲染量还会进一步增加,如2019年上映的《阿丽塔:战斗天使》,它的渲染量就是阿凡达的三倍。
同样的数据变化也发生在HPC领域的其他场景:
新药研发领域:借助HPC可以加速药物筛选和分子分析,使新药的研发周期大幅缩短,如面对当前严重的疫情,更多的样本集、更快的数据提炼,可以更快的研发生产出疫苗;
新车研发领域:随着近年来自动驾驶的兴起,新车研发利用HPC进行自动驾驶的车辆测试。上百台的测试车辆,每台测试车路测时长达2000小时左右,单辆测试车路测采集数据量最高可达64TB/天,通过HPC实现车辆碰撞的技术仿真,大幅降低了研发费用和周期;
能源勘探领域:利用高性能计算(HPC)技术,对地震勘探数据进行加工、计算,为能源勘探提供直观的、可靠的依据。随着勘探技术的进步,地震数据实现了从二维到三维的转变,并且逐步向四维演进,数据量也向PB规模发展,中间过程数据的增加高达10~20倍,加上历史资料的长期保存,整体数据量成几十倍增长,呈现出数据密集型的特征;
卫星遥感领域:随着大数据、AI等新技术在卫星遥感领域的应用,卫星遥感领域数据量增长了近70倍,卫星遥感的定位精度由以前的70米提升到了2米。
“数据密集型”HPC发展核心在于数据,
存储扮演着更重要的角色
新的高性能计算应用不断涌现,驱动了数据密集型HPC的高速发展,我们也称为高性能数据分析(HPDA)。比如当下炙手可热的自动驾驶,新车的研发需要对上百PB的数据进行训练和仿真,对于存储的性能、稳定性、安全性等都提出了新的挑战,存储更成为了链接计算、网络的核心基础设施。
政府应对“数据密集型”HPC趋势
从超算向智算平台演进,以数据为中心
牵引算力和存力均衡发展
政府在高性能计算/超算领域,一直扮演着举足轻重的作用,可以通过公共力量,快速、规模化推进民生和经济发展。作为新基建的重要组成部分,各地纷纷上马超算国家中心/区域中心,然而,超算中心的建设确有一些偏科,呈现出了重建设轻应用、重计算轻数据的特点,造成了一些资源的闲置与浪费。
面向未来,我们认为加快数据密集型超算的建设会成为主要的方向,包括从超算向智算平台的演进,用人工智能、大数据等新应用生态加持超算中心,实现以数据为中心牵引采、存、算、传、用等多维度的均衡发展。
企业应对“数据密集型”HPC趋势
建设数据湖,使用专业的存储设备,
关注前沿科技
当前,对于企业来讲,数据的价值已经得到了充分的认识,企业也愿意更多、更久的保存数据,而数据量也实现了从PB向EB级的跨越。想象一下,企业消耗巨额成本获取的车辆路测数据、地震资料、粒子碰撞数据等一旦丢失,损失将是难以估量的,并且在长周期的数据分析过程中,任何的存储故障,都可能导致分析过程的前功尽弃。
面对海量数据,企业在存储选型上,应更加关注存储性能、关注存储本身的数据处理能力,以及AI应用结合、大数据等一些前沿科技发展,从一开始就树立数据湖的意识,让数据应存尽存、高效共享:
高密硬件架构、重删压缩、高效冗余算法、热温冷分级机制,以及蓝光介质等,这些非常好的技术手段能让海量数据更加经济、高效、安全的存储;人工智能/大数据技术的加持,能对更长远的数据进行分析,获得更准确、更有价值的分析结果。
华为OceanStor Pacific下一代
高性能数据分析(HPDA)存储
加速HPC向数据密集型演进
华为OceanStor Pacific系列下一代高性能数据分析(HPDA)存储,可以高效应对HPC产业向数据密集型升级的关键挑战:
超高密设计:通过系列化高密硬件和智能数据分级能力,实现成本优化,数据存得多、存得省;
面向混合负载:一套存储同时支持高带宽和高IOPS,应对复杂负载;
多协议互通:文件/大数据/对象多协议互通,让不同应用的承载更高效。
作为HPC产业的重要数据底座,高性能数据分析存储在探索知识边界、服务国计民生、加速商业变现等领域发挥着着重要的作用。华为OceanStor Pacific下一代高性能数据分析(HPDA)存储,以超高密设计、面向混合负载、多协议互通,全面加速HPC向数据密集型演进。目前已经成功应用于自动驾驶、基因测序、气象预测、卫星遥感等众多国内外高性能计算场景企业及机构。
《鹏友会客厅》是一档科技信息谈话类节目,由科技观察者张福鹏主持,邀请产学研各界专家针对信息技术发展趋势或热点话题进行研究,节目中嘉宾各抒己见,融百家之智慧,与实际生活体验相结合,以雅俗共赏之风格,带领观众走进辨析科技发展的真理之路。
科技
-
- 线下展会,市民畅享科技大餐
- 5月28日,是2021中国国际大数据产业博览会线下展最后一天,也是免费向市民开放的公众日。趁此机会,记者继续带您探秘国际综合馆(W1馆)、数字应用馆(W2馆)、前沿技术馆(E1馆)、智慧产业馆(E2馆)4...
- 贵阳晚报
-
- 为何新药研发、基因测序、卫星遥感的发展提速都需要它?
- 人类第一次完整全基因组的测序花了13年,在新技术的加持下,这个时间已经降低到1天以内;没有这项新技术加持,电影《阿凡达》的渲染可能需要上万年;这项新技术还让新药的研发周期大幅缩短,让卫星遥感定位精度...
- 华为
-
- 大型金属3D打印厂商钢研极光亮相TCT,展示强大的生产服务能力
- 2021亚洲3D打印、增材制造展览会 (TCT Asia)于2021年5月26日-28日在国家会展中心(上海)7.1馆隆重举办。作为官方战略合作媒体,南极熊将会全程现场报道(地址https://www.nanjixiong.com/foru
- 南极熊3D打印
-
- 美国国家情报委员会《全球趋势2040——竞争更激烈的世界》报告摘译
- 2021年3月,美国国家情报委员会(NIC)发布了每四年一度的全球趋势预测报告《全球趋势2040——竞争更激烈的世界》。NIC是美国最高层级的战略情报机构,该委员会的成员均为来自政府、学术界和私营部门的高级专家...
- 全球技术地图
-
- 数字让监管更加智慧 上交所成功举办首届全行业技术大会
- 5月28日,上交所成功举办主题为“数字赋能,守正创新”的首届全行业技术大会。中国证监会副主席赵争平出席大会并致辞指出,证监会高度重视资本市场科技化转型与发展,确定了“数字让监管更加智慧”的愿景。...
- 上海证券报
-
- 湾区智行||中科创达赵鸿飞:汽车“新物种”需要共通的操作系统|中国汽车报
- “我是谁?我来自哪里?我要到哪里去?”这是哲学史上永恒的三大命题,同样也是我们甚至是企业需要不断思考的问题。此次采访对象——中科创达软件股份有限公司就是一家勤于思考、擅于思考的企业。这家企业在不断...
- 中国汽车报
-
- 广电总局表彰虚拟现实视频、超高清视频等5类96个优秀项目!
- 广电总局共评选出互动视频、沉浸式视频、虚拟现实视频、云游戏、超高清视频等5类96个优秀项目,分获一、二、三等奖和优秀奖,包括《中央广播电视总台5G+VR融合制播系统——春节联欢晚会 (2017- 2021)节目VR制作...
- 广电头条
-
- 占据市场最新赛道,“中国制造”机器人迎来爆发期
- 【环球时报记者 邢晓婧 杨沙沙】配餐机器人、迎宾机器人、扫地机器人……不知不觉间,中国老百姓对出现在餐馆、医院、火车站、养老院等场景的机器人逐渐习以为常,甚至家中也出现扫地、娱乐等家用机器人。有统计...
- 环球网
-
- 最受关注展项出炉,2021年北京科技周闭幕不落幕!
- 5月28日下午,2021年北京科技周闭幕式在中关村国家自主创新示范区展示中心举行。北京市科委、中关村管委会相关负责人介绍了本届北京科技周举办情况以及最受关注的展项。市科委、中关村管委会二级巡视员王建新出...
- 科普北京
-
- 魔高一尺,道高一丈:上交所VPN攻防札记
- 本文选自《交易技术前沿》总第四十二期文章(2020年12月)谢毅 / 上海证券交易所 yxie@sse.com.cn相晓辉 / 上海证券交易所 xhxiang@sse.com.cn虚拟专用网络(以下简称“VPN”)系统、互联网业务系统、外网
- Android编程精选
-
- 绿色召集令——聚力创赢,共赴绿色能源新征程!
- 申耀的科技观察读懂科技,赢取未来!申耀的科技观察,由科技与汽车跨界自媒体人申斯基创办,18年企业级科技媒体工作经验,专注企业数字化、产业智能化、智慧城市、汽车科技内容的观察和思考。
- 申耀的科技观察
-
- 汉朔科技和微软(中国)联合推动 IoT+AI 赋能全球零售
- (本文阅读时间:4分钟)2021年5月20日,全球领先的零售数字化解决方案供应商汉朔与微软(中国)在北京举行战略合作备忘录签约仪式,以进一步推动其在零售行业的全球布局和数字化战略。根据战略合作备忘录,汉朔...
- 微软科技
-
- 关于安全访问服务边缘(SASE),你需要知道的事情
- 在企业纷纷拥抱数字业务的过程中,由于边缘计算、云服务、混合网络的逐渐兴起,使得本就漏洞百出的传统网络安全架构更加岌岌可危,而且远远无法满足企业数字业务的需要。为了应对这种情况,一个全新的模型——安...
- FreeBuf
-
- [报告]2021年中国新能源汽车行业洞察(附44页PDF文件下载)
- 新能源车大势将至,造车新势力差异化突围。以下为报告节选:......文│Mob研究院本报告共计:44页。如欲获取完整版PDF文件,请扫描下方二维码加入“车友圈”获取。#重磅推荐#需要批量下载和及时更新最新汽车行业...
- 汽车之地