在自动驾驶的模型训练环节中,最大的挑战便是要管理数十亿到数百亿个小文件,而且随着数据量的增长,企业还将会面临存储成本和运维成本等问题。那么,存储自动驾驶解决方案是如何解决难题的?下面就让小编来为大家介绍下:
+ y; |# ?8 p; C0 x: s0 H# y
/ B$ L" y, w5 l0 [ 针对这些挑战和和自动驾驶行业的多元化场景,DDN提供了基于AI/HPC深度优化的高性能NVMe网络共享文件存储A3I系列的AI400X2。AI400X2与其他传统文件存储或分布式存储的重要区别在于:它是经过存储端和计算端 “双端优化” 的产品。
' U. I* r" K! @+ ^( L
+ h" |) M9 ~! U# b4 R& ? }5 b3 } 针对海量数据安全存储和高速大数据处理,DDN存储自动驾驶解决方案提供了可安全存储 EB 级数据,高性价比的网络共享文件存储 ES 系列。采用混合介质的 ES 系列产品可以为数据收集、数据处理、仿真模拟评测等数据系统提供存储支持。
3 |# G9 X. V0 C- K9 F% d
/ ~' z/ e& e9 ]& Z, n 虽然自动驾驶涉及海量数据,但车企的数据规模并不是一蹴而就的。对于这种情况,可以从小规模开始建设,然后通过存储自动驾驶解决方案模块化的设计去做纵向和横向扩展。例如,ES7990X在20U空间里可以纵向扩容到8PB。ES18KX在2个机柜空间里可纵向扩容到33PB。
, d- |# Q2 L3 _, E$ I2 |9 B0 n
1 l( v; U; ?; G& w 如果觉得性能和容量还不够的话,由于DDN存储是分布式架构,可以无缝的横向扩展,命名空间没有上限。例如,每增加一台ES400X2或AI400X2, 性能就增加90GB/s。DDN存储在扩展方面重要的特点是:性能和容量均线性增长;海量数据无缝扩容,对前端业务没有影响。6 ?3 V& l9 v% U9 i
0 o3 }8 q- N; z4 `# @* o 关于存储自动驾驶解决方案的具体内容,小编就先为大家简单介绍到这里。总的来说,DDN自动驾驶存储方案海量数据管理特别简单,能够确保客户没有运维压力。如果大家对方案还有其他疑问,可以通过DDN的官网进一步咨询了解。
& O% H/ ?: f7 g0 i* ~# p; q' P4 Q, T/ c. w" v
|