【天极网服务器频道】深度学习在互联网的驱动下正在日益发展,而深度学习对于计算的需求是巨大的,所以深度学习与高性能计算具有天然的联系。在近日的中科曙光技术创新大会上,中科曙光联合中国科学院计算技术研究所以及NVIDIA公司共同签署了深度学习联合实验室成立备忘录。同时,曙光也发布了X System平台——包括深度学习软件XSharp和XMachine系列深度学习一体机。
曙光和NVIDIA的合作其实并不出人意外,因为在NVIDIA专业解决方案2015战略发布会上,笔者已经看到了曙光和NVIDIA在深度学习领域的合作。在当时的发布会上,NVIDIA全球副总裁、PSG兼云计算业务中国区总经理潘迪就表示,NVIDIA是一个技术型的公司,NVIDIA与生态链伙伴一直在积极互动,客户最终关心的是一个整体的解决方案,所以在中国,NVIDIA与曙光、浪潮、联想等合作伙伴拓展GPU的应用场景。
NVIDIA全球副总裁、PSG兼云计算业务中国区总经理潘迪
曙光信息产业股份有限公司副总裁沙超群
在发布会上,曙光信息产业股份有限公司副总裁沙超群也被邀请进行了主题演讲,沙超群当时就透露了曙光将与NVIDIA进一步合作,针对不同企业在深度学习训练方面的需求,定制专门优化的训练硬件设备。所以这也就为曙光和NVIDIA在中科曙光技术创新大会上的合作埋下了伏笔。
其实曙光和NVIDIA的合作由来已久,曙光在HPC产品上应用GPU加速计算的研究非常广泛。在高性能计算层面,双方实现了优势互补。中科曙光拥有丰富的产品线,而NVIDIA在GPU技术、CUDA算法、GPU数学库等方面的优势也非常明显。所以双方在深度计算方面的合作空间是巨大的。
目前国内企业对机器学习的研究与应用,更多局限于互联网用户,很多中小企业多是望其项背。联合实验室三方希望降低企业的入门难度,将深度学习技术进行全面推广,更加切实有效的推动深度学习技术在国内的发展。
在具体的战略模式上,三方表示,将根据市场需求做出多种选择。针对正在使用深度学习的互联网公司,合作开发是主旋律。大公司科研能力强,联合实验室在异构计算、并行计算等算法领域可以提供更多帮助。而面向中小企业,深度学习云服务产品则更易实现。曙光公司总裁助理、高性能计算产品事业部经理曹振南说,我们计划依托曙光国家级云中心在全国范围内的部署,为一些中小型企业提供面向深度学习和人工智能的云服务。因为我们很清晰的看到,深度学习的客户绝不仅仅只有以BAT为代表的企业。
针对一些行业对云安全问题心存顾虑,并不愿意把数据通过云的模式进行智能分析。三方实验室提供定制化的软硬件产品,也就是X System平台——包括深度学习软件XSharp和XMachine系列深度学习一体机。
联合实验室成立备忘录签署的同时,曙光深度学习XSystem系统也同时发布。该系统包含深度学习XSharp软件栈和XMachine硬件平台,是专为用户提供的一体化的深度学习软硬件整体解决方案。借助一体化平台,用户可以快速进入深度学习领域。这套系统目前已经实现产品化,现在已经有终端的用户在这个框架上做出了一些研究。
XSharp产品理念以用户应用为主,科研为辅,更多面向企业用户的实际应用。同时,XSharp软件栈各模块可以随意组合,按照用户应用进行裁剪,满足不同需求。而作为整个系统的硬件平台,XMachine深度学习一体机特别为深度学习定制开发,提供多种类型GPU服务器供选择,原生态支持NVIDIA DIGITS开发环境,可大大降低用户进入深度学习领域的软件投入成本。
XMachine深度学习一体机其实就是曙光和NVIDIA合作的具体落地。DIGITS是一个NVIDIA开源的深度学习平台,DIGITS可在安装、配置和训练深度神经网络过程中为用户提供指导,处理复杂的工作好让科学家能专心在研究活动和结果上。得益于其直观的用户界面和强大的工作流程管理能力,不论是在本地系统还是在网络上使用DIGITS,准备和加载训练数据集都相当简单。这是同类系统中首个提供实时监控和可视化功能的系统,用户可以对工作进行微调。
而且NVIDIA深度学习工程团队为了自己的研发工作而开发的DIGITS DevBox,是一套集多项功能于一身的平台,能够加快深度学习的研究活动。其实DIGITS DevBox已经预先安装了数据科学家和研究人员在开发自己的深度神经网络时,所需要使用到的各种软件。所以可以看出来XMachine深度学习一体机和DIGITS DevBox类似,就是为用户提供预配置的深度学习一体化开发平台,帮助用户实现深度学习的敏捷开发。
总之,曙光和NVIDIA的合作加速了深度学习市场的发展,凭借NVIDIA在GPU方面的技术优势以及中科曙光在高性能计算市场的多年耕耘,中国的深度学习市场将迎来快速发展的阶段。