LinuxStory 资讯速递 20151115 超级计算机领头者们合作开发开源超算框架

By -
今天是2015.11.15,最近发生了很多大事件,巴黎恐怖袭击,浙江丽水发生山体滑坡,江西快递货车起火,北京正在接受雾霾的洗礼?小编想说世界你都怎么了!摸摸头,来看今日 LinuxStory 带来的“重量级”消息:

1.超级计算机领头者们合作开发开源超算框架
在世界排名前500的超级计算机中,97%的超算正在运行Linux。但是,一个超算系统不仅仅需要操作系统的支持,更需要开源软件的加入。在本月12日,由linux基金会举办的 Super Computer Conference 上,高性能计算巨头们成立了 OpenHPC 协作项目,希望以此为世界上最复杂精密的超算环境提供一个开源框架

初始成员包括阿贡国家实验室、巴塞罗那超算中心、Cray、Dell、富士通、惠普、英特尔、劳伦斯伯克利国家实验室、联想、洛斯阿拉莫斯国家实验室等等。
tianhe-2
超级计算技术被使用于气象天文工程核物理等领域的建模与计算中。它有着独特的应用需求和并行的运行时环境。为超算编程需要独特的编程技能,这种技能在一般的计算环境中是不同寻常的。

OpenHPC 项目期望能够联合各个超算玩家,推动开源技术在超算领域的应用。

跟随谷歌的脚步,微软最近也发布了自己的分布式机器学习工具DMLT(Distributed Machine Learning Toolkit). DMLT 的核心是C++C/S 基础框架 SDK。在微软的文档中解释道,“在多台机器上运行有多个服务器实例,这些实例负责维护全局模型参数。训练程序(routine)使用客户端API通过使用底层通信访问并且更新模型参数。”
machine-learning_14-100578657-primary.idge
微软的DMLT意在帮助数据科学家完成在大规模计算节点上的模型训练工作,而不用操心管理底层的线程管理和工作负载管理。它同时也简化了进程间通信,有两个IPC设施(MPI和ZMQ)可供使用。

目前DMLT提供了两个模型训练算法,LightLDAWord Embedding。微软对DMLT的发布相当低调,微软声称,DMLT的发布只是一个开始,有更多的算法正在加入到DMLT中。DMLT的主页:http://www.dmtk.io/index.html

华华

喜欢谋略,善良有爱心;爱古装剧,追求剧中的江湖义气和兄弟情义。一身男儿义气,却又缺点男儿侠气!常以萌妹子角色混迹江湖!

发表评论

电子邮件地址不会被公开。