写点什么

AWS 和 Microsoft 合作推出的新机器学习库

  • 2019-11-08
  • 本文字数:1861 字

    阅读完需:约 6 分钟

AWS 和 Microsoft 合作推出的新机器学习库
今天,


AWS



Microsoft


联合发布了


Gluon


– 一种新的开源深度学习接口,可帮助开发人员更轻松、更快速地构建机器学习模型,而不牺牲任何性能。 !


Gluon 徽标


Gluon 采用一系列预先构建并经过优化的神经网络组件,为定义机器学习模型提供清晰、简洁的 API。刚刚接触机器学习的开发人员会发现此接口更像传统代码,因为他们可以像使用任何其他数据结构那样定义和操作机器学习模型。经验丰富的数据科学家和科研人员也会发现它的宝贵价值:快速构建原型和利用动态神经网络图实现全新模型架构,而又不减缓训练进度。Gluon 现已在


Apache MXNet


中可用,日后将“进驻”Microsoft Cognitive Toolkit 及其他架构。


**神经网络与开发人员 **使用神经网络的机器学习 (包括“深度学习”) 包含三个主要部分:训练数据、神经网络模型和训练神经网络的算法。您可以将神经网络看成是一种有向图:它有一系列输入 (数据),通过一系列连接的层和权重连接到一系列输出 (预测)。在训练期间,算法根据网络输出中的错误调整网络中的权重。这就是网络学习的过程 – 一种可能需要持续数天时间的内存和计算密集型过程。Caffe2、Cognitive Toolkit、TensorFlow 以及


Apache MXNet


等深度学习框架能够部分解决“如何加快这一过程?”的难题。与数据库中的查询优化器一样,训练引擎越了解网络和算法,越能更好地优化训练过程 (例如,它可以根据其他部分的改变,推断需要重新计算图中的哪些部分并跳过不受影响的权重,从而加快训练进度)。此外,这些框架还提供并行功能,可通过分发计算过程来减少总体训练时间。但是,要实现上述优化,大多数框架要求开发人员完成一些额外工作:首先,提供网络图形式定义,然后“定图”并调整权重。网络定义可能极其庞大而复杂 (包含数百万个连接),通常必须手动构建。深度学习网络十分“笨重”,难以调试,因而很难在项目间复用代码。


这种复杂性可能会令初学者“无从下手”,对经验丰富的科研人员来说也是一项耗时的任务。AWS 在 MXNet 中尝试了一些更灵活易用的新方法定义和训练神经网络。Microsoft 也是开源项目 MXNet 的开发者,对部分新想法感兴趣。于是我们进行了沟通,结果发现双方抱持几乎相同的愿景:借助此类技术降低机器学习的复杂性,让更多的开发人员能够轻松发挥其强大威力。


**Gluon 特点:动态图,快速迭代,可扩展训练


**Gluon 包含四大创新。


  1. 友好的 API:可以使用简单、清晰、简洁的代码定义 Gluon 网络 – 相比某些更晦涩、更形式化的网络及相关加权评分函数定义方法,这更易于开发人员学习,理解难度大幅降低。

  2. 动态网络:Gluon 中的网络定义是动态的:它可以像任何其他数据结构一样“收缩和扩展”。这有别于更常见的形式化网络符号定义 (既深度学习框架要求必须保持网络定义不变,才能在训练期间有效地优化计算)。相比之下,动态网络更容易管理。借助 Gluon,开发人员可以在定义网络和算法时轻松混用快速的符号表示和更友好、动态的“命令式”定义。

  3. 可以使用算法定义网络:这大大加强了模型与训练算法的联系。在这种情况下,算法可以在定义和训练期间动态调整网络,而不仅仅是独立的定义。也就是说,开发人员能够使用标准的编程循环、条件语句创建此类网络,科研人员也能定义以前无法实现的更复杂的算法和模型。不管是创建、更改还是调试,难度都大幅下降。

  4. 由高性能运营商进行训练:这样可在不牺牲训练速度的情况下提供友好、简洁的 API 和动态图,可谓是机器学习领域的一大进步。某些框架为深度学习提供了友好的 API 或动态图,但以前的此类方法都会减缓训练速度。与其他领域的软件一样,抽象需要在运行时进行协商和解释,因而会减慢计算速度。但 Gluon 将简明的 API 与形式化定义进行了深层融合,无需开发人员了解具体细节或手动调整编译器优化。


能通过 Gluon 向开发人员提供此类改进,AWS 团队和 Microsoft 的协作者倍感兴奋。目前,已有开发人员和科研人员提供十分积极的反馈。


**开始使用 Gluon


**Gluon 现已在 Apache MXNet 中可用,将在未来版本中支持 Microsoft Cognitive Toolkit。我们还将发布前端接口和底层 API 规范,以便在适当的时候“进驻”其他框架。


您可以立即试用 Gluon – 只需点击 AWS 深度学习 AMI,就能试验 50 个完全能够正常工作的笔记本示例。如果您是机器学习框架开发者,请访问 GitHub 查阅接口规范。


本文转载自 AWS 技术博客。


原文链接:


https://amazonaws-china.com/cn/blogs/china/introducing-gluon-a-new-library-for-machine-learning-from-aws-and-microsoft/


2019-11-08 08:00509

评论

发布
暂无评论
发现更多内容

用JAVA捋一下设计模式23-解释器模式

下雨了

设计模式 4月月更 解释器模式

使用 fluro 转场动画优化页面跳转体验

岛上码农

flutter 移动端开发 安卓开发 4月月更 苹果开发

架构实战营毕业总结(第 5 期)

唐尤华

架构实战营

Kubernetes官方java客户端之七:patch操作

程序员欣宸

4月月更

Linux驱动开发-proc接口介绍

DS小龙哥

4月月更

CDH/HDP迁移之路

星环科技

开源IM项目OpenIM发布消息推送api,支持应用与IM互通深度融合

Geek_1ef48b

图数据库渐成技术新风口,星环科技自研图数据库领跑新赛道

星环科技

DDD实战(7):战术设计、整体流程与首次冲刺

深清秋

DDD 软件架构设计 生鲜电商系统

在线XML美化格式化工具

入门小站

工具

用JAVA捋一下设计模式1-简单工厂模式

下雨了

设计模式 简单工厂模式 4月月更

【PIMF】《伟大的计算原理》提炼“六脉神剑”认识OpenHarmony技术路线

离北况归

《伟大的计算原理》 技术路线 IMF

业务流程驱动的数字化转型,中小微企业开启转型的最简单方法论

王吉伟频道

RPA 数字化转型 机器人流程自动化 业务流程自动化

聊聊最近比较火的一款Web3.0应用(25/100)

hackstoic

区块链 gamefi Web3.0 stepn Play2Earn

Bigdata作业 第五周

Pyel

用JAVA捋一下设计模式2-工厂方法模式

下雨了

设计模式 工厂方法模式 4月月更

用JAVA捋一下设计模式3-抽象工厂模式

下雨了

设计模式 抽象工厂模式 4月月更

白话大数据 | 关于图数据库,没有比这篇更通俗易懂的啦

星环科技

开源IM项目OpenIM每周迭代版本发布-群管理 阅后即焚等-v2.0.6

Geek_1ef48b

作业七

Geek_f3e842

架构实战营

用JAVA捋一下设计模式 4-单例模式

下雨了

设计模式 单例模式 4月月更

Sophon 3.0全面升级,你准备好拥抱进阶版本的ML建模平台了吗?

星环科技

XX物流同城快递架构设计文档

Steven

李智慧 高并发架构实战课

在线条码生成器

入门小站

工具

maven工具的使用

Rubble

4月日更

PlatoFarm空投社区的逻辑,效仿无聊猿还是Dao理念使然

小哈区块

如何在VC领域脱颖而出,Tiger DAO VC给出答案

BlockChain先知

Linux之lastlog命令

入门小站

Linux

Spinner: Pinterest的工作流平台

俞凡

架构 工作流引擎 大厂实践 Pinterest

“卷王”英伟达的真面目

脑极体

设计电商秒杀系统

唐尤华

架构实战营

AWS 和 Microsoft 合作推出的新机器学习库_语言 & 开发_亚马逊云科技 (Amazon Web Services)_InfoQ精选文章