亚洲工业智能制造领域专业门户网站 - 亚洲自动化与机器人网

 
當前位置: 首頁 » 行業資訊 » 機器人»微軟Facebook聯手發布AI生態系統,推出開放神經網絡交換格式
   

微軟Facebook聯手發布AI生態系統,推出開放神經網絡交換格式

 46.1K
     [點擊復制]
放大字體  縮小字體 發布日期:2017-09-09   瀏覽次數:1014
核心提示:  微軟Facebook聯手宣布AI生態體系,推出 Open Neural Network Exchange(ONNX,開放神經收集交流)格局,這是一個用于表現深度進修模子的尺度,可以使模子在分歧框架之間停止轉移。ONNX是邁向開放生態體系的第一

微軟Facebook聯手發布AI生態系統,推出開放神經網絡交換格式

  微軟Facebook聯手宣布AI生態體系,推出 Open Neural Network Exchange(ONNX,開放神經收集交流)格局,這是一個用于表現深度進修模子的尺度,可以使模子在分歧框架之間停止轉移。ONNX是邁向開放生態體系的第一步,AI開辟人員可以輕松地在最早進的對象之間轉換,并選擇最合適他們的組合。然則,如今體系支撐的框架只要Caffe2,PyTorch 和Cognitive Toolkit ,谷歌的TensorFlow并沒有被包括在內。在TensorFlow的市場份額迅猛增加確當下,兩家企業的聯手,仿佛有特殊的意味。

  Facebook 和微軟宣告,推出 Open Neural Network Exchange(ONNX,開放神經收集交流)格局,這是一個用于表現深度進修模子的尺度,可以使模子在分歧框架之間停止轉移。ONNX是邁向開放生態體系的第一步,AI開辟人員可以輕松地在最早進的對象之間轉換,并選擇最合適他們的組合。

  以下是Facebook、微軟官方博客的引見:

  在開辟進修模子時,工程師和研討人員有很多AI框架可以選擇。在項目開端時,開辟人員必需選擇對應一個框架的特點(features)。許多時刻,在研發進程中停止試驗時選擇的 feature 與臨盆所需的 feature 是紛歧致的。很多組織都沒有很好的辦法來清除這些操作形式之間的差距,只要采用一系列發明性的處理方法來應對,例如請求研討人員在臨盆體系中任務某人工翻譯模子。

  Facebook 與微軟一路開辟了 ONNX,以彌合這一差距,讓AI開辟人員可以選擇相符項目以后階段的框架,并跟著項目標成長輕松切換框架。Caffe2,PyTorch 和Cognitive Toolkit 將在9月份宣布對 onNX 的支撐,這將許可在個中一個框架練習的模子導出到另外一個框架來停止推理。我們約請社區參加這一盡力,并在其生態體系中支撐ONNX。完成分歧框架之間的互相操作性,簡化從研討到臨盆的進程,將有助于進步AI社區立異的速度。

  onNX 在 Facebook 外部應用

  onNX 是 Facebook 深度進修辦法的主要構成部門。在Facebook的AI團隊(FAIR和AML)中,我們賡續測驗考試推進AI的前沿研討,開辟更好的進修算法。當我們獲得一個沖破時,我們愿望盡快在運用中供給更好的技巧。經由過程ONNX,我們專注于將AI研討和產物完成更慎密地聯合在一路,從而更快地停止立異和安排。

  測驗考試新模子的人們,特殊是研討人員,愿望在編寫神經收集時具有最年夜的靈巧性和表示力——從靜態神經收集到支撐梯度突變(gradients of gradients),同時堅持根本的ConvNet機能。研討人員也想完成疾速迭代,這意味著他們須要優良的交互式開辟和調試對象。PyTorch旨在沖破研討框架的局限,使研討人員免受平臺的限制,讓他們可以或許比之前更輕易地表達設法主意。

  相反,產物流程天天都須要對年夜量新的數據停止練習和推理,同時堅持模子年夜部門不變。細心優化產物的特定模子的代碼,例如經由過程量化和細心編寫人工調劑的代碼(hand-tuned code)之類的技能節儉資本。Caffe2曾經在產物、挪動和極端斟酌機能的情形構建起來。Caffe2的外部靈巧并且高度優化,所以我們可以應用技能將更年夜更好的模子安排到機能缺乏的硬件中。

  經由過程 ONNX,我們可以在這兩個方面取得最優。我們如今可以從PyTorch導出很多罕見神經收集的模子,并將它們安排在Caffe2上。這是將最新的研討結果疾速推向臨盆的第一步。在接上去的幾個月中,我們將增強ONNX,并對Caffe2和PyTorch停止改良,使其可以或許更深刻地互通。

  怎樣運轉

  為了完成ONNX支撐,我們必需對PyTorch和Caffe2停止更改,而且在框架之間同一運算符。在Caffe2中,這個進程相似于添加一個翻譯器,由于Caffe2曾經有一個內置的靜態圖。在PyTorch中,神經收集是被界說為法式而不是顯式圖,是以這帶來了更年夜的挑釁。為了從法式中提取圖,我們開辟了一個跟蹤器,將運轉時法式履行的操作記載上去。跟蹤法式清除了龐雜性,并使其更輕易轉換為圖表現。

  要懂得它是若何任務的,看以下代碼:

  x = y * 2

  if someComplicatedFunction(): z = x + y

  else: z = x * y

  要直接導出此代碼,ONNX將不能不支撐conditionals和某些龐雜函數 someComplicatedFunction();現實上成了通用編程說話。但是,在很多深度進修模子中,someComplicatedFunction() 的成果在推理進程中老是雷同的。例如,在PyTorch前提中,平日是對輸出張量的年夜小或尺寸停止的一些盤算。在這些情形下,經由過程代碼的單一跟蹤將會更簡略,而且可以輕松地在ONNX中表現為:

  #someComplicatedFunction() == True

  x = y * 2 z = x + y

  今朝,我們的tracer能與很多罕見的神經收集合營應用,但PyTorch中一些更先輩的法式,好比有靜態流掌握(dynamic flow control)的法式還不可。跟著時光的推移,我們將完美ONNX和tracer來支撐這些法式,閃開發人員可以充足應用PyTorch的靈巧性與Caffe2的高機能壯大安排功效。

  微軟:onNX 表征具有框架互操作性和同享優化兩年夜長處

  在 Facebook 宣布博客的同時,微軟也宣布了題為《微軟和 Facebook 為 AI 模子的互操作性構建開放生態體系》的博客。在博客中,微軟表現:

  微軟給年夜家做出的許諾是“”人人無機會更便利,更有價值。我們供給各類平臺和對象來增進這一點,包含我們的認知對象包,一個構建深層神經收集的開源框架。我們還與其他分享我們不雅點的組織協作,贊助 AI 社區。

  明天,我們愉快地宣告,微軟和Facebook 一路推出Open Neural Network Exchange (ONNX,開放神經收集交流) 格局。 ONNX為AI 框架生態體系中的互操作性和立異供給了同享的模子表征。CognitiveToolkit,Caffe2和PyTorch都將支撐ONNX。微軟和Facebook 配合開辟了onNX 這一開源項目,并愿望社區可以或許贊助其賡續退化。

  甚么是onNX 表征?

  Cognitive Toolkit 和其他框架供給了使開辟人員更輕易構建和運轉表征神經收集的盤算圖的界面。固然供給的功效相似,然則明天的每一個框架都有本身表征這些圖的格局。 ONNX表征有以下重要長處:

  1.框架互操作性

  開辟人員可以更輕松地在框架間轉換,并為手頭的義務選擇最好對象。每一個框架都針對詳細特征停止了優化,如疾速練習,支撐靈巧的收集架構,在挪動端停止推理等等。很多時刻,研發進程中最主要的特征與臨盆環節最主要的特征是分歧的。這招致開辟人員在框架之間停止模子轉換時,會因框架應用不準確或顯著延遲而使得效力下降。應用onNX 表征的框架簡化了這一點,使得開辟人員加倍靈巧。

  2.同享優化

  硬件供給商和其他改良神經收集機能的優化可以經由過程定位onNX 表征來同時影響多個框架。優化常常須要被分離整合進入每一個框架,這一進程很費時光。onNX 表征使得優化更輕易完成,從而籠罩更多開辟人員。

  技巧總結

  onNX 供給了可擴大盤算圖模子的界說,和內置 operators 和尺度數據類型的界說。起先我們專注于推理(評價)所需的才能。

  每一個盤算數據流圖被結構為構成非輪回圖的節點列表。節點具有一個或多個輸出和一個或多個輸入。每一個節點是對 operators 的挪用。

  可用性

  onNX 代碼和文檔的初始版本如今曾經在GitHub(https://github.com/onnx/onnx)上開源,召喚著社區的立刻介入。我們將積極展開基于onNX 的任務,行將推出的Cognitive Toolkit 也將對其支撐。我們還籌劃和Facebook一道,供給安排參考、示例、對象和model zoo。

  onNX 表征構成了開放生態體系的基本,使 AI 更輕易獲得并富有價值。開辟人員可認為其義務選擇適合的框架,框架作者可以專注于立異,硬件供給商可以簡化優化流程。我們愿望社區可以或許支撐ONNX,以完成這一使人高興的愿景。

  下一步是甚么

  我們明天宣布最新版本的Caffe2和PyTorch,帶有ONNX支撐。我們愿望你對新功效能跟我們一樣高興!它們處于晚期階段,我們愿望你們檢討出來并提交你的反應和改良。我們將持續成長ONNX,PyTorch和Caffe2,確保開辟人員具有AI的最新對象。敬請等待后續更新!

只要你關注機器人,你就無法錯過睿慕課

 
 
 
[ 行業資訊搜索 ]  [ 加入收藏 ]  [ 告訴好友 ]  [ 打印本文 ]  [ 關閉窗口 ]
 
 
 
主站蜘蛛池模板: 硫化罐_蒸汽硫化罐_大型硫化罐-山东鑫泰鑫智能装备有限公司 | 工业硝酸钠,硝酸钠厂家-淄博「文海工贸」 | 玻璃钢罐_玻璃钢储罐_盐酸罐厂家-河北华盛节能设备有限公司 | CTP磁天平|小电容测量仪|阴阳极极化_双液系沸点测定仪|dsj电渗实验装置-南京桑力电子设备厂 | 低浓度恒温恒湿称量系统,强光光照培养箱-上海三腾仪器有限公司 | 粉末包装机-给袋式包装机-全自动包装机-颗粒-液体-食品-酱腌菜包装机生产线【润立机械】 | 培训一点通 - 合肥驾校 - 合肥新亚驾校 - 合肥八一驾校 | 领先的大模型技术与应用公司-中关村科金 | 半自动预灌装机,卡式瓶灌装机,注射器灌装机,给药器灌装机,大输液灌装机,西林瓶灌装机-长沙一星制药机械有限公司 | ph计,实验室ph计,台式ph计,实验室酸度计,台式酸度计 | 超声波破碎仪-均质乳化机(供应杭州,上海,北京,广州,深圳,成都等地)-上海沪析实业有限公司 | 自动气象站_气象站监测设备_全自动气象站设备_雨量监测站-山东风途物联网 | 液压油缸-液压站生产厂家-洛阳泰诺液压科技有限公司 | PSI渗透压仪,TPS酸度计,美国CHAI PCR仪,渗透压仪厂家_价格,微生物快速检测仪-华泰和合(北京)商贸有限公司 | 粘度计,数显粘度计,指针旋转粘度计| 污泥烘干机-低温干化机-工业污泥烘干设备厂家-焦作市真节能环保设备科技有限公司 | 老房子翻新装修,旧房墙面翻新,房屋防水补漏,厨房卫生间改造,室内装潢装修公司 - 一修房屋快修官网 | 全自动烧卖机厂家_饺子机_烧麦机价格_小笼汤包机_宁波江北阜欣食品机械有限公司 | 电抗器-能曼电气-电抗器专业制造商| 天津力值检测-天津管道检测-天津天诚工程检测技术有限公司 | EPK超声波测厚仪,德国EPK测厚仪维修-上海树信仪器仪表有限公司 | 南京PVC快速门厂家南京快速卷帘门_南京pvc快速门_世界500强企业国内供应商_南京美高门业 | CNC机加工-数控加工-精密零件加工-ISO认证厂家-鑫创盟 | 有机肥设备生产制造厂家,BB掺混肥搅拌机、复合肥设备生产线,有机肥料全部加工设备多少钱,对辊挤压造粒机,有机肥造粒设备 -- 郑州程翔重工机械有限公司 | 杭州中策电线|中策电缆|中策电线|杭州中策电缆|杭州中策电缆永通集团有限公司 | 杭州中策电线|中策电缆|中策电线|杭州中策电缆|杭州中策电缆永通集团有限公司 | 氨水-液氨-工业氨水-氨水生产厂家-辽宁顺程化工 | 同学聚会纪念册制作_毕业相册制作-成都顺时针宣传画册设计公司 | 截齿|煤截齿|采煤机截齿|掘进机截齿|旋挖截齿-山东卓力截齿厂家报价 | 冰晶石|碱性嫩黄闪蒸干燥机-有机垃圾烘干设备-草酸钙盘式干燥机-常州市宝康干燥 | 切铝机-数控切割机-型材切割机-铝型材切割机-【昆山邓氏精密机械有限公司】 | 体感VRAR全息沉浸式3D投影多媒体展厅展会游戏互动-万展互动 | 金刚网,金刚网窗纱,不锈钢网,金刚网厂家- 河北萨邦丝网制品有限公司 | 湖南成人高考报名-湖南成考网 | 天津货架厂_穿梭车货架_重型仓储货架_阁楼货架定制-天津钢力仓储货架生产厂家_天津钢力智能仓储装备 | 深圳宣传片制作-企业宣传视频制作-产品视频拍摄-产品动画制作-短视频拍摄制作公司 | 媒介云-全网整合营销_成都新闻媒体发稿_软文发布平台 | 临海涌泉蜜桔官网|涌泉蜜桔微商批发代理|涌泉蜜桔供应链|涌泉蜜桔一件代发 | 恒温油槽-恒温水槽-低温恒温槽厂家-宁波科麦仪器有限公司 | 耐高温电缆厂家-远洋高温电缆 | 防堵吹扫装置-防堵风压测量装置-电动操作显示器-兴洲仪器 |