(北京時間:5月7日),微軟2018年Build開發(fā)者大會在美國西雅圖拉開帷幕,這是一場面向全球開發(fā)者、合作伙伴以及消費者展示其重要產(chǎn)品和技術(shù)的盛會,很大程度上決定著微軟未來一年的發(fā)展方向。
致力于Windows操作系統(tǒng)的微軟在過去一年的表現(xiàn)甚至連“差強人意”都算不上,本次大會既是展示其在IoT、云計算、AI領(lǐng)域內(nèi)的布局成果,重塑帝國的決心;也給予全球開發(fā)者、合作伙伴以及消費者更多的信心。
早在今年三月底,微軟宣布部門重組,Windows部門被一分為二,分別納入“體驗與設(shè)備”和“云計算與人工智能平臺”兩大部門,這次重組被視為微軟內(nèi)部里程碑式的調(diào)整,外界普遍認(rèn)為這是在納德拉領(lǐng)導(dǎo)下,微軟拋開 Windows,重塑帝國的重要一步,但納德拉本人的看法卻有所不同。
4月4日,Azure部門的全球副總裁通過一篇官方博文宣布,微軟將在未來4年投入50億美元用于物聯(lián)網(wǎng)相關(guān)的研究、產(chǎn)品、服務(wù)和新項目拓展。憑借跨越云、操作系統(tǒng)和設(shè)備的物聯(lián)網(wǎng)平臺,最終達成微軟的“智能優(yōu)勢”,持續(xù)發(fā)力智能邊緣計算與智能云,打造云端一體化。
可以認(rèn)為,本次為期三天的微軟Build 2018大會是微軟繼拆分Windows部門和宣布50億美元發(fā)力物聯(lián)網(wǎng)之后的階段性成果展示。通過發(fā)布關(guān)于使用語音、攝像頭以及人工智能技術(shù)的新一代邊緣計算工具引導(dǎo)更多開發(fā)人員,將業(yè)務(wù)重心從Windows操作系統(tǒng)轉(zhuǎn)移到終端物聯(lián)網(wǎng)、智能邊緣計算方面來,“亮劍”終端物聯(lián)網(wǎng)。
“智能云與智能邊緣計算近在咫尺,這些發(fā)展為開發(fā)者帶來巨大的機遇,并且同時也讓我們倍感使命艱巨,以確保我們構(gòu)建的技術(shù)是可信、可靠,且有益于社會的?!?
微軟公司CEO薩提亞·納德拉(Satya Nadella)在大會上表示。
一、Azure IoT 項目開源
目前,不同種類的智能設(shè)備正快速涌現(xiàn)在家庭和商業(yè)場合中,預(yù)計到2020年,其總數(shù)將超過200億臺。
為此,微軟Build 2018帶來他們對于智能邊緣計算與智能云的最新進展,首先是宣布Azure IoTEdgeRuntime的開源,讓用戶能夠?qū)吘墤?yīng)用進行修改、調(diào)試,并擁有更高的透明度和控制能力。這讓定制化視覺服務(wù)將可以在Azure IoT Edge上運行。
基于此項目,微軟首先公布了兩個物聯(lián)網(wǎng)領(lǐng)域的合作伙伴,一個是與高通在計算機視覺方面的嘗試的案例,另外一個則是來自中國的大疆無人機。
圖:現(xiàn)場展示的大疆無人機
此外,微軟與大疆合作推出了面向Windows 10電腦的全新開發(fā)工具包(SDK),同時選定Azure作為首選云平臺,大疆和微軟還將利用Azure IoT Edge和微軟人工智能服務(wù)合作開發(fā)適用于農(nóng)業(yè)、建筑行業(yè)、公共安全及更多應(yīng)用場景的解決方案。
圖:高通智能攝像頭
與此同時,微軟還與高通合作打造運行Azure IoT Edge的視覺人工智能開發(fā)工具包,開發(fā)者可以利用Azure機器學(xué)習(xí)服務(wù)及高通視覺智能平臺與高通人工智能引擎的硬件加速開發(fā)應(yīng)用解決方案,攝像頭也可以用于更高級的Azure服務(wù),例如機器學(xué)習(xí)、流分析和認(rèn)知服務(wù),并且可以從云端下載到邊緣環(huán)境中在本地運行。
二、ProjectKinectfor Azure 傳感器套件
本次大會,微軟推出的Project Kinect for Azure是一組包含微軟新一代深度攝像頭在內(nèi)的傳感器套件,包括多個傳感器,比如飛行時間傳感器、鏡頭傳感器、深度記錄傳感器等等。并具備在邊緣環(huán)境中進行人工智能計算的能力。
另外,設(shè)備的前端可以實現(xiàn)之前Kinect的一系列功能,對用戶手勢進行完整追蹤并且空間映射度高,后端則應(yīng)用了Azure云平臺的機器學(xué)習(xí)、認(rèn)知服務(wù)以及 IoTEdge等人工智能服務(wù)。
圖:ProjectKinectfor Azure
微軟希望充分發(fā)揮數(shù)據(jù)、機器學(xué)習(xí)、認(rèn)知智能的威力,讓開發(fā)者可以構(gòu)建和管理內(nèi)置人工智能的解決方案。
三、Azure開發(fā)者工具
1.語音設(shè)備開發(fā)工具包(SDK),能針對多聲道音源提供高級聲音處理,從而實現(xiàn)更準(zhǔn)確的語音識別效果,包括降噪、遠(yuǎn)場聲音識別等;
2.Azure Cosmos DB升級,本次升級新加入了全球規(guī)模的異步多主數(shù)據(jù)庫,可支持云端和邊緣部署,而部署在正式商用的VNET將帶來更好的安全性;
3.ProjectBrainwave開放預(yù)覽,這種用于深層神經(jīng)網(wǎng)絡(luò)處理的架構(gòu)可用于Azure與邊緣環(huán)境。ProjectBrainwave讓Azure成為實時運行人工智能最快的云平臺;
4.Azure認(rèn)知服務(wù)更新,包括一項統(tǒng)一語音服務(wù);
5.Bot framework與認(rèn)知服務(wù)的升級,該升級將為新一代對話機器人帶來更加豐富的對話、更完整的個性和聲音定制功能。
不得不說,微軟正在努力將Azure打造成邊緣智能與人工智能對話的最佳開發(fā)平臺。
四、兩款“混合現(xiàn)實”應(yīng)用
今年的微軟開發(fā)者大會中,微軟并沒有過多的談?wù)揌oloLens和MR(混合現(xiàn)實)本身,而是推出了HoloLens的兩款MR應(yīng)用程序:MicrosoftRemote Assist(微軟遠(yuǎn)程協(xié)助)和MicrosoftLayout,他們可應(yīng)用在制造業(yè)、農(nóng)業(yè)、工程、醫(yī)療、零售等領(lǐng)域,并將于今年5月22日發(fā)布。
這兩款MR應(yīng)用都是為一線員工設(shè)計的,微軟將其描述為公司與客戶之間的第一個接觸點--這些員工直接參與產(chǎn)品制造。而這些一線員工預(yù)計有20億,占到全球勞動力的80%。
1、MicrosoftRemote Assist
微軟遠(yuǎn)程協(xié)助應(yīng)用可以幫助一線員工通過單項視頻呼叫、圖像共享、混合現(xiàn)實注釋等與他人進行遠(yuǎn)程協(xié)作,并且一線員工可以在任何設(shè)備上獲取服務(wù),然后解決問題或者完成任務(wù)。具體而言這里有三項能力:
其一,以共享視角進行協(xié)作,通過HoloLens與Microsoft Teams的專家進行視頻通話,并進行圖片共享、MR注釋等,可以讓一線員工與專家遠(yuǎn)距離協(xié)作解決問題。雙方可以使用MR墨水和箭頭對共享圖片進行注釋,注釋可以使用外部設(shè)備(如iPhone)直接添加到HoloLens用戶的視圖中進行輸入。
其二,通信安全,用戶可以通過Azure Active Directory登錄和移動設(shè)備管理來控制對遠(yuǎn)程通信的訪問。
其三,提高效率,通過混合現(xiàn)實注釋、直播和視頻捕獲,一線工作人員和專家可以第一時間準(zhǔn)確識別問題所在,專家無需到達現(xiàn)場并加快故障排除速度。
微軟表示,自從HoloLens 2016年3月發(fā)布以來,兩年來客戶反饋意見表明遠(yuǎn)程協(xié)助是一個非常有潛力的MR應(yīng)用??臻g規(guī)劃、培訓(xùn)、產(chǎn)品開發(fā)協(xié)作以及從物聯(lián)網(wǎng)設(shè)備訪問空間數(shù)據(jù)也是如此。
2、MicrosoftLayout
Microsoft Layout可以讓客戶通過使用HoloLens在混合現(xiàn)實中設(shè)計空間,用戶可以導(dǎo)入3D模型在空間中創(chuàng)建一個同現(xiàn)實大小一致的空間布局,將設(shè)計視為物理空間或虛擬現(xiàn)實中的高品質(zhì)全息圖,并與現(xiàn)實世界的人進行分享和編輯。
在演示環(huán)節(jié),微軟展示了德國汽車零部件制造商ZF集團對該MR的應(yīng)用。HoloLens用戶可操縱工廠設(shè)備的3D模型,為設(shè)備實際的擺放設(shè)計做好準(zhǔn)備。ZF集團員工談到,這種穿越空間、以AR形式可視化的設(shè)備比之前拍照、截圖的形式要高效很多。
五、以Azure為基礎(chǔ),細(xì)化AI
把微軟AI計劃具象化的是Azure,作為一個旗下服務(wù)囊括了網(wǎng)站、虛擬機、云服務(wù)、移動應(yīng)用服務(wù)、大數(shù)據(jù)支持以及媒體功能支持的云平臺,Azure可以把AI的功能更細(xì)節(jié)化和打包處理化。
1.Azure AI下的語音語意識別。
早在2016年,AI就在語音識別上達到了和人類相同的水平。而在1月,閱讀和語義識別也達到了80%以上的準(zhǔn)確率。而技術(shù)以外,微軟更多在思考把AI技術(shù)更好地商業(yè)化。以目前的合作看,Azure AI已經(jīng)用于包括可口可樂、寶馬、Twitter、畢馬威等多個品牌上。甚至華為和小米的翻譯技術(shù)也都有用到Azure AI。
納德拉認(rèn)為:
“聊天方面的AI需要新的應(yīng)用程序,開發(fā)人員需要構(gòu)建真正適合其業(yè)務(wù)的機器人和代理,而不是采用現(xiàn)成的技術(shù)并將其放入應(yīng)用程序中?!?
基于這一出發(fā)點,微軟正在為對話機器人推出“100多種新功能”,譬如定制語音和個性回復(fù),客戶數(shù)據(jù)可以用來為這些機器人提供動力。就像Skype或Cortana可以構(gòu)建屬于自己的數(shù)據(jù)并與相應(yīng)的渠道相關(guān)聯(lián)。
2.對話式AI
納德拉今天談到對話式AI的兩項重要進展,一項是Azure Bot Service的開發(fā)人員已近30萬名,另一項是對話式AI架構(gòu)的更新。
去年12月份,微軟的Azure BotService有24萬開發(fā)者,現(xiàn)在已經(jīng)增加到近30萬名。AzureBot Service使用的是Microsoft Bot框架,該框架一年前擁有13萬個用戶。
微軟的Bot框架是兩年前在Build中推出的,今天該工具包可用于在至少16個平臺上進行構(gòu)建、測試、和自動化機器人部署,包括Kik,MicrosoftTeams,Slack和Facebook Messenger等聊天應(yīng)用程序以及Cortana和Office 365。
納德拉表示:
“現(xiàn)在每月有3萬個活躍機器人使用微軟的對話式AI工具,他們每天為數(shù)千家公司處理3000萬條消息,其中包括梅西百貨、韓亞航空、西班牙電信、惠普等。
在對話式AI的架構(gòu)升級方面,微軟為Bot框架發(fā)布了100多個功能,以便開發(fā)者繼續(xù)構(gòu)建對話界面,并為其提供更多定制功能?!?
3.為殘疾人士打造新AI解決方案
在此次Build大會上,微軟推出了AIfor Accessibility項目,致力于在未來五年時間內(nèi)斥資2500萬美元,幫助全球殘疾人士。
微軟宣布,這一新項目旨在探索一些方法,使用人工智能改善殘疾人士的生活,2500萬美元的投資將主要針對開發(fā)者、高校、非政府組織以及其它為殘疾人士打造人工智能解決方案的機構(gòu)。