在華為開發者大會2020(Cloud)期間,華為云推出了全面升級的業界首個端云協同多模態AI應用開發套件——HiLens ,打通線上線下開發和部署流程,開發者只需在云上完成一次多模態AI應用開發,既可以部署到云側,也可以部署到端側和邊緣側。

人工智能的發展正經歷從感知到認知,從單模到多模,從云側到端云協同的演進。此次,全面升級的華為云HiLens推出多模態開發環境HiLens Studio、開發框架HiLens Framework及技能市場HiLens Skill Market。

HiLens Studio:華為云HiLens在云側新推出開發環境HiLens Studio,開發者可以在線完成開發、調試、模擬運行、部署和發布AI技能等功能,免去了線下環境搭建、線上線下切換等復雜步驟,沒有硬件套件也可以完成多模態AI應用開發。傳統的AI應用開發和部署意味著高成本和高門檻,借助HiLens Studio,AI應用開發和部署僅需要三步:

在華為云一站式AI開發管理平臺ModelArts進行模型訓練與轉換,然后到HiLens Studio開發和調試技能,并可以在模擬器中查看技能輸出效果,完成后可以一鍵部署到HiLens Kit等端側設備,整個過程均在云側完成。Studio中的模擬器基于華為昇騰NPU,與HiLens Kit一致,和真實環境非常接近。

Framework:新推出的多模態AI應用開發框架HiLens Framework,封裝了多模態數據接入、數據處理、模型推理和結果輸出等多個方便易用的組件,結合華為自研的昇騰芯片進行了深度性能優化,提供了多語言開發接口,用來開發AI應用代碼更簡潔、流程更清晰。例如,傳統方式的100+行代碼實現的音頻解碼+片段截取+預處理過程,通過HiLens Framework僅需3行代碼即可以實現;20+行代碼實現的模型初始化+模型推理,縮減為僅需2行代碼。

技能市場:華為云HiLens還提供開放的技能市場(HiLens Skill),預置豐富的各類場景技能和應用模板,開發者可以一鍵安裝部署到端側進行免費試用,也可以在模板基礎上進行修改、補充更多特性,無須從零開始,可以很快上手。

英國AI公司Emotech聯合華為云推出多模態AI英語口語教評解決方案,擁有全球首創的口型與發音結合的多模態技術,具有良好的抗噪、抗干擾能力,多場景適用,相比單模態評分穩定性提高30%。音頻與視頻的多模反饋,讓學生告別盲聽學口語時代,提供多感官的互動,使學習更加高效。

Emotech團隊在華為開發者大會2020(Cloud)上演示了如何使用HiLens端云協同多模態AI應用開發套件快速開發一個多模態口語測評Skill,并把它部署到端側設備HiLens Kit上。然后模擬學生在平板電腦上進行跟讀,多個平板電腦可以把視頻數據送到算力強大的HiLens Kit上推理分析,降低時延的同時保護隱私,得到多模態口語測評得分。

Emotech團隊演示多模態口語測評Skill開發

基于華為云HiLens,AI開發者可以開發出適用于智慧家庭、智慧教育、智慧門店、智慧工業、智慧交通等場景的多模態AI解決方案,快速實現AI應用開發及落地。

關注中國IDC圈官方微信：idc-quan 我們將定期推送IDC產業最新資訊

查看心情排 行你看到此篇文章的感受是：

2020-03-27 15:42:35

市場情報 華為云助力滁企上云成產業升級樣板 獲人民日報關注點贊

3月26日，《人民日報》開設“新基建 新機遇”專欄，首文刊登《搭車云經濟 企業降成本》，VPS租用，華為云以助力滁州產業升級的樣板案例，樹立“新基建”標桿。 <詳情>

華為云 企業上云

2020-03-27 14:20:00

互聯網 華為云支撐阿根廷國際機場上線AI熱成像體溫檢測系統，VPS，無接觸測溫

近日,新型冠狀病毒肺炎疫情(COVID-19)在全球范圍內蔓延。為有效抗擊疫情,降低人群感染風險,華為阿根廷代表處在阿根廷出現第一例確診病例后,第一時間對接阿根廷移民總局并立 <詳情>

2020-03-27 14:00:28