(映維網Nweon 2023年11月16日)微軟在Ignite 2023大會宣布,將把AI助手Copilot帶到Dynamics 365 Guides,從而結合生成式人工智慧與混合現實的力量,幫助一線工作人員更快地完成複雜任務並解決問題,同時減少對工作流程的干擾。
新加入技術人員需要在學習如何操作和維護設備的同時快速提升。當設備停止工作時,工作人員必須迅速採取行動診斷問題,實施修復措施,然後記錄他們的工作。
Copilot in Dynamics 365 Guides可以協助工人在工業環境處理複雜的設備和工藝。利用這個工具,工作人員不需要搜索大量的數字文檔或紙質手冊,工作人員可以使用自然語言和人類手勢詢問相關信息。Copilot使用生成式人工智慧從技術文檔、服務記錄、培訓內容和客戶管理的任何其他數據源中搜索信息,隨後則將信息匯總,並通過疊加在HoloLens的全息圖提供交互式指導。
微軟表示,混合現實與人工智慧的結合可以呈現出以人為本的介面,並有望改變現實世界的運作方式。現在,Copilot可以通過語音和全息圖實時幫助一線工人。
以下是微軟計劃在Dynamics 365 Guides中解鎖Copilot的功能:
點擊並提問
人類總是以手動方式從環境中學習並與之交互,並在工作時向他人提問。Copilot in Dynamics 365 Guides以自然交互方式作為基礎,並專注於幫助員工更好地理解周圍的世界。工人可以指著設備的特定元件並向Copilot提出問題,比如「這種螺栓的扭矩限制是多少?」
另外,新員工可以直接詢問一般性的問題,比如「這個組件的功能是什麼?」。Copilot可以識別用戶所指的內容,並提供答案。3D模型和空間地圖為所述技術提供了基礎,幫助識別工人正在注視的對象,然後投影全息圖來顯示操作說明。員工可以詢問更複雜的問題,比如「告訴我傳感器模塊在這台機器的位置」,然後Copilot就會顯示全息圖,並顯示所屬位置。
空間內容生成
Copilot in Dynamics 365 Guides可以顯著減少創建空間內容所需的前期投資,從而加速混合現實的開箱即用價值。Copilot使用客戶定義的數據源來簡化混合現實內容的創建、管理和交付,使得公司能夠更快地採用混合現實。
步驟式幫助
由微軟大型語言模型Microsoft Azure OpenAI Service支持的Copilot in Dynamics 365 Guides不單單提供一次性的回答。工人可以進行漸進式的談話,比如「告訴我拆卸這個過濾裝置的步驟」,或者「我把馬達斷開了,下一步怎麼辦?」這時候,Copilot可以使用精心規劃的知識庫跟蹤流程和對話,並以語音、文本或3D全息圖表達答案,同時消除歧義並減少返工需求。
按需信息
微軟HoloLens可以在工人周圍顯示需要參考的相關數據。通過接到物聯網傳感器,操作數據和服務記錄,Copilot in Dynamics 365 Guides可以回答一系列的問題,例如「當前的濕度等級是多少?」或「上次檢查是什麼時候,當時發現了什麼問題嗎?」
HoloLens 2允許Copilot精確定位特定資產,識別它們,並實時訪問相關信息源。一線工作人員可以訪問豐富的信息,並在人工智慧的幫助下進行故障排除或修復。
專家知識整合
通常只有經驗豐富的工人才具備完成複雜任務或修理重要設備所需的知識。但當這群工人不在或退休時,相關知識就會丟失。Copilot in Dynamics 365 Guides可以利用以前專家活動的筆記或通話記錄來指導新員工完成相同的過程。這使得員工更容易、更快速地相互學習,並實現知識轉移的自動化,從而提高勞動力生產率和業務敏捷性。
流線型的文檔
工作人員將能夠使用Copilot in Dynamics 365 Field Service mobile這項服務來加快完成和記錄工作的過程。工人們無需填寫書面文件,只需用聲音向Copilot描述他們的進度,然後Copilot將提供相關建議,從而有效地檢查服務任務,添加註釋,更新產品數量和狀態,並加速數據輸入。
Copilot in Dynamics 365 Guides將現實世界轉變為人工智慧的提示和錨定。這個工具將人作為產品的核心,從根本上改變了計算技術如何幫助一線工人在現實世界中採取行動。Copilot in Dynamics 365 Guides為尋求更高效率和有效性的企業提供了巨大的潛力。
現已推出私人預覽版,公開預覽版即將推出
Copilot in Dynamics 365 Guides目前已經推出私人預覽版,並提供了一組有限的功能。即將在公開預覽版則首先向HoloLens 2提供,並在以後登陸移動設備。
微軟最後強調了隱私保護,他們表示Copilot in Dynamics 365 Guides是根據負責任的人工智慧標準開發,並符合公司對數據安全和隱私的長期承諾。