新智元報(bào)道
編輯:HYZj【新智元導(dǎo)讀】就在剛剛,微軟公布了世界最大AI Agent生態(tài)系統(tǒng):現(xiàn)在,已經(jīng)有十萬(wàn)家企業(yè)通過(guò)Copilot Studio創(chuàng)建智能體了。微軟正在悄悄改變企業(yè)AI的游戲規(guī)則!
現(xiàn)在,微軟已經(jīng)悄悄組建了世界最大的AI智能體生態(tài)系統(tǒng),
自推出以來(lái),已經(jīng)有超過(guò)10萬(wàn)家公司,用Copilot Studio創(chuàng)建了自己的AI智能體。
比如,麥肯錫通過(guò)自動(dòng)化的流程分配智能體,將項(xiàng)目受理流程從20天縮短至僅2天;Pets at Home在不到兩周內(nèi)部署了防欺詐智能體,每年節(jié)省數(shù)百萬(wàn)美元……
「這個(gè)增長(zhǎng)速度遠(yuǎn)超我們的預(yù)期,也遠(yuǎn)超我們發(fā)布的其他任何前沿技術(shù)的表現(xiàn),」微軟智能體負(fù)責(zé)人Charles Lamanna透露道,「僅僅一個(gè)季度,就實(shí)現(xiàn)了2倍的增長(zhǎng)!
在昨天的Ignite大會(huì)上,微軟更是重磅宣布:企業(yè)可以在智能體中,使用Azure目錄中1800個(gè)LLM中的任何一個(gè)模型了!這就意味著,微軟不再依賴于OpenAI的獨(dú)家模型。
同時(shí),微軟還全新推出了可以獨(dú)立工作的自主AI智能體,它們可以檢測(cè)事件,在最低程度的人為干預(yù)下,來(lái)參與進(jìn)我們復(fù)雜的工作流。
這些AI智能體能自主推理,還能操作執(zhí)行特定任務(wù)的軟件。從此,企業(yè)的生產(chǎn)力又將更進(jìn)一步。
Copilot
Word在Word中,Copilot將幫助你查找相關(guān)的來(lái)源和額外的內(nèi)容,以便進(jìn)行草擬。
當(dāng)開始撰寫新文檔時(shí),Copilot會(huì)找到相關(guān)的文件、電子郵件和會(huì)議記錄,并基于它們創(chuàng)建草稿。在撰寫文檔過(guò)程中,Copilot會(huì)在整個(gè)文檔中顯示這些來(lái)源,并讓你選擇是否在草稿中保留引用。
該功能從11月開始在Word網(wǎng)頁(yè)版中提供,并于2025年初在桌面端推出。
Copilot還會(huì)根據(jù)語(yǔ)氣、結(jié)構(gòu)和故事性等方面提供改進(jìn)建議,幫助你提升文檔質(zhì)量。該功能目前提供公共預(yù)覽版。
只需在Copilot聊天窗格中輸入提示,它就可以在文檔中智能檢索并添加SharePoint組織資源庫(kù)中的相關(guān)圖像,也可以使用DALL-E 3生成相關(guān)的新圖像。該功能將于本月推出。
Excel無(wú)論是創(chuàng)建項(xiàng)目預(yù)算、庫(kù)存跟蹤器還是銷售報(bào)告,從零開始創(chuàng)建一個(gè)符合需求的電子表格可能既令人畏懼又耗時(shí)。
現(xiàn)在,Copilot可以幫你解決。只需告訴Copilot想要?jiǎng)?chuàng)建什么,Copilot就會(huì)根據(jù)你的需求建立一個(gè)模板。該功能將于年底前開始向擁有Microsoft 365 Copilot許可證的Windows和網(wǎng)頁(yè)用戶推送。
例如,你可以快速創(chuàng)建一個(gè)公司銷售團(tuán)隊(duì)的表格。Copilot可以添加列、應(yīng)用條件格式,甚至按指令更改表格顏色。只要你對(duì)表格滿意,你就可以將其插入頁(yè)面并繼續(xù)使用Copilot。
在Excel中,Copilot可以引用企業(yè)內(nèi)部數(shù)據(jù)中的Word、Excel、PowerPoint和PDF文件了。
如果讓Copilot在Excel中列出Word文檔中草擬的新聞稿中的公告,它會(huì)給出一個(gè)列表,讓我們插入到新表格中,或者復(fù)制粘貼到現(xiàn)有的表格中。
在專注于工作流的同時(shí),我們就可以輕松獲得企業(yè)信息,比如讓Copilot提供某位特定經(jīng)理的所有直屬員工名單,將其插入到電子表格中。
另外,我們還可以在Excel的Copilot中無(wú)縫進(jìn)行網(wǎng)絡(luò)搜索,在不打亂工作流的情況下,查找日期、統(tǒng)計(jì)數(shù)據(jù),或者查找各國(guó)匯率的表格,把這些信息復(fù)制粘貼到自己的表格中。
你還可以用自然語(yǔ)言從Excel文件中查找和導(dǎo)入表格。
對(duì)于文本密集型的Excel表格,例如客戶反饋和調(diào)查結(jié)果,Copilot的文本分析功能可以幫助你更深入地理解這些數(shù)據(jù)。只需讓Copilot總結(jié)你的文本數(shù)據(jù),它還會(huì)附上引用信息,幫助你了解數(shù)據(jù)來(lái)源。
Copilot還可以將文本數(shù)據(jù)按主題分類和排序,幫助你更快速地分析非結(jié)構(gòu)化的文本數(shù)據(jù)。例如,如果你有數(shù)千條客戶評(píng)論,Copilot可以將它們劃分為多個(gè)主題,如質(zhì)量、服務(wù)和價(jià)格,幫助你快速確定需要進(jìn)一步關(guān)注的主題。
你還可以將這些主題插入表格中的新列,保留分析結(jié)果,并創(chuàng)建數(shù)據(jù)透視表和圖表,直觀呈現(xiàn)主題的數(shù)量和趨勢(shì)。
PowerPoint和Word的部分功能類似,Copilot也支持優(yōu)化文本、插入圖片。
此外,Copilot的Presentation Translator功能可以將演示文稿翻譯成40種語(yǔ)言,可翻譯的內(nèi)容包含文本框、形狀、表格、圖表、演講者備注、評(píng)論以及Smart-Art中的文字。
Copilot會(huì)自動(dòng)為所有幻燈片生成演講者備注,為你提供一個(gè)可靠的初稿,你可以根據(jù)需要進(jìn)一步修改。
通過(guò)簡(jiǎn)單的提示和一個(gè)Word文件,Copilot的Narrative Builder能夠依據(jù)它們起草一個(gè)PPT初稿。
Copilot Pages新增功能在9月,微軟發(fā)布了Copilot Pages一個(gè)為多人AI協(xié)作設(shè)計(jì)的動(dòng)態(tài)、持久畫布。
除了文本,Pages現(xiàn)在還支持更多內(nèi)容類型,如代碼、互動(dòng)圖表、表格、圖示和數(shù)學(xué)公式。
這些組件可以基于網(wǎng)頁(yè)或工作數(shù)據(jù)在BizChat中創(chuàng)建,并且它們可以進(jìn)行實(shí)時(shí)交互和動(dòng)態(tài)修改,能夠在通過(guò)Outlook、Teams等Microsoft 365應(yīng)用分享時(shí)保持同步。
Copilot Pages還增加了多頁(yè)面支持,你可以在單個(gè)聊天會(huì)話中創(chuàng)建多個(gè)新頁(yè)面,或者將來(lái)自多個(gè)聊天會(huì)話的內(nèi)容添加到單個(gè)頁(yè)面中。
此外,你還可以在移動(dòng)設(shè)備上編輯和分享Pages,從而實(shí)現(xiàn)多端多人協(xié)作。
所有這些功能將在2025年初正式推向Pages。
微軟全家桶的其他成員在Outlook中,通過(guò)Copilot,用戶可以使用自然語(yǔ)言來(lái)安排會(huì)議。Copilot還能幫助你起草會(huì)議議程,包括摘要和關(guān)鍵要點(diǎn)。
在OneNote中,借助Copilot Chat,你可以通過(guò)自然語(yǔ)言命令,總結(jié)筆記內(nèi)容、創(chuàng)建任務(wù)列表或重寫筆記內(nèi)容。
此外,Copilot還能幫助你在幾秒鐘內(nèi)整理筆記本的章節(jié)。在OneNote應(yīng)用中打開Copilot,輸入「整理這個(gè)章節(jié)」,Copilot就會(huì)自動(dòng)整理您的筆記頁(yè)面。
而Facilitator智能體將在2025年初支持Teams會(huì)議室功能,能夠?yàn)闀?huì)議室內(nèi)外的所有與會(huì)者實(shí)時(shí)記錄并顯示筆記。
Facilitator智能體還支持說(shuō)話者識(shí)別的功能。這一功能將支持更多會(huì)議場(chǎng)景,從Teams會(huì)議室到自帶設(shè)備(BYOD)的會(huì)議室,能夠識(shí)別房間內(nèi)的聲音和人員,讓每位發(fā)言者清晰可見。說(shuō)話者識(shí)別還使Copilot、Facilitator以及智能會(huì)議回顧能夠正確識(shí)別發(fā)言人,確保會(huì)議記錄和行動(dòng)項(xiàng)歸屬準(zhǔn)確無(wú)誤。
此外,微軟還推出了一款新的AI翻譯器,可以模擬發(fā)言者的聲音,在Teams平臺(tái)上提供九種語(yǔ)言的近實(shí)時(shí)語(yǔ)音翻譯,包含中文(普通話)、英語(yǔ)、法語(yǔ)、德語(yǔ)、意大利語(yǔ)、日語(yǔ)、韓語(yǔ)、葡萄牙語(yǔ)(巴西)和西班牙語(yǔ)。
目前該功能正在一小部分用戶中進(jìn)行測(cè)試,預(yù)計(jì)將在2025年向擁有Microsoft 365 Copilot許可證的賬戶廣泛開放。
Copilot Studio
正如開篇所述,微軟對(duì)于Copilot Studio的更新可謂是相當(dāng)重磅。1. 擴(kuò)展知識(shí)管理功能
開發(fā)者可以使用最新的生成模型,實(shí)時(shí)更新并引用第三方數(shù)據(jù)源,利用檢索增強(qiáng)生成(RAG)功能,提升其智能體的質(zhì)量。
2. 新增分析功能
開發(fā)者可以根據(jù)特定結(jié)果篩選圖表,以了解關(guān)鍵績(jī)效指標(biāo)(KPI)和客戶滿意度。
3. 新增語(yǔ)音和圖像功能
現(xiàn)在可以加入語(yǔ)音解決方案,包括互動(dòng)語(yǔ)音應(yīng)答(IVR)系統(tǒng);或者將智能體部署到應(yīng)用程序中,讓用戶通過(guò)語(yǔ)音與智能體互動(dòng)。用戶不僅可以與智能體進(jìn)行語(yǔ)音交流,還可以上傳圖片并要求智能體分析并回答有關(guān)該圖片的問(wèn)題。
4. 定制自主智能體功能進(jìn)入預(yù)覽階段
開發(fā)者可以創(chuàng)建無(wú)需人工提示的智能體,它們檢測(cè)到特定事件后可隨時(shí)做出響應(yīng),并觸發(fā)一系列業(yè)務(wù)操作。
5. Microsoft 365 Agents SDK進(jìn)入預(yù)覽階段
有了SDK,開發(fā)者如今可以通過(guò)代碼擴(kuò)展智能體的功能,構(gòu)建企業(yè)級(jí)、可擴(kuò)展的多渠道智能體。
知識(shí)管理Copilot Studio正在擴(kuò)展知識(shí)管理和RAG(檢索增強(qiáng)生成)能力。該功能已進(jìn)入預(yù)覽階段。
平臺(tái)引入了連接器功能,可以接入全新的知識(shí)源。開發(fā)者現(xiàn)在可以讓智能體從多個(gè)第三方數(shù)據(jù)源(如Salesforce、ServiceNow和Zendesk)獲取實(shí)時(shí)知識(shí)。Copilot Studio僅對(duì)這些表格的元數(shù)據(jù)進(jìn)行語(yǔ)義索引,無(wú)需數(shù)據(jù)移動(dòng),就能幫助回答來(lái)自這些第三方源的復(fù)雜問(wèn)題。
你還可以將某些數(shù)據(jù)來(lái)源標(biāo)記為「權(quán)威」,以確保智能體優(yōu)先使用這些數(shù)據(jù),提供可靠的相應(yīng)。
除了接入新知識(shí),Copilot Studio還使用了最新的GPT模型并優(yōu)化了RAG策略,以獲取高質(zhì)量答案。
通過(guò)高級(jí)知識(shí)調(diào)優(yōu)功能,開發(fā)者可以更好地控制數(shù)據(jù)源。對(duì)于每個(gè)問(wèn)題,開發(fā)者現(xiàn)在可以清楚地看到哪些數(shù)據(jù)源被使用、哪些還尚未解答。知識(shí)調(diào)優(yōu)功能還會(huì)建議從組織中添加額外知識(shí),并提供指導(dǎo)性方法來(lái)篩選和優(yōu)先考慮知識(shí)源。
智能體上線之前,開發(fā)者還可以進(jìn)行測(cè)試,查看其響應(yīng)的準(zhǔn)確性如何。
此外,平臺(tái)還提供詳盡的分析數(shù)據(jù),如數(shù)據(jù)源使用率等,以了解是否需要調(diào)整某些數(shù)據(jù)源。
Copilot Studio的知識(shí)管理功能還整合了Azure AI Foundry,以支持更復(fù)雜、更定制化的場(chǎng)景。
開發(fā)者通常會(huì)在Azure AI中存儲(chǔ)大量數(shù)據(jù)。
現(xiàn)在可以直接將這些數(shù)據(jù)作為知識(shí)源用于Copilot Studio,可以在Azure AI Search中構(gòu)建的向量化索引上執(zhí)行搜索操作,以訪問(wèn)非結(jié)構(gòu)化數(shù)據(jù)。
開發(fā)者還可以將這些數(shù)據(jù)與定制的RAG策略結(jié)合到Copilot Studio中,以獲得更準(zhǔn)確的結(jié)果。通過(guò)連接所有數(shù)據(jù)源,組織可以確保智能體更加貼合其業(yè)務(wù)數(shù)據(jù),提供具體且高質(zhì)量的響應(yīng)。
這還不是全部。Copilot Studio中還引入了更高級(jí)的Azure AI功能。開發(fā)者很快就能訪問(wèn)Azure AI模型目錄中的模型,其中包括超過(guò)1800個(gè)模型。他們還可以直接在Copilot Studio中訪問(wèn)并調(diào)用自己定制微調(diào)的模型。
全新分析通過(guò)全新的分析功能,開發(fā)者能夠了解其生成式AI系統(tǒng)的運(yùn)行情況。
除了前面提到的知識(shí)庫(kù)數(shù)據(jù)源的分析外,用來(lái)衡量系統(tǒng)或業(yè)務(wù)整體表現(xiàn)的頂層指標(biāo)也得到了全面升級(jí)。這些指標(biāo)將更完善、更高效,并能夠展示長(zhǎng)期趨勢(shì)。
開發(fā)者可以根據(jù)特定結(jié)果篩選圖表,以了解關(guān)鍵績(jī)效指標(biāo)(KPI)和客戶滿意度。
語(yǔ)音和圖像Copilot Studio現(xiàn)已加入語(yǔ)音功能。企業(yè)可以將智能體集成到交互式語(yǔ)音應(yīng)答系統(tǒng)(IVR)中,讓原本僵化的語(yǔ)音菜單變身為靈活的AI助手。
只需指定知識(shí)來(lái)源,智能IVR即可在電話中輕松應(yīng)對(duì)大量復(fù)雜問(wèn)題,顯著減少問(wèn)題升級(jí)至人工處理的情況。這些智能語(yǔ)音助手還能識(shí)別語(yǔ)音、處理用戶打斷、檢測(cè)靜音、并進(jìn)行重新提示。
不僅限于IVR系統(tǒng),支持語(yǔ)音的智能體還能嵌入應(yīng)用程序、獨(dú)立終端、禮賓系統(tǒng)等場(chǎng)景。
例如,一家酒店的應(yīng)用程序可以使用一個(gè)接入相應(yīng)知識(shí)庫(kù)的Copilot智能體,充當(dāng)客房?jī)?nèi)的專屬禮賓服務(wù),為賓客提供貼心幫助。
除了語(yǔ)音功能,Copilot Studio還新增了圖像處理能力。
用戶現(xiàn)在可以上傳圖片,并向智能體提問(wèn)。例如:「為什么我這個(gè)月的賬單更高?」
此外,圖像上傳還能用來(lái)錄入數(shù)據(jù)。銷售人員可以對(duì)智能體說(shuō):「把這些手寫筆記添加到CRM系統(tǒng)中!
自主智能體定制自主智能體的功能早在10月底宣布,如今終于開啟預(yù)覽。
自主智能體可以獨(dú)立代表用戶、團(tuán)隊(duì)或組織,自動(dòng)化處理那些復(fù)雜又耗時(shí)的業(yè)務(wù)任務(wù)。
開發(fā)者可以設(shè)計(jì)智能體檢測(cè)特定事件(例如新郵件到達(dá)),這些智能體可隨時(shí)做出響應(yīng),并利用生成式AI觸發(fā)一系列操作,自動(dòng)化復(fù)雜的業(yè)務(wù)任務(wù)。
例如,智能體可以一口氣執(zhí)行以下操作:
1. 評(píng)估郵件意圖
2. 查找發(fā)件人詳細(xì)信息及賬戶信息
3. 查看以往通信記錄
4. 檢查庫(kù)存情況
5. 回復(fù)發(fā)件人并詢問(wèn)其偏好
6. 采取適當(dāng)行動(dòng)關(guān)閉工單
開發(fā)者既可以從零開始構(gòu)建自主智能體,也可以在Copilot Studio中配置預(yù)構(gòu)建好的特定功能的智能體。
智能體SDKMicrosoft 365 Agents SDK目前已經(jīng)提供預(yù)覽版。
這意味著Copilot Studio的開發(fā)者如今可以通過(guò)代碼擴(kuò)展智能體的功能,構(gòu)建企業(yè)級(jí)、可擴(kuò)展的多渠道智能體。
開發(fā)者擁有完全的靈活性,可以連接任意AI服務(wù),包括Azure AI Foundry、Semantic Kernel、Copilot Studio等。
使用SDK構(gòu)建的智能體還可以部署到多種渠道,如Microsoft 365 Copilot、Microsoft Teams、Web,以及十多個(gè)第三方消息平臺(tái)。
兩款定制芯片,專為數(shù)據(jù)處理和安全打造
大會(huì)上,微軟推出了兩款專為數(shù)據(jù)中心基礎(chǔ)設(shè)計(jì)設(shè)計(jì)的芯片:Azure Integrated HSM和Azure Boost DPU。Azure Boost DPU是微軟的第一個(gè)數(shù)據(jù)處理單元,專為以數(shù)據(jù)為中心的高效率和低功耗工作負(fù)載而設(shè)計(jì)。
微軟預(yù)計(jì)未來(lái)配備DPU的Azure服務(wù)器,將以現(xiàn)有服務(wù)器4倍性能運(yùn)行,但同時(shí)也要消耗3倍的電力。
這款芯片的設(shè)計(jì),可能起源于微軟去年12月,以1.9億美金收購(gòu)的DPU制造商Funcible。
另一款芯片是專為安全而打造的Azure Integrated HSM。
它可以將前簽名鑰和加密密鑰放在一個(gè)安全模塊中,而不會(huì)影響性能,或增加延遲。
它是繼Pluton之后,微軟第二顆安全芯片。Pluton是一款內(nèi)置于英特爾、AMD和高通處理器中的以消費(fèi)者為中心的芯片。
從明年開始,Azure Integrated HSM將配備在微軟數(shù)據(jù)中心的每一臺(tái)服務(wù)器上,以增加Azure硬件對(duì)機(jī)密和通用工作負(fù)載的保護(hù)。
迷你PC僅需2500元,但不能運(yùn)行本地應(yīng)用
在硬件方面,微軟發(fā)布了一款自稱比Mac mini還要小的PCWindows 365 Link,售價(jià)349美元(2526元)。這款mini PC計(jì)劃在明年推出,并搭配Windows 365云服務(wù)使用。
也就是說(shuō),它將不會(huì)在設(shè)備上運(yùn)行任何本地內(nèi)容。
Link被設(shè)計(jì)成一款緊湊、無(wú)風(fēng)扇、易于使用的云電腦,可連接顯示器和外部設(shè)備。
通過(guò)Windows 365服務(wù),企業(yè)可以讓員工使用存在于云端的虛擬機(jī),這些虛擬機(jī)可以安全地串流到多個(gè)設(shè)備上。
它可以在幾秒內(nèi)啟動(dòng),能夠即時(shí)從睡眠狀態(tài)喚醒,并使用自己的芯片來(lái)處理Microsoft Teams或思科Webex的視頻。
它有兩個(gè)USB-A 3.2端口和一個(gè)USB-C 3.2端口,以及一個(gè)DisplayPort和HDMI端口和以太網(wǎng)連接。在前面,有一個(gè)USB-A 3.2端口,還包括Wi-Fi 6 E和藍(lán)牙5.3無(wú)線連接。
參考資料:https://www.microsoft.com/en-us/microsoft-copilot/blog/copilot-studio/copilot-studio-is-enhancing-its-platform-with-knowledge-improvements-azure-ai-integration-and-more/
https://venturebeat.com/ai/microsoft-quietly-assembles-the-largest-ai-agent-ecosystem-and-no-one-else-is-close/