新智元報道
編輯：HYZj【新智元導讀】就在剛剛，微軟公布了世界最大AI Agent生態(tài)系統(tǒng)：現(xiàn)在，已經(jīng)有十萬家企業(yè)通過Copilot Studio創(chuàng)建智能體了。微軟正在悄悄改變企業(yè)AI的游戲規(guī)則！
現(xiàn)在，微軟已經(jīng)悄悄組建了世界最大的AI智能體生態(tài)系統(tǒng)，
自推出以來，已經(jīng)有超過10萬家公司，用Copilot Studio創(chuàng)建了自己的AI智能體。
比如，麥肯錫通過自動化的流程分配智能體，將項目受理流程從20天縮短至僅2天；Pets at Home在不到兩周內部署了防欺詐智能體，每年節(jié)省數(shù)百萬美元……
「這個增長速度遠超我們的預期，也遠超我們發(fā)布的其他任何前沿技術的表現(xiàn)，」微軟智能體負責人Charles Lamanna透露道，「僅僅一個季度，就實現(xiàn)了2倍的增長�！�
在昨天的Ignite大會上，微軟更是重磅宣布：企業(yè)可以在智能體中，使用Azure目錄中1800個LLM中的任何一個模型了！這就意味著，微軟不再依賴于OpenAI的獨家模型。
同時，微軟還全新推出了可以獨立工作的自主AI智能體，它們可以檢測事件，在最低程度的人為干預下，來參與進我們復雜的工作流。
這些AI智能體能自主推理，還能操作執(zhí)行特定任務的軟件。從此，企業(yè)的生產(chǎn)力又將更進一步。
Copilot
Word在Word中，Copilot將幫助你查找相關的來源和額外的內容，以便進行草擬。
當開始撰寫新文檔時，Copilot會找到相關的文件、電子郵件和會議記錄，并基于它們創(chuàng)建草稿。在撰寫文檔過程中，Copilot會在整個文檔中顯示這些來源，并讓你選擇是否在草稿中保留引用。
該功能從11月開始在Word網(wǎng)頁版中提供，并于2025年初在桌面端推出。
Copilot還會根據(jù)語氣、結構和故事性等方面提供改進建議，幫助你提升文檔質量。該功能目前提供公共預覽版。
只需在Copilot聊天窗格中輸入提示，它就可以在文檔中智能檢索并添加SharePoint組織資源庫中的相關圖像，也可以使用DALL-E 3生成相關的新圖像。該功能將于本月推出。
Excel無論是創(chuàng)建項目預算、庫存跟蹤器還是銷售報告，從零開始創(chuàng)建一個符合需求的電子表格可能既令人畏懼又耗時。
現(xiàn)在，Copilot可以幫你解決。只需告訴Copilot想要創(chuàng)建什么，Copilot就會根據(jù)你的需求建立一個模板。該功能將于年底前開始向擁有Microsoft 365 Copilot許可證的Windows和網(wǎng)頁用戶推送。
例如，你可以快速創(chuàng)建一個公司銷售團隊的表格。Copilot可以添加列、應用條件格式，甚至按指令更改表格顏色。只要你對表格滿意，你就可以將其插入頁面并繼續(xù)使用Copilot。
在Excel中，Copilot可以引用企業(yè)內部數(shù)據(jù)中的Word、Excel、PowerPoint和PDF文件了。
如果讓Copilot在Excel中列出Word文檔中草擬的新聞稿中的公告，它會給出一個列表，讓我們插入到新表格中，或者復制粘貼到現(xiàn)有的表格中。
在專注于工作流的同時，我們就可以輕松獲得企業(yè)信息，比如讓Copilot提供某位特定經(jīng)理的所有直屬員工名單，將其插入到電子表格中。
另外，我們還可以在Excel的Copilot中無縫進行網(wǎng)絡搜索，在不打亂工作流的情況下，查找日期、統(tǒng)計數(shù)據(jù)，或者查找各國匯率的表格，把這些信息復制粘貼到自己的表格中。
你還可以用自然語言從Excel文件中查找和導入表格。
對于文本密集型的Excel表格，例如客戶反饋和調查結果，Copilot的文本分析功能可以幫助你更深入地理解這些數(shù)據(jù)。只需讓Copilot總結你的文本數(shù)據(jù)，它還會附上引用信息，幫助你了解數(shù)據(jù)來源。
Copilot還可以將文本數(shù)據(jù)按主題分類和排序，幫助你更快速地分析非結構化的文本數(shù)據(jù)。例如，如果你有數(shù)千條客戶評論，Copilot可以將它們劃分為多個主題，如質量、服務和價格，幫助你快速確定需要進一步關注的主題。
你還可以將這些主題插入表格中的新列，保留分析結果，并創(chuàng)建數(shù)據(jù)透視表和圖表，直觀呈現(xiàn)主題的數(shù)量和趨勢。
PowerPoint和Word的部分功能類似，Copilot也支持優(yōu)化文本、插入圖片。
此外，Copilot的Presentation Translator功能可以將演示文稿翻譯成40種語言，可翻譯的內容包含文本框、形狀、表格、圖表、演講者備注、評論以及Smart-Art中的文字。
Copilot會自動為所有幻燈片生成演講者備注，為你提供一個可靠的初稿，你可以根據(jù)需要進一步修改。
通過簡單的提示和一個Word文件，Copilot的Narrative Builder能夠依據(jù)它們起草一個PPT初稿。
Copilot Pages新增功能在9月，微軟發(fā)布了Copilot Pages一個為多人AI協(xié)作設計的動態(tài)、持久畫布。
除了文本，Pages現(xiàn)在還支持更多內容類型，如代碼、互動圖表、表格、圖示和數(shù)學公式。
這些組件可以基于網(wǎng)頁或工作數(shù)據(jù)在BizChat中創(chuàng)建，并且它們可以進行實時交互和動態(tài)修改，能夠在通過Outlook、Teams等Microsoft 365應用分享時保持同步。
Copilot Pages還增加了多頁面支持，你可以在單個聊天會話中創(chuàng)建多個新頁面，或者將來自多個聊天會話的內容添加到單個頁面中。
此外，你還可以在移動設備上編輯和分享Pages，從而實現(xiàn)多端多人協(xié)作。
所有這些功能將在2025年初正式推向Pages。
微軟全家桶的其他成員在Outlook中，通過Copilot，用戶可以使用自然語言來安排會議。Copilot還能幫助你起草會議議程，包括摘要和關鍵要點。
在OneNote中，借助Copilot Chat，你可以通過自然語言命令，總結筆記內容、創(chuàng)建任務列表或重寫筆記內容。
此外，Copilot還能幫助你在幾秒鐘內整理筆記本的章節(jié)。在OneNote應用中打開Copilot，輸入「整理這個章節(jié)」，Copilot就會自動整理您的筆記頁面。
而Facilitator智能體將在2025年初支持Teams會議室功能，能夠為會議室內外的所有與會者實時記錄并顯示筆記。
Facilitator智能體還支持說話者識別的功能。這一功能將支持更多會議場景，從Teams會議室到自帶設備（BYOD）的會議室，能夠識別房間內的聲音和人員，讓每位發(fā)言者清晰可見。說話者識別還使Copilot、Facilitator以及智能會議回顧能夠正確識別發(fā)言人，確保會議記錄和行動項歸屬準確無誤。
此外，微軟還推出了一款新的AI翻譯器，可以模擬發(fā)言者的聲音，在Teams平臺上提供九種語言的近實時語音翻譯，包含中文（普通話）、英語、法語、德語、意大利語、日語、韓語、葡萄牙語（巴西）和西班牙語。
目前該功能正在一小部分用戶中進行測試，預計將在2025年向擁有Microsoft 365 Copilot許可證的賬戶廣泛開放。
Copilot Studio
正如開篇所述，微軟對于Copilot Studio的更新可謂是相當重磅。1. 擴展知識管理功能
開發(fā)者可以使用最新的生成模型，實時更新并引用第三方數(shù)據(jù)源，利用檢索增強生成（RAG）功能，提升其智能體的質量。
2. 新增分析功能
開發(fā)者可以根據(jù)特定結果篩選圖表，以了解關鍵績效指標（KPI）和客戶滿意度。
3. 新增語音和圖像功能
現(xiàn)在可以加入語音解決方案，包括互動語音應答（IVR）系統(tǒng)；或者將智能體部署到應用程序中，讓用戶通過語音與智能體互動。用戶不僅可以與智能體進行語音交流，還可以上傳圖片并要求智能體分析并回答有關該圖片的問題。
4. 定制自主智能體功能進入預覽階段
開發(fā)者可以創(chuàng)建無需人工提示的智能體，它們檢測到特定事件后可隨時做出響應，并觸發(fā)一系列業(yè)務操作。
5. Microsoft 365 Agents SDK進入預覽階段
有了SDK，開發(fā)者如今可以通過代碼擴展智能體的功能，構建企業(yè)級、可擴展的多渠道智能體。
知識管理Copilot Studio正在擴展知識管理和RAG（檢索增強生成）能力。該功能已進入預覽階段。
平臺引入了連接器功能，可以接入全新的知識源。開發(fā)者現(xiàn)在可以讓智能體從多個第三方數(shù)據(jù)源（如Salesforce、ServiceNow和Zendesk）獲取實時知識。Copilot Studio僅對這些表格的元數(shù)據(jù)進行語義索引，無需數(shù)據(jù)移動，就能幫助回答來自這些第三方源的復雜問題。
你還可以將某些數(shù)據(jù)來源標記為「權威」，以確保智能體優(yōu)先使用這些數(shù)據(jù)，提供可靠的相應。
除了接入新知識，Copilot Studio還使用了最新的GPT模型并優(yōu)化了RAG策略，以獲取高質量答案。
通過高級知識調優(yōu)功能，開發(fā)者可以更好地控制數(shù)據(jù)源。對于每個問題，開發(fā)者現(xiàn)在可以清楚地看到哪些數(shù)據(jù)源被使用、哪些還尚未解答。知識調優(yōu)功能還會建議從組織中添加額外知識，并提供指導性方法來篩選和優(yōu)先考慮知識源。
智能體上線之前，開發(fā)者還可以進行測試，查看其響應的準確性如何。
此外，平臺還提供詳盡的分析數(shù)據(jù)，如數(shù)據(jù)源使用率等，以了解是否需要調整某些數(shù)據(jù)源。
Copilot Studio的知識管理功能還整合了Azure AI Foundry，以支持更復雜、更定制化的場景。
開發(fā)者通常會在Azure AI中存儲大量數(shù)據(jù)。
現(xiàn)在可以直接將這些數(shù)據(jù)作為知識源用于Copilot Studio，可以在Azure AI Search中構建的向量化索引上執(zhí)行搜索操作，以訪問非結構化數(shù)據(jù)。
開發(fā)者還可以將這些數(shù)據(jù)與定制的RAG策略結合到Copilot Studio中，以獲得更準確的結果。通過連接所有數(shù)據(jù)源，組織可以確保智能體更加貼合其業(yè)務數(shù)據(jù)，提供具體且高質量的響應。
這還不是全部。Copilot Studio中還引入了更高級的Azure AI功能。開發(fā)者很快就能訪問Azure AI模型目錄中的模型，其中包括超過1800個模型。他們還可以直接在Copilot Studio中訪問并調用自己定制微調的模型。
全新分析通過全新的分析功能，開發(fā)者能夠了解其生成式AI系統(tǒng)的運行情況。
除了前面提到的知識庫數(shù)據(jù)源的分析外，用來衡量系統(tǒng)或業(yè)務整體表現(xiàn)的頂層指標也得到了全面升級。這些指標將更完善、更高效，并能夠展示長期趨勢。
開發(fā)者可以根據(jù)特定結果篩選圖表，以了解關鍵績效指標（KPI）和客戶滿意度。
語音和圖像Copilot Studio現(xiàn)已加入語音功能。企業(yè)可以將智能體集成到交互式語音應答系統(tǒng)（IVR）中，讓原本僵化的語音菜單變身為靈活的AI助手。
只需指定知識來源，智能IVR即可在電話中輕松應對大量復雜問題，顯著減少問題升級至人工處理的情況。這些智能語音助手還能識別語音、處理用戶打斷、檢測靜音、并進行重新提示。
不僅限于IVR系統(tǒng)，支持語音的智能體還能嵌入應用程序、獨立終端、禮賓系統(tǒng)等場景。
例如，一家酒店的應用程序可以使用一個接入相應知識庫的Copilot智能體，充當客房內的專屬禮賓服務，為賓客提供貼心幫助。
除了語音功能，Copilot Studio還新增了圖像處理能力。
用戶現(xiàn)在可以上傳圖片，并向智能體提問。例如：「為什么我這個月的賬單更高？」
此外，圖像上傳還能用來錄入數(shù)據(jù)。銷售人員可以對智能體說：「把這些手寫筆記添加到CRM系統(tǒng)中�！�
自主智能體定制自主智能體的功能早在10月底宣布，如今終于開啟預覽。
自主智能體可以獨立代表用戶、團隊或組織，自動化處理那些復雜又耗時的業(yè)務任務。
開發(fā)者可以設計智能體檢測特定事件（例如新郵件到達），這些智能體可隨時做出響應，并利用生成式AI觸發(fā)一系列操作，自動化復雜的業(yè)務任務。
例如，智能體可以一口氣執(zhí)行以下操作：
1. 評估郵件意圖
2. 查找發(fā)件人詳細信息及賬戶信息
3. 查看以往通信記錄
4. 檢查庫存情況
5. 回復發(fā)件人并詢問其偏好
6. 采取適當行動關閉工單
開發(fā)者既可以從零開始構建自主智能體，也可以在Copilot Studio中配置預構建好的特定功能的智能體。
智能體SDKMicrosoft 365 Agents SDK目前已經(jīng)提供預覽版。
這意味著Copilot Studio的開發(fā)者如今可以通過代碼擴展智能體的功能，構建企業(yè)級、可擴展的多渠道智能體。
開發(fā)者擁有完全的靈活性，可以連接任意AI服務，包括Azure AI Foundry、Semantic Kernel、Copilot Studio等。
使用SDK構建的智能體還可以部署到多種渠道，如Microsoft 365 Copilot、Microsoft Teams、Web，以及十多個第三方消息平臺。
兩款定制芯片，專為數(shù)據(jù)處理和安全打造
大會上，微軟推出了兩款專為數(shù)據(jù)中心基礎設計設計的芯片：Azure Integrated HSM和Azure Boost DPU。Azure Boost DPU是微軟的第一個數(shù)據(jù)處理單元，專為以數(shù)據(jù)為中心的高效率和低功耗工作負載而設計。
微軟預計未來配備DPU的Azure服務器，將以現(xiàn)有服務器4倍性能運行，但同時也要消耗3倍的電力。
這款芯片的設計，可能起源于微軟去年12月，以1.9億美金收購的DPU制造商Funcible。
另一款芯片是專為安全而打造的Azure Integrated HSM。
它可以將前簽名鑰和加密密鑰放在一個安全模塊中，而不會影響性能，或增加延遲。
它是繼Pluton之后，微軟第二顆安全芯片。Pluton是一款內置于英特爾、AMD和高通處理器中的以消費者為中心的芯片。
從明年開始，Azure Integrated HSM將配備在微軟數(shù)據(jù)中心的每一臺服務器上，以增加Azure硬件對機密和通用工作負載的保護。
迷你PC僅需2500元，但不能運行本地應用
在硬件方面，微軟發(fā)布了一款自稱比Mac mini還要小的PCWindows 365 Link，售價349美元（2526元）。這款mini PC計劃在明年推出，并搭配Windows 365云服務使用。
也就是說，它將不會在設備上運行任何本地內容。
Link被設計成一款緊湊、無風扇、易于使用的云電腦，可連接顯示器和外部設備。
通過Windows 365服務，企業(yè)可以讓員工使用存在于云端的虛擬機，這些虛擬機可以安全地串流到多個設備上。
它可以在幾秒內啟動，能夠即時從睡眠狀態(tài)喚醒，并使用自己的芯片來處理Microsoft Teams或思科Webex的視頻。
它有兩個USB-A 3.2端口和一個USB-C 3.2端口，以及一個DisplayPort和HDMI端口和以太網(wǎng)連接。在前面，有一個USB-A 3.2端口，還包括Wi-Fi 6 E和藍牙5.3無線連接。
參考資料：https://www.microsoft.com/en-us/microsoft-copilot/blog/copilot-studio/copilot-studio-is-enhancing-its-platform-with-knowledge-improvements-azure-ai-integration-and-more/
https://venturebeat.com/ai/microsoft-quietly-assembles-the-largest-ai-agent-ecosystem-and-no-one-else-is-close/
