最初，Copilot 被認為是附屬於 Bing 的 AI 元件，但後來它已經發展成為一個全面的 AI，現階段幾乎存在於每個微軟產品中。Copilot 現在得到一系列的改進，使得它在功能性上逐漸與 ChatGPT 以及 Google 的 Gemini 有一搏的競爭力，並且使 Bing 也追趕上 Google 的腳步。
微軟為 Copilot 功能加入重大擴展，讓它趕上其他聊天機器人
微軟宣布對 Copilot 功能進行重大擴展，其中最大的變動就是導入一個名為「Action」的新功能，這項新功能使 AI 助手能夠根據對話指令提示為使用者執行特定的線上任務。根據微軟的說法，這個系統主要在用戶處理其他事務時在後台處理任務，這些任務可能包含預訂餐廳、購買活動門票或訂購外賣物品。
Action 有點像 ChatGPT 最貴會員層級的 Operator，只是它僅適用於有限的精選網站清單，目前對此類功能，限制清單可能是更好的方法，Amazon 也宣布「為你購買商品」代理營運商也與精選網站清單合作。訓練 AI 瞭解特定網站清單的方式比起全然信任它能立即完成所有事情要容易得多。Copilot Action 的初始合作夥伴包括 Booking.com、Expedia、Kayak、Tripadvisor、Skyscanner、Viater、Vrbo 和 Priceline 等旅行和預訂服務。發表時還支援通過 Open Table 預訂餐飲和 1-800-Flowers.com 訂購鮮花等。
微軟表示，該功能最終將與各種網站配合使用，並提到它可能會處理交通預訂，並且有機會與拼車服務整合。但就目前而言，還是僅適用於特定精選合作夥伴。雖然 Copilot 可能經過充分測試，可以在這些特定網站上運作，但你還是要注意它輸入的個人資訊，以防出現錯誤情況。
微軟還擴大了可視化分析功能「Copilot Vision」的涵蓋範圍。以前它僅可在 Edge 瀏覽器中使用，但 Vision 現在已經整合到 Windows 作業系統和 Copilot 行動應用程式（iOS 與 Android 版均可）中。在行動裝置上，Copilot Vision 可以分析設備鏡頭上的即時影像，使它能夠提供更多說明，例如植物護理技巧、居家裝飾建議等。對於 Windows 用戶，你只需與 Vision 共享螢幕並且讓 AI 分析螢幕上顯示的內容。這可以支援一些使用案例，例如讓你獲得有關特定應用程式的幫助或協助你分析正在查看的照片和網頁等。Vision 的 Windows 版將首先面向 Windows Insider 預覽體驗成員，然後在更廣泛的推出。
微軟還透過在 Bing 中推出「Copilot Search」來添加自己對 Google AI 模式的應對，這基本上會將搜尋結果替換成純 AI 的結果，就像在 Google 的 AI 模式中進行搜尋一樣。當使用者執行搜尋時，Copilot Search 可以生成關鍵資訊的摘要、提供直接答案或以結構化布局顯示資訊，具體取決於查詢的內容。微軟強調，這些 AI 生成的回應將突出顯示資訊來源，包括文字中的內連連結和所用的 URL 清單，使用戶更容易驗證資訊並輕鬆導航到原始內容處。
除了 Windows 版的 Vision 功能還需要進一步的修整與測試外，其他項目應該很快就會向所有人推出。