Microsoft Teams會議AI助理

為Microsoft Teams會議新增AI助理有兩種方式。你可以使用綁定在Microsoft 365訂閱上的內建Copilot,也可以執行一個桌面助理,它會擷取系統音訊,運作與你的授權無關,而且從不會以參與者身分加入通話。對於已經統一使用Microsoft的團隊來說,Copilot是顯而易見的起點。至於想要即時協助、不需授權就能使用,或希望音訊不進入Microsoft雲端的人,桌面方案會更合適。

我是Natively的創辦人,這是一款為會議與面試打造的開源(AGPL-3.0)桌面AI助理。Teams正是內建選項最強大的平台,所以這篇指南會老實說明Copilot在哪些地方佔優,而獨立助理又在哪些地方仍有其存在價值。

Microsoft Copilot真正出色的地方

我不會假裝Copilot很弱。在一個使用Microsoft 365的企業內部,它是目前摩擦最少的選項。它能彙整會議內容、標出待辦事項,並連接到已經存在於你租用戶中的文件、對話與日曆。如果你的管理員已經啟用它,而你整個團隊都在使用Microsoft,那麼開啟它就是合理的預設選擇,我不會勸你反其道而行。

它真正的優勢在於治理能力,而不是什麼魔法。企業IT關心的是管理控制、身分驗證、合規邊界與資料駐留地,而Copilot在組織已經管理的系統內回答了這些問題。這對大型企業來說非常有價值,也是一個小型獨立工具無法複製的東西。

獨立助理仍然勝出的地方

即使在Copilot已經存在的情況下,三個缺口仍讓我持續使用桌面助理。

第一個是授權門檻。Copilot被鎖在一個並非每個席位都有的付費附加元件後面。如果你是外包人員、求職者,或者所在的方案不包含它,那麼Copilot在那次通話中根本無法使用。桌面助理不在乎任何人用的是哪種Microsoft方案,因為它只是擷取你自己裝置正在播放的音訊。

第二個是即時當下。像大多數內建工具一樣,Copilot是圍繞事後摘要而設計的。它會告訴你通話結束後發生了什麼,而不會在有人等待答案的時候,把答案即時呈現在你的畫面上。如果你想要的價值是對話過程中的協助,那就是另一種產品,兩者可以並行使用。

第三個是資料流向。Copilot在你租用戶的控管下於Microsoft雲端處理資料,這對內部通話沒問題,但對機密面試或對外談判來說就更難說得過去。可以在本機執行或使用你自己金鑰的桌面助理,能讓那段對話完全脫離共用雲端。

在Teams上設定Natively

在Teams內部沒有任何東西需要安裝,也不需要申請任何管理員核准。你只要在Teams旁邊執行這個桌面應用程式,它就會聆聽你電腦已經產生的音訊,無論你用的是Teams桌面用戶端還是瀏覽器版Teams。

在會議開始前開啟Natively。核准作業系統要求的一次性系統音訊權限。像平常一樣加入Teams通話。當有人開始說話,字幕就會開始產生,助理視窗會一直對你可見,同時在你分享的任何畫面中保持隱藏。由於擷取是在系統層級透過以Rust打造的音訊管線完成的,同樣的設定不需做任何變更就能在Teams、Zoom、Meet、Slack和Webex上運作。

有一點是Teams特有的注意事項。在政策嚴格的組織中,會議錄音和字幕可能受租用戶規則與地區法律的約束。助理對其他參與者不可見並不會改變你的義務,所以請遵循公司政策,並在需要時取得同意,尤其是在對外通話中。

同時使用兩者而不互相干擾

把Copilot和桌面助理對立起來其實不太準確,因為最實用的做法就是兩者都用。它們解決的是問題的不同兩半,並不會衝突。

在大家都期望留下紀錄的內部Teams通話中,讓Copilot產生會進入會議筆記與日曆事件的共用摘要。那就是團隊日後會參考的成果。同時,桌面助理則留在你的畫面上,提供只有你能看到的即時層:一個你沒預料到的問題的答案、你想追問的後續問題、你只聽到一半的數字。一個是團隊的記憶,另一個是你當下的支援。

由於桌面助理擷取的是系統音訊而不是加入通話,Copilot並不知道它的存在,因此也沒有什麼需要協調的地方。你並不是在同時執行兩個都會宣告自己存在的機器人。你執行的是一個官方的摘要工具和一個私人助理,而其他參與者只會看到那個官方的。

擷取失效時,以及修復方法

Teams上有兩種設定常常讓人困惑,只要知道該檢查什麼,兩者都能很快修復。

第一種是字幕中只顯示你自己的聲音。這代表助理拿到了你的麥克風,卻沒有拿到承載其他參與者聲音的系統音訊。在macOS上,這幾乎總是那個尚未授予的一次性螢幕與音訊權限;在系統設定中核准它,重新啟動助理,雙方的聲音就都會出現。請在重要通話之前提早處理好,而不是在通話過程中處理。

第二種是在某些設定下,Teams會獨佔你的音訊裝置。如果擷取在Teams通話接通的那一刻就中斷,把你的系統輸出切換到標準裝置,例如筆電喇叭或一般有線耳機,而不是虛擬裝置或會議專用裝置,通常就能解決問題。這是路由上的一個怪癖,不是助理本身的限制,它會影響任何擷取系統音訊的工具。

常見問題

沒有Copilot也能在Teams上使用AI助理嗎?

可以。像Natively這樣的桌面助理會獨立於Microsoft 365擷取系統音訊,所以你不需要Copilot授權,也不需要讓機器人加入通話,就能在Teams上獲得字幕與即時協助。

它能同時支援Teams桌面應用程式和網頁版嗎?

兩者都支援。由於擷取是在作業系統層級進行,而不是在Teams內部,所以無論你用的是Teams桌面用戶端還是瀏覽器版Teams,表現都是一樣的。

Teams通話中的其他人會看到這個助理嗎?

不會。參與者清單中沒有任何機器人,而且Natively的浮層在螢幕分享時會保持隱藏,所以你看到的內容只會停留在你這一側的通話畫面中。

它和Microsoft Copilot有什麼不同?

Copilot綁定在你的Microsoft 365授權上,在Microsoft雲端處理資料,主要是在通話結束後進行摘要。Natively不需要授權,可以把處理過程保持在本機或使用你自己的金鑰,並在通話過程中提供即時協助。兩者可以並行執行。

在你下一次Teams通話中試試看

如果Copilot已經涵蓋了你的內部摘要需求,那就在Copilot觸及不到的通話中使用桌面助理:對外面試、候選人篩選、音訊應該歸你所有的客戶談判。正是在這些場景中,差距最為明顯。

Natively可以用你自己的金鑰或本機模型免費試用,而且在Teams、Zoom和Meet上的使用方式都是一樣的。要了解跨平台的完整情況,可以從AI會議助理完全指南開始。