Claude新增電腦操控功能 用滑鼠控制Mac解鎖跨裝置AI工作流

Anthropic於3月23日正式宣佈旗下AI助理Claude在Claude Cowork與Claude Code產品中加入「電腦操控」（Computer Use）功能，目前以研究預覽版開放給Claude Pro與Max訂閱用戶的macOS平台。此功能讓Claude能直接操作滑鼠、鍵盤與螢幕，自主執行開檔、瀏覽網頁、執行開發工具等任務，無需人工介入。用戶亦可透過新功能Dispatch在手機派發指令，由Claude於桌機自動執行並交付成果，實現跨裝置非同步工作流。Anthropic明確指出該功能仍處於早期階段，可能犯錯，建議使用者從信任應用程式測試，避免處理敏感資料，並強調螢幕操控效率低於直接API整合，複雜任務需多次嘗試才能完成。此舉旨在突破傳統AI工具的文本限制，打造真正能執行實務操作的智能代理。

電腦操控功能深度解析與技術邏輯

Claude的電腦操控功能核心在於其智能判斷系統，會優先尋找現有API連接器（Connector）直接呼叫服務，例如Google Workspace或Slack整合，僅當無對應工具時才啟動螢幕操控模式。這項設計反映Anthropic對效率與穩定性的嚴謹考量，因為直接API整合速度可達毫秒級，而螢幕模擬操作需解析視覺介面、模擬點擊，耗時較長。根據官方部落格說明，Claude在操控過程中會分析螢幕元素位置，例如辨識瀏覽器網址列的輸入框，再模擬鍵盤輸入與滑鼠點擊，但因UI介面變化或動畫乾擾，常需重複嘗試。例如執行「開啟GitHub並提交Pull Request」任務時，若介面載入緩慢，Claude可能誤判按鈕位置導致失敗，需人工乾預修正。此功能目前僅限macOS，且桌機端Claude應用程式必須保持喚醒狀態，無法在睡眠模式運作。值得注意的是，Anthropic刻意將此功能定位為「研究預覽版」，避免用戶過度依賴，同時為後續整合第三方服務鋪路，如未來可擴展至Windows平台或更複雜的企業應用場景。

使用情境延伸與市場競爭格局

Dispatch功能的推出，徹底改變了AI代理的工作模式。用戶無需全程守在電腦前，只需在手機輸入「整理今日會議筆記並生成簡報」，Claude便會自動在桌機執行Excel資料分析、PPT生成，完成後推送通知。實際應用情境已超越基礎操作：科技媒體9to5Mac報導指出，開發者正用此功能在IDE中自動修改程式碼並提交PR，3D列印工作室則設定「自動排程列印任務」，由Claude監控列印進度並通知後續步驟。市場背景顯示，這並非孤例——Perplexity的AI代理已支援網頁爬取，Meta的AI助手亦能控制手機應用，導致Mac mini需求激增，部分經銷商反映缺貨率達40%。Anthropic的戰略在於強化「非工程師友好」定位，尤其針對Claude Cowork用戶群（定位為非技術背景的AI代理使用者）。與Claude Code（專注程式碼生成）不同，Cowork的電腦操控功能讓行政人員也能自動化處理週報整理、訂票等任務，使AI從「內容生成」升級為「流程執行者」。此趨勢也反映產業共識：未來AI代理的核心競爭力將在於「跨裝置協同」與「實務操作能力」，而非僅限於文字互動。

安全機制與未來發展潛力

安全層面是Claude電腦操控功能的關鍵設計要點。每次啟動新應用程式前，Claude會彈出明確授權視窗，要求用戶確認「允許操控Safari」或「存取檔案管理器」，並提供即時中止按鈕。Anthropic強調，所有操作日誌皆可追溯，用戶可隨時終止任務，避免敏感操作風險。官方建議使用者避免讓Claude處理銀行交易或個人通訊，改從信任的應用程式（如Google Docs）測試。技術上，功能受限於macOS系統框架，無法跨平台運作，且桌機端需保持應用程式開啟，這限制了移動性。然而，未來發展潛力巨大：Anthropic正測試整合更多連接器，例如直接對接Notion API，跳過螢幕操控步驟。市場分析顯示，若功能成熟，將重塑企業辦公流程——例如HR部門自動處理入職文件審核，或財務團隊即時生成月度報表。9to5Mac指出，Mac mini缺貨潮已延續至Q2，反映企業對AI代理裝置的迫切需求。Anthropic的策略是逐步收緊功能範圍，先聚焦於高頻次、低風險任務（如資料整理），再擴展至複雜流程。此舉不僅提升Claude的實用價值，更為AI代理市場定下「操作能力」新標準，預期將引發更多競爭者加速研發類似功能，推動AI從「提問者」轉型為「執行者」的關鍵轉折。