你需要知道的最重要的事情
- Gemini 現在在 macOS 上提供了「智慧型聽寫」功能，只需按下 Fn 鍵，即可在任何視窗中輸入時自動消除「啊」和「嗯」等聲音頻率。
- Gemini 現在可以透過「螢幕感知推理」功能（預設為未啟用）「理解」您的 Mac 螢幕內容，從而執行複雜的任務，例如根據您的文件總結筆記或起草電子郵件。
- 儘管允許 Gemini 完全存取您的 Mac 螢幕有許多好處，但這也會帶來潛在的隱私和安全風險，應該加以考慮。
人們對人工智慧的看法可能各不相同，但目前確實有很多人在使用它。大多數用戶僅限於使用聊天機器人，例如ChatGPT或 Gemini，要么將其作為谷歌的替代品（千萬別這麼做），要么將其視為親密的朋友（也千萬別這麼做）。但如果您打算將人工智慧用作個人助理，請務必注意：Google週三宣布了 macOS 版 Gemini 的兩項新更新，其中一項更新可能會影響用戶的隱私和安全性——前提是用戶選擇啟用它。
macOS 上 Gemini 的語音輸入功能已改進
如果你經常使用 macOS 的語音輸入功能（對著螢幕說出單詞，讓 AI 幫你輸入），那麼現在你或許有理由選擇 Gemini 而不是蘋果的內建解決方案了。目前，macOS 版 Gemini 具備「智慧語音輸入」功能，Google表示該功能可「在遊標所在位置即時修正文字」。這意味著 Gemini 會移除單字間的「呃」、「嗯」之類的音節——這些音節你平常根本不會自己輸入。這項功能在 Mac 的任何視窗中都能使用：只需按下 Fn 鍵，然後開始說話即可。
我們需要實際體驗這項功能才能判斷其效果，但它建立在 Gemini 在其他平台上所做的類似改進之上。這只是一個小小的調整，但它將使用戶無需完全自動編輯即可使用 Gemini 起草文字、電子郵件或文件。這正是我在 AI 功能中所期待的優勢。而且由於該功能預設為啟用，因此任何在 Mac 上使用 Gemini 的用戶都會使用它——除非他們深入設定將其停用。
Gemini現在可以「理解」你的Mac螢幕了
谷歌對 macOS 版 Gemini 的第二次更新並不像第一次那麼簡單直接，而且預設並未啟用。谷歌稱之為「螢幕感知推理」的這項功能，賦予了 Gemini 「理解」Mac 螢幕上正在發生的事情的權限。其理念是將任務委託給 Gemini：例如，如果你的「備忘錄」應用程式已打開，你可以按下 Fn 鍵並說：「將這些筆記整理成今天下午會議的概要。」Gemini 應該能夠識別你的「備忘錄」應用，分析文字並自動格式化，而無需你使用其他應用程式。
您還可以編寫一系列命令：您可以讓 Gemini 起草一封團隊聚餐的電子郵件，並從 Mac 上的指定文件中提取重要資訊（例如參與人員、預算要求、飲食限制等）。然後，您可以讓 Gemini 在 Google 地圖上搜尋特定類型的餐廳，並將其新增至團隊選項。您可以隨時修正指令，Gemini 會自動進行相應調整。例如，如果您最初將團隊聚餐時間改為週五晚上 6:30，但之後在命令中又改為“抱歉，聚餐時間改為晚上 7:00”，Gemini 會自動進行相應的更改。
當然，這類功能也有其優點。如果您已經在 macOS 上使用 Gemini，允許它「檢視」您的 Mac 螢幕會使其更加實用。您不必再依賴 Gemini 處理所有任務，而是可以將其權限擴展到整個 Mac，如果谷歌的說法屬實，這將以一種非常複雜的方式實現。但是，讓 AI 軟體完全存取您電腦上的所有內容始終存在隱私風險，也可能存在安全風險。您真的希望谷歌的 AI 能夠看到您螢幕上的所有內容嗎？
當然，這種風險遠不及實際的智慧代理程式所帶來的風險。如果您訂閱了Google更高級的AI套餐，即可使用Gemini Spark，它可以在您的Mac上獨立運行。需要警惕的最大風險是“命令注入”，即駭客將惡意指令隱藏在網站中，從而攻擊您的AI。如果您給AI分配任務，而它遇到了這樣的指令，它會認為該請求來自您，而不是駭客。因此，當它處理諸如“打開[惡意網站]並下載[惡意文件]”之類的請求時，它會毫不猶豫地執行；或者“打開[加密錢包]，使用已保存的憑據登錄，並將資金發送到[帳戶]”之類的請求時，它也會執行。就目前的Gemini而言，這應該不會是個問題，但理論上，如果您給它分配的任務使其容易受到命令注入攻擊，則可能會發生這種情況。
如果您對最新功能感興趣，此警告的目的並非阻止您在 macOS 上使用新的 Gemini 代理功能，而是希望您在繼續操作之前充分考慮其存在的風險。
評論被關閉。