Tech & Gear

Apple 新無障礙工具帶來 AI 字幕、更聰明的 VoiceOver,以及 Vision Pro 輪椅支援

作者 Aimirul|
分享

Apple 今年要為它的無障礙功能帶來更大的 AI 升級,老實講,這種 tech update 比平時那些 spec-sheet flex 更有意義。

根據 Apple 最新的無障礙功能預覽,這些新工具將在今年稍後登陸 iPhone、iPad、Mac、Apple TV 和 Apple Vision Pro。重點功能是:為原本沒有字幕的影片生成 AI 字幕,並由裝置端語音識別驅動。

對馬來西亞和 SEA 用戶來說,這可能真的很有用。想想那些隨機 gameplay clips、livestream VODs、電競訪問、anime 相關影片,或者字幕缺失/做得很爛的 creator content。如果 Apple 的系統運作順暢,它可以讓更多內容更容易理解——尤其是對聾人和聽障用戶、在公共場合不開聲看影片的人,或者任何正在面對 noisy 到 mamak 級背景混亂的人。

重點是 Apple 表示這會使用裝置端處理。這很重要,因為無障礙數據可能很敏感。如果你的 phone 或 Mac 可以在本機處理語音,而不是一直把所有東西送上 cloud,這在 privacy 方向上會更好,尤其是對每天依賴這些功能的用戶來說。

Apple 也在透過 Image Explorer 更新 VoiceOver,提供更豐富的圖片描述。這應該可以幫助用戶更詳細了解圖片裡有什麼,不過 Apple 也提醒,這些 AI 描述不應在高風險或危險情況下被視為可靠。這提醒很合理,因為 AI 圖像理解到現在還是可以很有自信地講錯東西。

另一個不錯的新功能:用戶可以按下 Action 按鈕,直接詢問 camera 看到什麼。這聽起來對日常任務特別實用——辨認物件、查看標誌,或者在不需要另外開 app 流程的情況下取得環境資訊。

Voice Control 也將加入自然語言導航,應該會讓用 voice 控制裝置感覺沒那麼機械人。不需要死背精準指令,用戶可能可以更自然地說話,系統仍然能帶你到想去的地方。Apple 的 Accessibility Reader 也會改進,用來總結更複雜的材料,這對長文章、密集文件或讀書內容都可能有幫助。

Vision Pro 會獲得一些更具體的更新。Apple 的 headset 將能把 eye-tracking 系統連接到電動輪椅驅動系統,包括美國的 Tolt 和 LUCI。連接可以透過 Bluetooth,或使用 Developer Strap 以有線方式完成。Vision Pro 仍然是一台非常昂貴的裝置,售價 US$3,499——大概接近 RM16,000,還未算本地稅、運費或 reseller markup——所以它在馬來西亞絕對不是 mass-market 產品。但這個方向很有趣:eye tracking 正在從「很酷的未來介面」走向真正的 mobility 和 independence 使用場景。

Apple 也把 Vehicle Motion Cues 加到 Vision Pro,目標是在移動車輛內使用 headset 時減少 motion sickness。你到底應不應該在車裡戴 Vision Pro 是另一個問題,bro,但 motion comfort 絕對是 mixed-reality hardware 必須解決的東西。

還有一些較小的無障礙更新。Apple 提到 MagSafe-compatible Hikawa Grip & Stand 會透過 Apple Store 更廣泛供應、tvOS 將支援 Larger Text,以及新的 API 可以把手語翻譯員帶進 FaceTime 通話。

對 SEA 用戶來說,最大 takeaway 不只是「Apple 加了更多 AI」。而是無障礙功能正在更深入整合到大家本來就在用的裝置裡。如果這些功能做得好,受益的不只是 disabled users,也包括學生、gamers、creators、父母、多語家庭,以及任何需要科技更 flexible 的人。

現在真正的考驗是:這些工具處理口音、吵雜音訊、混合語言對話,以及真實馬來西亞使用情境的能力有多好。因為如果 AI 字幕能撐過 Manglish、tournament comms,還有爛 mic audio 裡有人大喊「push mid lah」,那就真的 cooking 了。

來源:The Verge

标签

AppleAccessibilityApple IntelligenceVision Pro