Snapdragon Summit 2023 :高通透過情境展示 Snapdragon 如何結合 AI 豐富日常生活

2023.10.25 05:44PM
照片中提到了SUMMIT、YU CHAO、YANG,包含了臂、產品、樂趣。、ARM Cortex-M、ARM 架構家族

高通 Snapdragon Summit 2023 的主軸重點之一即是能以在裝置執行 AI ,不過提到 AI 如何強化日常的生活體驗,多數人恐怕除了聯想到手機品牌在行銷時不斷強調 AI ,在一時之間可能也想不到 AI 到底被使用在甚麼地方;高通為了使參������������易理解 Snapdragon 平台結合下一代 AI 技術如何增強日常生活體驗,透過情境展示介紹自個人助理、結合生成式 AI 的增強影像、透過手機與 XR 眼鏡的智慧健身以及新一代藍牙 LE Audio 技術當中的 Auracast 廣播。

利用大型語言模型激盪想法與迅速找尋解決問題的辦法

▲透過大型語言模型使 AI 寫一首詩詞

▲利用大型語言模型尋找問題的解答

現在 AI 火熱的應用之一就是結合大型語言模型 LLM 的個人助理,然而目前多數的應用如 OpenAI 的 ChatGPT 、 Google 的 Bard 等都是需要連接網路,意味著沒有網路就無法使用,同時也會對投入問答的字句的隱私權有所顧忌;高通甫發表的 Snapdragon 8 Gen 3 旗艦手機平台與 Snapdragon X Elite 行動 PC 平台則具備足以執行新一代大型語言模型的運算力,高通在展示區透過搭載 Snapdragon 8 Gen 3 的參考設計,結合 OpenAI Whisper 執行語音轉文字、還有 Facebook Llama 2 7B ( 70 億參數)大型語言模型執行個人助理,在短短幾秒時間透過手機依照敘述寫一首詩,或是快速解答甚麼年分的總統是誰。

透過 AI 分析個人運動狀況、檢測膚質並給予建議

▲利用手機的攝影鏡頭捕捉運動者的骨架並進行 AI 分析提供 AI 智慧運動教練功能

▲使用者可利用 XR 眼鏡、智慧穿戴觀看自己姿勢是否正確還有個人的呼吸、心率

▲搭載皮膚分析器的 Snapdragon 8 Gen 3 開發機

▲幫助用戶分析肌膚含水狀況與提供建議

另外,透過智慧手機的攝影鏡頭與 AI 進行人物框架捕捉,結合智慧穿戴設備、 XR 眼鏡等,能提供全新的個人運動教練體驗,借助手機鏡頭擷取的人物影像,再利用 AI 識別人體的框架,再結合健身 app 進行運動的���示與動作正確與否的判斷,同時透過 XR 眼鏡觀看個人姿勢是否正確的資訊與來自智慧穿戴裝置的心率狀況;另一個個人保健應用是利用搭載肌膚含水感測器的 Snapdragon 8 Gen 3 參考設計,只要將感測器趨近皮膚,吉可在短短時間內完成肌膚含水量分析,同時透過分析數據給與合適的護膚建議。

利用 AI 增強拍攝體驗

▲高通順便展示原生感光原裁切變焦與數位變焦的畫質差異

▲利用 AI 影像分辨方式檢測餅乾是否新鮮

▲未來透過 AI 進行去背,使前後鏡頭的人物合成更為自然

▲透過拍攝的照片結合生成式 AI 創造全新的影像內容

在影像技術方面,高通展示基於 AI 的前後雙鏡頭拍攝應用,利用 AI 進行人像去背後進行即時合成,能夠呈現比現行去背技術更自然的處理、且更為即時;另外透過一張拍攝的照片結合 Stable Diffusion 生成式 AI ,能夠以文字敘述的方式產生天馬行空的創意照片,或是將人物置換與消除。另外還有一項更為日常的應用,即是透過手機鏡頭拍攝餅乾,利用 AI 方式判斷餅乾是否新鮮與適合食用。

高通除了 AI 增強應用以外還展示基於高畫素相機的原生畫素裁切變焦與數位變焦的差異,相較需要先將光電訊號轉為數位檔案後才進行裁切的數位變焦,原生畫素裁切以等比例方式裁切畫素區塊並輸出訊號,減少一次的類比轉數位轉換,有助於提升畫質,同時原生裁切後再進行數位變焦時也會比直接自原生畫素變焦到相同焦段理論上更好。

Auracast 藍牙廣播技術將改變藍牙耳機的使用方式與可能性

▲高通是首個在 2023 年 MWC 展示 Auracast 廣播應用的技術品牌

▲透過 Auracast ,使用者可像切換廣播一樣觀看左邊與右邊不同電視撥放的音訊內容。

高通原本就是藍牙聯盟在 2023 年 MWC 與 Computex 展示藍牙 LE Audio 當中的 Auracast 廣播模式的耳機晶片合作夥伴, Auracast 是一種基於藍牙技術的短距離單向廣播模式,利用手機導引耳機連接到 Auracast 基地台,即可接收 Auracast 的音訊訊號。

例如在醫院等不適合喧譁的公眾環境,或是在播放不同運動節目的運動酒吧,播放不同節目的電視都可透過 Auracast 技術自耳機接收電視的音訊訊號,且不必擔心干擾到其��人;或是在國際會議場合,即時口譯也能透過 Auracast 的方式提供給需要翻譯的聽眾,且能夠同時提供多個語言的翻譯頻道供選擇,會場就不需要再準備口譯機。