Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術

Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術
大家知道Google的Pixel 6及Pixel 6 Pro會在秋天發表,Pixel家的AI魔法,以及拍攝功能,一直是用戶很關心的看點,目前的流出指出,Pixel 6系列的主鏡頭可能是採用5000萬畫素的三星GN1感光元件,也支援四合一畫素提供清晰度和感光量。而超廣角可能是1200萬畫素,至於Pixel 6 Pro才有的4x光學變焦,可能是4800萬畫素鏡頭。

這些相機組合,加上Google演算魔法,會帶來什麼拍攝功能,也是大家最好奇的,目前已知是得力於搭載的Tensor處理器,可以在拍攝人物即使在動作,也可以用快速連拍、多張合成的方式,得到清晰的照片。
相關文章:Pixel 6將搭載Google自己設計的處理器「Tensor」你知道它能帶來什麼嗎?它會像蘋果M1嗎?

另外近期也有傳聞指出,Google會利用收集到的更多膚色數據,優化各種肖像品質,或是加強肖像特效的自然度。另外也會增強自動白平衡演算(我猜比方改善光源混亂場景的白平衡),以及更好的演算法,區分主體跟背景,尤其髮絲的部分。

這些到目前為止都是傳聞,不過在Pixel 6到來之前,我們有個機會,在線上聽聽台灣的Pixel團隊,分享他們開發相機的準備工作,以及錄影、肖像的一些技術細節,或許可以從中推敲Pixel 6系列的相機,可能會在哪些地方做提升? (真的需要加上想像力推敲)


Pixel相機開發前的功課

Android及Pixel相機產品經理傅敬文跟我們提到,台灣的Pixel相機團隊,從硬體、系統、應用調校、算法、設計、測試都有包含,和總部或其他國家的分工,則以功能和領域來區分,台灣Pixel相機團隊較專精在錄影、音訊、影像處理、UI介面…等功能的開發。
團隊會看市場上的趨勢,從大家,或是特定族群喜歡的功能著手,比方短影音受到年輕人的歡迎,就會成為新錄影功能方向的參考。
Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術

發想好功能後,團隊可能會先做出一個原型,並給內部員工試用,此外也會有專業的訪問團隊,找對應族群瞭解他們的反饋,當然Google內部也有專業的實驗室在測試功能,這些過程都是要確保手機功能,在推出前是有經過消費者驗證的。因為早期Google都在在內部咖啡廳裡找人試驗,所以這種調研,在Google內部有個名稱叫做「Cafety Study」。

另外基於產品要在全球銷售,Google在收集反饋時,也會看來源是否多元,比方要收集不同國家、語言、種族…等族群的意見。

舉個例子,團隊在開發美顏調教時,會參考各種不同膚色、文化的特性做優化,盡量不去變動臉上原來的樣子,比方不因為要美化,就修掉鬍子之類的特徵,或是加上不存在的東西。

小從內部試用,調查不同族群趨勢,大到適用全球用戶,都是團隊在開發手機功能前要做的準備。
這讓我想到人手一機拍影片,上傳到YT分享,應該是很多人都做過的事,因此更需要一鍵就能克服困難場景、困難光線,拍到漂亮影片。除了夜視、HDR外,還有錄影的功能,Pixel在台灣的團隊,就跟我們分享怎麼在手機上做到不輸三軸的錄影防手震,以及肖像打光兩項效果。


錄影防手震也是用AI預測算出來的

跟很多手機一樣,Pixel也提供了錄影防手震的功能,在邊走,甚至邊騎車邊錄影時,都可以拍到穩定的畫面,也與大部分手機一樣,Pixel上的影片防震,是軟硬體一起工作的成果,不過Google有導入機器學習,加強預測準確度,進而能做出好的穩定度。
Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術


Pixel手機利用鏡頭本身有的OIS功能,以及內部的陀螺儀兩個硬體,得到拍攝時手機移動的資訊,比方用戶正在往那個方向移動,然後用機器學習的模型,預測接下來手機可能會往哪邊移動,然後去做補償,同時拍攝軟體也會去分析多張畫面,並取用可用的的那格,合成出穩定清楚的影片。

Pixel團隊在設計錄影防手震功能時,有兩個目標,一是要讓使用者不用做多餘設定,按下快門就可以拍防手震,這因為補償合成這些工作,都交給軟體來運算,基本上用戶就按下快門後,就可以拍攝穩定畫面了。

第二項目標是想鼓勵消費者因這防手震功能,放心去發想,拍出更高級,有創意的影片。
因此團隊也利用這防手震功能,做出不同的錄影模式。比方他們去看一些專業導演、YouTuber們會用腳架、穩定器…等器材,取得穩定畫面之餘,也玩一些運鏡,因此就發展出如「鎖定」、「動態穩定功能」、「電影運鏡」…這類的進階功能。
Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術

「動態穩定功能」可以用來拍更劇烈的,比方騎車、跑步之類的戶外活動,它是利用超廣角鏡頭來拍,超廣角拍到的範圍廣,也有中間的畫面較周圍都要穩定的特性,這功能就在運算影片防震之餘,裁切取用超廣角中間的畫面,得到動作幅度大,但畫面一樣穩定的影片。

「電影運鏡」靈感則是取自專業導演拍出,很柔和穩定的運鏡畫面。這也是在錄影防手震之上,針對橫移的方向做優化,並加上2倍慢動作效果,於是整個結果看起來就是像電影般優雅的平移運鏡,但實際上是手持手機拍攝的。
Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術


不會打光,運算幫你補光

「肖像打光」則是一個Pixel相機,及Google相簿內的編輯功能。
Pixel團隊在實驗室裡設置了一台可以打出很多種燈光的機器,模擬出各種燈光打在人臉上的樣子,然後這用大量的這類資料,訓練出光怎麼打,會在臉上形成怎樣的層次,陰影怎麼變化的模型,在拍攝肖像模式後,如果發現臉色太暗,手機會加上簡單的打光修飾,或是事後到Google相簿選擇編輯,也可以手動拖曳光源方向,幫臉上的陰影補光。
Pixel團隊分享為何一鍵可拍電影運鏡、跑步拍也很穩? 或許也是Pixel 6背後技術

這些都是目前Pixel手機上看得到的功能,跟機器學習都脫不了關係。未來Pixel 6會以大量數據、A機器學習,以及Google自研晶片,做出什麼更上一層樓的運算拍攝呢?大家可以想像一下,或是關注發表前的傳聞吧~

#我想點播氣場打光功能

圖片來源:depositphotos
被操弄人性OK嗎?
Pixel 6很令人期待
不知道照相是否能又讓人驚艷
還我小螢幕手機



說是這樣說,到時候我還是會邊買單邊喊香......
值得期待一下!之前玩過5的照相就對Night Sight跟HDR印象深刻,
6更上一層樓肯定沒問題
Nanako0625 wrote:
大家知道Google(恕刪)

強大的google演算法令人期待
如果太貴就要吃蘋果了

我一直使用的是HTC的手機,到目前為止依然使用HTC-U11
是HTC不爭氣,已經沒有好機子讓我選用
我要找的是可以使用久又穩定的,我不喜歡對岸的,也不喜歡泡菜國做的
RRE
P6的定位已經跟之前中階機的定位不一樣了 還以為能在GOOGLE用中階機的價錢買到高階機阿 醒醒吧卓卓
ezfire
甘你何事
Nanako0625 wrote:
大家知道Google(恕刪)

GOOGLE相機很厲害
Nanako0625 wrote:
大家知道Google(恕刪)


個人比較期待廣角跟超廣角一起拍攝
然後疊圖運算防止照片模糊?的功能
印象中是這樣啦
https://www.flickr.com/photos/roxsoul/
lza
如果是拍照,廣角糊了我想超廣也會糊...除非你是指大底慧差那種近拍自動切超廣取代的方案,但Pixel幾乎沒用大底應該是不用這樣解
這個打光修飾我喜歡
谷歌果然不會讓人失望
看起來Pixel 6的拍照可以好好期待了
關閉廣告
文章分享
評分
評分
複製連結

今日熱門文章 網友點擊推薦!