[iOS10] 新Photos會自動辨識照片 自動分類 自動做本回憶相簿

如果你很常用iPhone拍照，那打開相簿跟打開相機的頻率應該是差不多的，那麼你可以關注一下iOS10的相簿做了哪些更新。
首先是「Place」，在地圖顯示的功能。
現在iOS裡的相簿，會自動用時間、拍攝地點來做分類，點擊一下地點，就會在地圖上顯示照片，但目前地圖顯示的，也是相簿幫你分好的某一地區的照片，iOS10上將變成所有的照片都可以一起秀在地圖上，所以如果你常常跑去玩，那就可以在地圖上看到你的相簿遍布在台灣各縣市，進階一點的就是地圖上很多國家都有你的相簿。（有點像Xperia內建的相簿可以在地圖上顯示一堆一堆的照片那樣）




第二項更新是終於運用電腦視覺技術了。
現在的Google相簿就是一個很典型的，運用電腦視覺的例子。電腦視覺講起來有點硬梆梆的，但簡單說也是跟深度學習有關，就是電腦經過大量大量照片的訓練，學習辨識照片裡的特徵，然後幫照片自動分類，比方自動辨識出有貓的照片全部歸一堆、拍花的都放在一起，然後同一個人的照片也自成一堆。

不只Google相簿，最近也發現三星手機的相簿也有這功能。
現在iOS 10開始，iOS的相簿也會運用電腦視覺自動分類了，這裡特別提出的是自動臉部辨識，自動抓出同一個人，自成一本相簿。


不只辨識人，程式也會辨識場景、物件，自動歸成相簿。
比方這張照片，程式可以辨識出照片裡有水、有山、有馬，辨識出物件之後，對我們要搜尋照片是很有幫助的，更進一步，發展出「Memories」這個自動生成回憶錄(?)的功能。


講回憶錄好嚴肅，其實是比較像每次出去玩回來之後，會整理成的遊記相簿。

程式會去分析整個相本的照片，然後做複合辨識，辨識出照片裡有誰、有什麼，也知道是什麼時候，在哪裡拍的，所以可以根據這些資訊，找出關連性，把相關的照片放在一起。
比方程式整理出這些照片是在同一段時間拍的，並辨識出都在某一個地點，裡面都是這兩個大人兩個小孩，場景都是青山綠水，那麼程式就會知道這些照片是一組的，集成出你們一家四口的出遊相簿，等於幫你們家把那一天的回憶整理好。



Memories會根據辨識出的資訊，為相簿設定一個主題，比方這本都是划船照，主題就是水上一天，那本都是在某市，就要Thhoe City，有爺爺奶奶一起的那本叫Family...等。新的相簿底下會有一個「Memories」的icon（頁籤），所有程式做好的主題相簿，都會放在這裡。



其實Memories不是初次出現，至少Google Photos也有這功能，所以iOS的Memories有什麼不一樣？我也還沒實際用過，還說不出兩者有什麼差別，但在介紹Memories這功能時，Craig Federighi有小小提到，「Memories」把介面整理得很直覺跟聰明。
比方採用雜誌式的排版，每張照片都因此可以被看見。
另外Memories相本裡，不只把照片排排站，還會列出成員、地圖跟自動撈出的相關Memories相本。


另一個自動化的智慧功能，是程式會把相關的相片、影片集合後，自動加上特效跟配樂，做成有主題有情調的幻燈片影片。當然，如果你對自動做出的影片不是很滿意，也可以自己修改，調整長度、更換照片影片、換個配樂、氣氛...等的，這樣就可以編輯完全不同風格的影片了。

關於相簿的隱私

在講機器學習的時候，一定會提到電腦是透過瀏覽海量的照片，來學習什麼叫貓、人的臉部會有什麼不一樣的特徵...等，因此就每每被詢問是否有侵犯隱私的疑慮，難道我的照片就默默被上傳到某資料庫裡，供電腦學習用了嗎？大公司還是會遵守道德的，Google提過他們不會使用不授權公開的照片，那蘋果這個臉部辨識，又是怎麼讓機器學習？同時保護用戶個人隱私呢？
蘋果軟體工程主管Craig Federighi提到，iOS 10 會使用裝置上的智慧功能來識別「照片」中的人物、物件與場景，以及提供 QuickType 建議，這些辨識跟學習，都是在裝置內完成的，所以不會有照片要傳到外面伺服器去學習的問題。




新的iOS 10相簿除了會出現在iPhone及iPad上之外，Mac上的相簿也會有自動辨識分類、搜尋的功能，Apple TV上則可以觀賞Memories相本。
我猜可能會有人覺得無新意，其實我也還玩到，不敢說有沒有新意，但新不新意並不影響它自動分類照片、自動製作精美相簿的實用性，這是一個我很想趕快玩玩看的功能。



相關報導：WWDC 2016專區

iOS 10秋天將有十大更新 你常用的iMessage變有趣了！

[iOS 10] iPhone鎖定畫面大改造 在這裡就能完成很多事

[iOS 10] Siri深度學習 帶來更聰明的新QuickType快速輸入

[iOS 10]蘋果釋出開發工具 Siri將走入更多第三方程式

Google相簿也有大神 利用電腦視覺技術自動辨識照片人、事、物