Pixel 3 を使ってみた（主にカメラ）

Pixel 3と言えばカメラの性能が話題ですが、Pixelのカメラを知る上で @ryo_pan にお勧めされたRebuildのの回。 Pixel 3のカメラチームの開発者Hajime Moritaさんをゲストに、Pixelのカメラ開発裏話をたっぷり2時間紹介してくれます。もうめちゃくちゃ面白かった...！https://rebuild.fm/219 

どんな話かと言うと、 ✓Pixelのカメラを作ったのはGoogleリサーチチーム ✓リサーチチームのボスがMarc LevoyというProfessor ✓Marc LevoyはComputational Photographyの提唱者 ✓カメラ大好きっ子のMarcはプログラムであれこれできるカメラが欲しかった ✓Marcの野望を実現した代物がPixelカメラ

更に、 ✓スマホで一番リソース使うのがカメラ ✓貧弱なセンサーでノイジーな画像を何十枚も撮って合成するから ✓カメラ撮影は超分散処理 ✓メモリ幾らあっても足りない ✓シャッター切った瞬間バックグラウンドのアプリを殺しまくる ✓アプリは死ぬまいとのたうち回る ✓カメラは戦場

そんな訳でRebuildのこの回のタイトルが「Mass Murder of Apps(アプリの大量殺戮)」 他にも名言が沢山 ✓Machine LearningのMachineの気持ちになって写真を撮るべし ✓あなたがシャッターを切るその裏で沢山のアプリの命が奪われているhttps://rebuild.fm/219/ 

Pixel 3のデジタルズーム処理「Super Res Zoom」はデジタルズームで起きる欠落の補完を複数枚のフレームから再構築している。 手ブレが起きる事を逆手に取って、バースト撮影したフレームを重ねている。 カメラが固定されてる時でも擬似的に手ブレを起こしてると。https://ai.googleblog.com/2018/10/see-better-and-further-with-super-res.html?m=1 …

Computational PhotographyのボスMarc Levoyと、Pixel 3のカメラのProduct Managerによる変態カメラの構成技術についての解説。 ✔︎Wide-angle Front Camera ✔︎Synthetic Fill Flash ✔︎Night Sight ✔︎Computational Raw ✔︎Super Res Zoom ✔︎Top Shothttps://youtu.be/W-bJg2L2HxA 

スマホカメラでのRAWってiPhoneでもサポートされたけど、あれって厳密にセンサーから取り出したRAWでは無いのね。 なぜならスマホのセンサーで撮影したRAWはノイズだらけで、マルチフレームから合成しないと使い物にならない。 Computational Photographyによって生成されたRAWっぽい何かなのか。

Pixel 3のHDR+をはじめとしたComputational Photographyの簡単な仕組みの解説。 Computational photography will COMPLETELY revolutionize your smartphone camerahttps://www.youtube.com/watch?v=WsAdG6wIAaM …