かつての論争が再び表面化し、泥沼にはまった1週間を経て、サムスンは自社のスマートフォンがどのようにしてこれほど忠実に月の写真を撮影できるのかを公式に詳細に発表した。記事の内容のほとんどはこれまで聞いたことのある内容だが、今週の月撮影機能に関する混乱に対するサムスンの対応は、スマートフォン写真の魔法の多くはバックエンドのソフトウェアの改良によるものだということを改めて思い起こさせるものだ。
すべては約1週間前、Redditで始まりました。Redditは、良い議論が盛り上がる場所です。ibreakphotosというユーザーが、サムスンのスペースズームの月面写真が偽物であると主張し、スクリーンショットで証拠を示した投稿で話題になりました。彼らは次のように結論づけています。
サムスンの月の写真は偽物です。サムスンのマーケティングは欺瞞的です。ディテールがないところにディテールを追加しているのです（この実験では意図的に削除されています）。この記事ではマルチフレーム、マルチ露出について言及されていますが、実際にはほとんどの作業はAIが行っており、光学系はディテールを解像できません。月は地球に潮汐固定されているため、他の月の画像をモデルに学習させ、月らしきものが検出されたときにそのテクスチャを貼り付けるだけで済みます。
スマートフォンの写真の仕組みを知っている人なら、AIが膨大な処理の大部分を担っていると聞いても、それほど驚くには当たらないだろう。実際、サムスンが今回の調査結果について述べた内容は、AIが特定の写真の画質を向上させるために舞台裏で働いているという事実を強調している。同社によると、シーンオプティマイザー機能はGalaxy S21シリーズ（「スペースズーム」という紛らわしい名称で販売される以前）から月撮影に対応しており、その後、この種の撮影に関連するアルゴリズムを改良し、フレーム内にいわゆる最適化が必要な月があることを認識できるようにしたという。
サムスンはこう書いている:
月を認識するエンジンは、満月から三日月まで、さまざまな月の形と詳細に基づいて構築されており、地球から見た画像に基づいています。
AIディープラーニングモデルを用いて、月の存在を検出し、関連する画像における月が占める領域（四角で示されている領域）を特定します。AIモデルが学習を完了すると、トレーニングに使用されていない画像であっても、月が占める領域を検出できるようになります。
Samsungの「スペースズーム」モードを2台のSamsungスマートフォンでテストしました。Galaxy S22 Ultraで撮影した月の写真は、この機種の以前のレビューでご覧いただけます。このような画像を撮影してソーシャルメディアで共有できるのは素晴らしいことだと、当時コメントしたのを覚えています。
今年のGalaxy S23 Ultraで満月の写真を撮ったのですが、同じ結果は得られませんでした。S22 Ultraの写真に写っていたような精細なクレーターではなく、露出オーバーの光線が上から輝いているように見えました。Samsungの説明に従えば、まさにこれがアルゴリズムの仕組みです。Galaxy S23 Ultraが前モデルのような月の写真を撮れなかったのは、月を月だとすぐに認識できなかったためであり、Samsungはアルゴリズムをそのような動作に訓練したわけではないのです。
Samsungの投稿は全文を読む価値があります。特に、スマートフォンがどのようにしてそのような画像を撮影できるのか興味があるならなおさらです。しかし、Samsungが自社のカメラがまるで望遠レンズを搭載した一眼レフカメラやミラーレスカメラのように、100倍ズームが標準搭載されているかのように宣伝したことは、マーケティング上の責任を問うものではありません。スマートフォンとそのガラスは、本格的なカメラには到底及びません。月面の必要なディテールを捉えるには、センサーサイズと背面ガラスを大きくする必要があるのです。
これも一般的な後処理ではなく、ライブフォトショップに似ています。元のRedditの投稿で発見されたように、Samsungの月の写真は、すでに撮影したものを必ずしも改善するわけではなく、あなたの写真と複数の他の写真（あなたが気付かないうちにカメラで同時に撮影されたもの）を使用し、既存の月の詳細をAIがディープラーニングして、携帯電話があなたのショットで月の特徴がどのように見えるかを部分的に合成します。これは、色などが保持されることを意味します（携帯電話が他の月の写真をあなたの写真にコピーして貼り付けるだけではそうはなりません）が、携帯電話は月の潮汐固定位置を利用して、特定の時点での月の見え方を常に把握し、それに合わせて写真を調整することもできます。
同時に、もしそれが月の写真のように鳴くなら、それはただの月の写真なのかもしれません。巨大コングロマリットの味方をするのは気が進まないですが、サムスンが自社のカメラ性能にこだわる姿勢を非難するつもりもありません。私たちの多くがスマートフォンに求めているのは、世界を捉え、ギガバイト単位の情報を懐かしく振り返ることであり、写真がなぜそのように見えるのかと悩むことではないのです。
AppleとGoogleは、それぞれのスマートフォンカメラで同様のマーケティング戦略を採用しています。Googleは、機械学習によって競合他社よりも優れた写真が撮れるという考え方に傾倒しています。窓の外の月相を実際に写真に収めたいなら、Samsung Galaxy S23 Ultraの1,200ドルという価格を諦め、その資金の一部を望遠カメラに投資することを検討してみてはいかがでしょうか。
