Apple の Spatial Framework は、写真家として私が支持できる生成 AI です

Apple の Worldwide Developers Conference が人工知能だらけになることは分かっていましたが、「これはワイルドだ」と思わせるような写真機能が登場するとは予想していませんでした。

月曜日の WWDC 基調講演で、Apple は写真アプリに非常に便利だと思われるいくつかの新しい編集機能を導入しました。画像から不要な邪魔物を除去できる既存のクリーンアップ ツールに加えて、画像の端を拡大することもできます。

しかし、本当に私の目を引いたのは、空間リフレーミングです。これは、自分が立っている場所を反映して写真の構図を調整できる機能です。

これらすべての機能が使用するのは、 生成AIこれらは、写真アプリの編集環境の新しいツール カテゴリに含まれる予定です。最初の開発者ベータ版 iOS27 登録開発者が利用できるようになりました。

AI を増やしてスロップを減らす

ジェネレーティブ AI は、皆さんのおかげで写真家が遠ざかりつつある (または遠ざかるべきである) テクノロジーです。 人工知能 どこでも作られています。はい、それには Apple の作品も含まれます 遊び場 アプリ、 画像生成器 同社はまた、これを披露しました WWDC基調講演。

ただし、生成 AI は、テキスト プロンプトから作成された完全な画像を意味する必要はありません。被写体の足元近くのゴミを消去するなど、選択的な領域に適用すると、生成 AI は、写真家が Photoshop などのアプリで時間をかけてレタッチするピクセルを置き換えるという単純な作業の一部を実行できます。 Google Pixel スマートフォン 魔法の消しゴムに似たツールが含まれています。

空間リフレーミングは、撮影した実際の写真を向上させるためにテクノロジーをどのように使用できるかを示す好例です。

空間フレーミングがどのように機能するか

アップルの 空間イメージ このテクノロジーは人工知能を使用して平面画像の奥行きを決定し、携帯電話を傾けたり画像内で表示したりすると反応する 3D 効果を与えます。 ビジョンプロヘッドフォンたとえそれが空間像として捉えられなかったとしても。深みを与えることができる iPhone ロック画面の画像も。

正直、エフェクトの質はかなり良いです。写真の被写体と背景の分離は通常、不快なものではなく、「切り取られた」ように見えることもありません。しかし、これは主に iPhone の巧妙なギミックです (私は iPhone を持っていません) ビジョンプロ この環境で体験してください）。

Spatial Framing はこのテクノロジーを利用して便利にします。メインのデモで示されているように、画像をドラッグしてショットの視点を調整できます。物理的に横に一歩を踏み出したり、カメラの位置をより良い角度に変更したりすると、背景が調整されます。

Adobe Lightroom などの画像編集ソフトウェアを使用すると、画像全体の平面を調整し、中心軸を中心に回転させて限定的なリフレーミングを実行できますが、画像の歪みが発生します。

写真を再構成した後、写真アプリは生成人工知能を使用してエッジの周囲のすべての領域を塗りつぶします。

Apple は、デバイス内の空間モデルを使用して奥行きを決定し、独自のプライベート クラウド コンピューティング アーキテクチャを使用して画像作成を処理していると述べています。

Appleのカメラおよび画像ソフトウェア担当ディレクターのAlok Deshpande氏は、「視点が変わった隙間を埋めるために新しいコンテンツを生成しているだけだ」と語った。 「これにより、再フレームされた画像が元のシーンと一貫性を保つことが保証されます。」

結果は、写真を撮ったときに移動したい場所からの写真です。

編集された写真が本当に表示されているのと同じくらいきれいかどうかはまだわかりません。既存のものを使うこともあります クリーン 画像では機能しますが、生成されるピクセルの品質に関しては、当たり外れが大きくなる可能性があります。 iOS 27 で新しいイメージング モデルが約束されているので、編集された写真が写真家なら誰でも誇りを持って共有できるものになることを願っています。おそらくギャラリーやコンテストではなく、非公式に友人と共有したり、ソーシャル メディアで共有したりすることでしょう。