AIツールが白黒写真を自動でカラー化

スウェーデンの機械学習研究者エミール・ウォールナー氏は、人工知能を使って白黒写真を自動的に色付けする無料のウェブツール「 Palette.fm」をリリースした。写真がアップロードされると、ユーザーはカラー フィルターを選択したり、テキストの説明を書き込んで色を調整したりできます。

Palette.fm は、写真やイラスト内のオブジェクトの色のベースライン推測を決定する画像分類にディープ ラーニング モデルを使用しています。「私は画像とテキストを使用してぬりえページを作成する独自の AI モデルを作成しました」とウォールナー氏は Ars への投稿で書いています。「1 つのモデルがテキストを作成し、もう 1 つのモデルが画像とテキストを取得して色を付けます。」

画像をアップロードすると、サイトの洗練されたインターフェイスにより、画像に表示されているものについての大まかなキャプション (説明) が表示されます。プリセットのカラー フィルターが気に入らない場合は、鉛筆アイコンをクリックしてキャプションを自分で編集できます。これにより、テキスト ヒントで色付けモデルがガイドされます。

これをテストするために、小さなカボチャの写真を撮り、Photoshop で色を削除しました。次に、白黒バージョンをダウンロードし、Palette.fm が提供する既製フィルターの選択を試しました。適切なフィルターを見つけたら、タイトルを編集して、シーン内のオブジェクトを説明することで色を調整しました。たとえば、Palette.fm は当初、カボチャを「かぎ爪」だと考え、舗装を認識しませんでした。しかし、これらの用語をプロンプトの書面に入れると、色がより理解できるようになりました。その後、背景に「緑の葉」を追加して画像を強化しました (下の例には示されていません)。

今のところ、Palette.fmは無料サービスとして利用できるが、Wallner氏は有料オプションを追加する予定だ。このサイトは、オンラインのクラウドで画像を処理します。アップロードされた写真のプライバシーについて、Palette.fm の Web サイトには「お客様の画像は保存されません」と記載されています。しかし、他のクラウド サービスと同様、個人の写真に関しては、これを割り引いて考えてください。特に、Palette.fm では現在、いかなる種類のユーザー アカウント登録も必要ありません。

これまでのところ、Palette.fm は、このツールを使用して愛する人の写真や歴史的な写真などを色付けするHacker Newsの人々を魅了してきました。ウォールナー氏のカラー化技術のバリエーションも、昨年末からツイッター上のボットとして利用できるようになった。楽しくぬり絵をしてみましょう。