機械学習により白黒画像を自動でカラー化するシステムの開発。
物体領域識別にRCNNを用いることで、物体の存在範囲を特定し、
人間にとって意味の大きい箇所に対して彩度の重みを高めたカラー化を行い、高精度のカラー化システムを実現しました。
RCNNは入力画像を複数の領域に分割し、それぞれの特徴を抽出することで物体の位置や形状を効率的に特定。人物や建物などの重要な領域を正確に識別。
人物や建物などの重要な領域に対して彩度の重みを高めることで、リアルで目を引くカラー表現を生成。背景には控えめな彩度でバランスを保持。
色空間にはLabを使用し、緑-赤成分(a)、青-黄成分(b)の2次元情報から明度(L)を推測。より自然で正確な色彩表現を実現。
PSNRやSSIMといった定量的な評価手法を通じて品質確認。2021年当時で最高水準のカラー化精度を実現しました。
物体領域識別にRCNN(Region-based Convolutional Neural Network)を採用し、画像内の重要な物体を特定することで、より自然で意味のあるカラー化を実現。 RCNNは入力画像を複数の領域に分割し、それぞれの特徴を抽出することで物体の位置や形状を効率的に特定します。
特に、人物や建物などの重要な領域に対して彩度の重みを高めることで、リアルで目を引くカラー表現を生成します。 カラー化プロセスでは、物体領域の種類ごとに色相や彩度を調整し、リアルな印象を与えました。重要な領域には高い彩度を与え、背景には控えめな彩度を設定することでバランスを保ちました。
歴史的な白黒写真の復元、古い映画のデジタルリマスター、アーカイブ資料のデジタル化など、 様々な分野で活用可能な技術です。文化財の保存や教育分野での活用も期待されています。