ジャギーな低解像度を高解像度に補完する技術を公表

Google Brain（Googleの人工知能チーム）

Googleの人工知能研究チーム「Google Brain」が、低解像度の画像から高解像度の画像を生成する技術「Pixel Recursive Super Resolution」を発表しました。

8×8ドットに圧縮された画像から、よりくっきりと細部が描きこまれた元の画像の予想図が成果として公開されています。

低解像度でジャギーな画像を高品質な見かけの画像にアップグレードする超解像技術はディープラーニング（機械学習）の応用分野として定着しており、それ自体に新規性はありません。

Googleもリアルタイムで高解像度化する新技術RAISR（Rapid and Accurate Image Super-Resolution）を公開済みで、写真をきれいに拡大するサービスもGoogle以外ですでにスタートしています。

この新技術の画期的な点は、画像の「補完」というよりは「復元」の域に達したところです。
8×8ドットとモザイク並みにジャギーに圧縮された画像から、「元々はこうだったであろう」画像を推測して出力。32×32に高解像度化された画像と圧縮前のソース画像が並べられていますが、目元など細かい印象の違いはあるものの、おおむね同一人物と言って良さそうな復元ぶりです。

この技術は、二つのニューラルネットワーク技術の合わせ技です。一つは他の高解像度画像を8×8に圧縮したデータ群とマッチングする「Conditioning network」で、もう一つは画像の詳細を描き込んでいく「PixelCNN」。
前者でドットと色からパターンを判別し、後者で解像度に足りない描き込みを補完する。たとえば眉だと識別されれば、茶色の画素で隙間を満たしていくという段取りです。