day17―画像を特定の雰囲気に変換するアルゴリズム

Li, Y. et al. (2018). A closed-form solution to photorealistic image stylization. arXiv preprint arXiv:1802.06474.

NVIDIAが開発した、特定の写真のスタイルに合わせて画像を変換する技術（昼間の風景写真を、夜景の風景写真に変換など）

背景

リアルな写真を変換する技術は様々ある。今回は従来よりも60倍！早く、よりリアリスティックな変換ができるアルゴリズムを開発した。

方法

画像の変換はwhitening and coloring transform(WCT) algorithmによる変換とsmoothingによって実行。

所感

建物のリアルさがすごい。従来手法では何かしらのアラがあるが、このアルゴリズムでは本物に超近い。
結果はGithubで公開している。

NVIDIA/FastPhotoStyle

実はGigazineにこの論文の要約がある。

写真の特徴を別の写真に移し替える軽量なアルゴリズム「FastPhotoStyle」をNVIDIAが開発

技術的思考を見たくて論文を読んだが、やはり専門的すぎる。しかしDeep Learning全盛時代において、それ以外の手法で結果を残すことがすごい。あと素早い。