顔画像生成

概要

事例ベースの似顔絵合成技術は，様々なスタイルの魅力的な似顔絵を生成することができるという大きな注目を集めています．本研究はクロスモーダル距離メトリックとして特徴偏差マッチング法を用いた新しい事例ベースの似顔絵合成システムを提案する．似顔絵の例から直接類似のコンポーネントを検索するために，特徴自体の値ではなく，異なる特徴空間にわたる平均特徴からの偏差値を使用します．伝統的な事例ベースのシステムと比較して，提案されたシステムはペアの写真 – 似顔絵の事例データベースを必要とせずに様々なスタイルの似顔絵を生成することができる．新しく設計された機能は，入力ポートレート画像内のヘアスタイルおよび顔の構成要素の視覚的特徴を効果的に取り込むことができる．さらに、このシステムは個々の顔の構成要素の誇張を制御し，ユーザの異なる好みを満たすためにいくつかの類似性に基づく候補を提供することができる．

顔画像合成は，ビデオ監視や法執行機関などの公共の安全に潜在的な用途があります．たとえば，目撃者から容疑者の肖像画を作成することは，警察が犯罪者を特定するのに非常に役立ちます．また，ロマンチックな「タイプ」の想像されたアイデアに具体的な形を与え，他の想像された顔を明確なイメージに変換するために，同様の手法を使用することができます．しかし，頭の中にあるものの説明に基づいて画像を描くのは，大多数の人にとって簡単な作業ではありません．この研究では，ユーザーの心の中の対応する画像から顔の画像を作成することができるユーザーフレンドリーなシステムを提案します．

発表文献

  1. Yixuan Ju, Jianhai Zhang, Xiaoyang Mao, Jiayi Xu, “Adaptive semantic attribute decoupling for precise face image editing,” The Visual Computer, Springer, Vol.37, pp.2907-2918, 2021-7.
  2. Jiayi Xu, Xinying Xue, Yitiao Wu, and Xiaoyang Mao, “Matching a composite sketch to a photographed face using fused HOG and deep feature models,” The Visual Computer, 2020-9.
  3. Caie Xu, Ying Tang, Masahiro Toyoura, Jiayi Xu, Xiaoyang Mao, “Generating Users’ Desired Face Image Using the Conditional Generative Adversarial Network and Relevance Feedback,” IEEE Access, 2019-11.
  4. Honglin Li, Masahiro Toyoura, Xiaoyang Mao, “Caricature Synthesis with Feature Deviation Matching under Example-Based Framework,” The Visual Computer, Vol.35, No.5, pp.653-666, 2019-3.
  5. Caie Xu, Shota Fushimi, Masahiro Toyoura, Jiayi Xu, Xiaoyang Mao, “Synthesizing Imagined Faces Based on Relevance Feedback,” Transactions on Computational Science, Vol.32, pp.90-105, 2018-3.
  6. Caie Xu, Shota Fushimi, Masahiro Toyoura, Jiayi Xu, Honglin Li, Xiaoyang Mao, “Synthesis of Facial Images Based on Relevance Feedback,” Cyberworlds, pp.1-4, 2017-9.
  7. Honglin Li, Masahiro Toyoura, Kazumi Shimizu, Wei Yang, Xiaoyang Mao, “Retrieval of Clothing Images based on Relevance Feedback with Focus on Collar Designs,” The Visual Computer, Vol.32, No.10, pp.1351-1363, 2016-10.
  8. Honglin Li, Wei Yang, Hongcang Sun, Masahiro Toyoura, Xiaoyang Mao, “Example-based Caricature Synthesis via Feature Deviation Matching,” Computer Graphics International, pp.81-84, Article S8, 2016-6.
  9. Wei Yang, Masahiro Toyoura, Jiayi Xu, Fumio Ohnuma, Xiaoyang Mao, “Example-Based Caricature Generation with Exaggeration Control,” The Visual Computer, Vol.32, No.3, pp.383-392, 2016-3.
  10. 孫 宏昌，楊 薇，豊浦 正広，大沼 富美男，茅 暁陽，“特徴偏差の対応付けによる事例ベース似顔絵合成”，Visual Computing/グラフィクスとCAD合同シンポジウム，Article 2，2015-6．
  11. 孫 宏昌，楊 薇，豊浦 正広，茅 暁陽，“事例ベース似顔絵の生成”，画像電子学会ビジュアルコンピューティングワークショップ，Article 10，2014-11．
  12. Jiayi Xu, Wei Yang, Xiaoyang Mao, Masahiro Toyoura, Xiaogang Jin, “A Study on Perceived Similarity between Photograph and Shape Exaggerated Caricature,” Cyberworlds, pp.213-220, 2014-10.
  13. Wei Yang, Kouki Tajima, Jiayi Xu, Masahiro Toyoura, Xiaoyang Mao, “Example-Based Automatic Caricature Generation,” Cyberworlds, pp.237-244, 2014-10.
  14. Shota Fushimi, Kazumi Shimizu, Masahiro Toyoura, Motonobu Hattori, Xiaoyang Mao, “Semiautomatic Synthesis of Face in Mind,” Image Electronics and Visual Computing Workshop, 4B-1, 2014-10.
  15. 伏見 翔太，清水 和美，豊浦 正広，服部 元信，茅 暁陽，“想像上の顔の半自動作成”，Visual Computing/グラフィクスとCAD合同シンポジウム，2014-6．
  16. 田島 洸城，楊 薇，豊浦 正広，茅 暁陽，“見た目の特徴の誇張による事例ベース似顔絵生成”，Visual Computing/グラフィクスとCAD合同シンポジウム，Article 32，2013-6．