未来の自分のためにだらだらと見かけたものをメモしていこうと思います。

研究まとめ系

タグ分類

KichangKim/DeepDanbooru
- TensorFlow
- Danbooruから独自にダウンロードしたデータで学習？
- v3の配布モデルが性能が良いらしい(v4は軽量版)
RF5/danbooru-pretrained
- プロジェクトページ
- PyTorch
- モデル配布あり
- タグ: Danbooru2018で頻出の6000タグ
- ResNet50

jerryli27/AniSeg
- 顔、目、口、体(figure)
kosuke1701/AnimeCV
- 顔
hysts/anime-face-detector
- 顔。顔の各特徴点検出も。
PALM: the PALM Anime Locator Model
- 手の検知のためのデータセット・YOLOv3モデル
  - https://www.gwern.net/Crops#hands-download

jerryli27/AniSeg
- キャラクター
pit-ray/Anime-Semantic-Segmentation-GAN
- プロジェクトページ(日本語)
- 背景、目、顔と首、髪、その他
zymk9/Yet-Another-Anime-Segmenter
- キャラクター
lllyasviel/DanbooRegion
- DanbooRegion
- イラストを領域ごとに（自動？）分割するツールとそれによって作成されたデータセット

アニメのフレーム間を補間してFPSを上げる技術。

youyuge34/PI-REC
- 手描きの線画と色ヒントを入力に生成する
diva-eng/stylegan-waifu-generator
- StyleGANによるアニメキャラの顔画像生成
- 追記：事前学習モデルをまわすにはrosinality/stylegan2-pytorchをcloneしてパスを通す必要がありました。
- 以下は実際にこの事前学習モデルによって生成されたイラストです
Extended StyleGAN2 Danbooru2019 by Aydao
- Danboor2019データセットによりStyleGAN2モデルを学習。モデルの大規模化や正則化を弱めるなどの工夫をしている
- https://www.gwern.net/Faces#extended-stylegan2-danbooru2019-aydao
- This Anime Does Not Existで利用されているモデル

DwangoMediaVillage/Comicolorization
- 白黒の漫画に自動的に色を付ける Comicolorization を試せる実装。
- パネル検知なども行っている。
- ユーザーが与えたキャラクターの色付け例を参考に色を付けてくれる。
- 以下の図は現論文からの引用。一番左がユーザーが与える色付け例の参考画像。

lllyasviel/style2paints
- Style2Paints
orashi/AlacGAN
- 論文: User-Guided Deep Anime Line Art Colorization with Conditional Adversarial Networks (Y. Ci, MM 2018)
yliess86/PaintsTorch2
- PaintsTorch2
- 論文: PaintsTorch: a User-Guided Anime Line Art Colorization Tool with Double Generator Conditional Adversarial Network (Y. Hati, CVMP 2019)
  - データセット生成に関する記述
    - 線画はExtended Difference of Gaussianを利用してカラーのイラストから生成。ハイパーパラメータは $\gamma=0.95, \phi=10^9, k=4.5, \epsilon=-0.1, \sigma\in\{ 0.3;0.4;0.5 \}$
[論文: User-Guided Line Art Flat Filling with Split Filling Mechanism (L. Zhang, CVPR 2021)]
- 線画が与えられたときにflat color (色の下塗りというべきか？)を塗るタスクを解いている

venture-anime/cartoongan-pytorch
- CartoonGANを試せる実装
- 数種類のスタイルが用意されている？
- 以下の図は現論文からの引用。一番右がCartoonGANによる出力。
SerialLain3170/KawaiiGenerator
- 参照キャラの髪の色などに合わせて入力画像を変換するツールが公開されている。