“創造者、あるいは破壊者か”自動カラーリングAI: makako

シンチャオ! お久しぶりです!最近Pythonを勉強し始めたCodyです!

今回はグミベトナムの製作したAIについて書いていこうと思います!google の提供する機械学習ライブラリ:TensorFlowを利用して、画像着色系のAIをつくりました。

手前味噌ながらこのAIにはかなりポテンシャルを感じています・・・!
サーバのスペックの問題で、まだ誰でも触れるデモというものにはなっていないのですが、後日アップロードしていこうと思っています!

目次

1.概要

2. 技術的背景

3. トレーニングと結果

4. 今後の課題

5. まとめ

1. 概要

まず、makakoの概要について話していこうと思います!

製作したAIの名は”makako” = Manga Character Colorist. それぞれの頭文字を取りmakakoと命名しました。一言でいえば白黒の線画をアニメ調に塗色してくれるAIです!

例を一つ出すとこういった具合です。

まだベータ版といったところですがそれでもなお、いい具合に着色してくれています!特徴としては淡い水彩画風のタッチになることです!

この技術を応用していけば、読みたい白黒漫画がフルカラーになるといったことも可能です!マンガ業界やアニメ業界に激震が走りそうですね。。。

 

makakoはイラストのカラーリングをするという点で創造者であり、既存の業界構造をディスラプトするポテンシャルを持っているので破壊者でもある、と考えています。それが今回のタイトルを付けた理由でもあります(笑)

2. 技術的背景

次にmakakoの技術的な情報について話していこうと思います!

・言語:Python
・機械学習ライブラリ:google のTensorFlow
・アルゴリズム:U-Net
・学習に使ったマシン:hp製のZ840

となっております。

ライブラリには機械学習界隈では有名なTensorFlowをメインに使用しており、アルゴリズムに関してはU-Netを使用しています。U-Netは16層の畳込みレイヤーを持つニューラルネットワークの一種です。

開発者によると、順伝播してくる情報に加えて、エンコーダの中間層の出力も混ぜることで、より精度の高い特徴量の抽出、画像作成が行えるそうです。ええ、文系の自分にはよくわかりません(泣)

重要な点としては、今回のような画像生成系のAIにはこのモデルはぴったりだということです!

3. トレーニングと結果

さて、次はAIのトレーニングとその結果について話していこうと思います!

今回はデータセットしてカラーと白黒の画像を対にして、カラーの画像を教師データとして学習させました。

このようなイメージです。

 

 

画像を集め、フォトショップで背景画像をカットし、キャラクターだけが存在する画像を教師データとしています。こうした画像を400枚ほど用意し、学習させました。

400エポック(どれだけ学習したかの単位)の学習の後得られた結果が以下です。

 

 

かなりいい具合に着色してくれているのではないでしょうか!?教師データの質や数が十分とは言えない状態でしたがここまでの完成度を誇ることができました。

[番外編]
番外編(遊び)としてちょっとAIにいじわるをしてみました。何をしたかというと、教師データにはない動物の画像や図形の画像を着色させるということです。

なかなか興味深い結果ではないでしょうか?
データセットの中に動物の画像は入れていなかったのですが、かなり自然に着色しています。

また図形の方も目と口を認識して色を塗り分け、髪と首を着色しようとしているのがわかります。

クマの画像に関してはどうしてこのように着色できたのは謎ですが、makakoのポテンシャルが垣間見えた気がします。

4. 今後の課題

次に今後の課題について話していこうと思います!

makakoの現時点での欠点は以下の点です。

・アップの絵に弱い
・線の描き込みが少ない絵だと色が滲む
・背景がかけない
・固定解像度(256 x 256) の画像しか変換できない

以上の4点が課題となっています。これからの改善策としては

・教師データを増やしてアップの絵や、描き込みの少ない絵にも対応できるようにする
・背景は別レイヤーして、背景専用のAIをつくる
・マルチ解像度に対応できるようにコードの書き換え

となっています!
まだまだ改善の余地はありますが、makakoの製作期間はたったの2週間だったのでこれからもハイスピードに改善していけると思われます!

5. まとめ

さて今回はグミベトナム製作の自動カラーリングAI:makakoについて書きました。漫画、アニメ業界を揺るがしかねないmakakoはいかがでしたでしょうか?

個人的な所感としては、短い製作期間と不十分なデータセットでここまでのクオリティなのは悪くないと思いました。

このAIに興味を持っていただき、データセットあるよ!という方や、こういった方向に使えないか?という方がいらっしゃいましたらぜひお問い合わせください!

それではまた!

目次に戻る

ブログ最新

We are providing high skilled and quality web based and open sourced system development service at our Vietnamese offshore centre.
At the same centre, there are also various services for software/system maintenance, software product development and web

グミベトナムは情報技術の分野で10年以上の経験があり、顧客の要求を満たすことに向けしっかり準備ができており、より高品質で完全かつ多様なサービスをますます提供することを誇りに思っています。 2023 年 10 月以降、企業向けのデジタル テクノロジー ソリューションの提供に加え、ベトナム市場に関心を持つ投資家に仕えるために高品質なサービスを提供することで事業範囲を拡大してきました。以下のような多くの新しいサービスについてベトナム市場への投資を希望するお客様にお知らせできることをうれしく思います。 最適な経営管理サービス 税務と会計 給与と人事管理 政策と制度の策定 多様なレンタルオフィスの形状: バーチャルオフィス、コワーキングスペース、パッケージオフィス、会議室などの選択があります。 サポートのサービスには、請求書の発行、関連取引の報告、外国投資報告書の作成と提出、外国人労働者のビザ、外国人労働者の労働許可が含まれます。 ビジネス ソリューションおよび投資ソリューションのご提案 ベトナムにおける外国投資ソリューション 企業の構造と管理 税務コンサルティングと税務計画 会社設立 有限責任会社を設立するサービス 株式会社を設立するサービス ベトナム法における駐在員事務所を設立するサービス 家庭用ビジネス グミベトナムは、サービス品質をさらに向上させ、多様な要求を満たすよう努力して参りますので、今後ともご愛顧を賜りますようお願い申し上げます。 サービスの詳細については、当社の Web サイト (https://gumiviet.com/vi/trang-chu/) をご覧いただくか、電子メール (contact@guiviet.com) にてお問い合わせください。 お客様からの多大なるご支援に心より感謝申し上げます。

お客様各位 建国記念日の振替休日に伴う休業のお知らせ 平素格別のお引き立て頂きまして、誠にありがとうございます。 私どもグミベトナムの休業日(ベトナム建国記念日の振替休日)について、以下のとおりご案内させて頂きます。 休業日: 2023年9月1日 (金)と2023年9月4日 (月) 営業再開日:2023年9月5日(火) 休業中の間においては、弊社の営業活動やサービス提供は休止となります。何かご不明な点等ございましたら、何なりとお問い合わせ下さい。 メール: contact@gumiviet.com フェイスブック:https://www.facebook.com/gumivn/ 以上、お客様にご安心いただくために、お知らせいたしました。 どうぞよろしくお願い申し上げます。 グミベトナム株式会社!

お客様各位 *4月30日の南部解放記念日47周年と5月1日国際労働祭を機に、グミベトナムが皆様とご家族のご健康とご多幸をお祈り申し上げます。 *ベトナムの祝日による休業日(南部解放記念日と国際労働日)について、 以下のとおりご案内させて頂きます。 – 休業日:2022年4月30日(土) – 営業再開日:2022年5月4日(水) * 休業中の間においては、弊社の営業活動やサービス提供は休止となります。何かご不明な点等ございましたら、何なりとお問い合わせ下さい。 ホットライン:028-3930-2407 メール:contact@gumiviet.com ウェブサイト:https://gumiviet.com 以上、お客様にご安心いただくために、お知らせいたしました。 どうぞよろしくお願い申し上げます。 グミベトナム株式会社!

お取引先様各位 グミベトナム株式会社は、お取引先様各位に健康の願いを送りたいと思います! グミベトナム株式会社は2022年3月8日から営業許可証に住所変更について、お取引先様各位に以下のとおりお知らせいたします。 -新しい住所:290/26 Nam Ky Khoi Nghia、 Vo Thi Sau Ward、 District 3、 HCMC お客様は、新しい住所に関連して問題、請求書、契約が発生した場合が、情報にご注意してください。 どうぞよろしくお願い申し上げます。 グミベトナム株式会社! 連絡先: ホットライン:028-3930-2407 メール:contact@gumiviet.com