AIがかいた絵で、手の指がおかしくなるのはなぜ?

コハク
コハクAIのきれいな絵、よく見ると指の数がふしぎ……。どうして手だけ苦手なのでしょう?
30秒でわかる答え
コハク手は、小さいのにとても複雑な形をしているからですのよ。

手は、絵の中では小さく写ることが多いのに、指が1本ずつ別々に曲がり、形や向き、物の持ち方もさまざまで、体のほかの部分にかくれることもあります。このように複雑な手を、画像と文章から学ぶのが難しいため、指の数がちがったり、ありえない向きに曲がったりすることがある、と研究者は説明しています。

コハク
コハクそれでは、くわしく解説していきますわね。
本物の人の手。左は手のひら、右は手の甲
本物の人の手(左が手のひら、右が手の甲)。指は1本ずつ別々に曲がります。写真:Evan-Amos / CC BY-SA 3.0 / ウィキメディア・コモンズ

雑音から少しずつ絵を作る

絵を作るAIの多くは「拡散モデル」というしくみを使っています。NVIDIA(コンピューター部品の会社)の技術解説によると、学習では、画像に少しずつ雑音(ノイズ)を加えてこわしていき、その逆にノイズを取りのぞく練習をします。絵を作る時は、テレビの砂あらしのようなノイズだらけの画像から始めて、ノイズを少しずつ(たとえば1回に2%ずつ)取りのぞくことをくり返します。どんな絵ができるかは、学習に使った画像によって決まります。

図:拡散モデルが絵を作るまで
はじめはノイズだらけの画像ノイズを少しずつ取るこれを何度もくり返す絵ができあがる

手によく出るまちがい

2024年に発表された研究によると、文章から画像を作るAIは、本物の写真のような人の絵をかけるのに、手になると不自然になりやすいそうです。よくあるのは、指の数がちがう、手の形がいびつになる、指がありえない向きに曲がる、物の持ち方がおかしい、といったまちがいです。

手が難しい理由

研究者は、手が難しい理由として次の点を挙げています。手は画像の中で小さな部分しかしめないのに、指は1本ずつ別々に、いろいろな角度に曲がります。手の形や大きさ、向きもさまざまで、体のほかの部分にかくれることもあります。さらに、物の大きさや形によって、つかみ方も大きく変わります。何百万枚もの画像で学習したAIでも、手はうまくかけないことがあるのです。

図:手が難しい理由
指が多すぎるAIの絵の手と、つまむ・開く・物でかくれるといった本物の手のいろいろな形
  1. 1指の数がおかしい、AIがかいた絵の例
  2. 2物をつまむ手
  3. 3指を開いた手
  4. 4物で一部がかくれた手
  5. 5絵の中では小さく写る手(拡大)
コハク
コハク毎日使っている自分の手が、そんなに複雑だったなんて、少しおどろきますわね。

手を直すための研究

この研究では、まず文章から体と手の3Dの形や関節の位置を作り、それを手がかりにして絵を作る方法が考えられました。このように手のしくみを表すデータを使うと、より自然な手がかけることが実験で示されています。ただ、手の表し方を絵を作るしくみにうまく組みこむ方法は、まだ研究が続いている課題です。

もっと知りたい

  • 拡散モデルは、文章から画像を作る「Stable Diffusion」というしくみの中心にも使われています。
  • ふだんの文章(指示)には、手のポーズまでは書かれていないことが多く、そのことも手の絵を難しくしている、と研究者は指摘しています。
コハク
コハク小さく写るのに、指が別々に曲がって、持ち方もさまざま。だからAIには手が難しいのですわ。直すための研究も続いていますのよ。

3択クイズで確かめよう

コハク読んだことを思い出して、ひとつ挑戦してみてくださいませ。

AIが手をかくのが難しい理由は?

答えを見る
  1. 手の色がかきにくいから
  2. 手の写真が全くないから
  3. 小さく写るのに動きが複雑

小さく写るのに動きが複雑 手は画像の中で小さな部分しかしめないのに、指が1本ずつ別々に曲がり、形や向き、物の持ち方もさまざまだからです。

参考資料
  1. HanDiffuser: Text-to-Image Generation With Realistic Hand AppearancesCVPR 2024(Computer Vision Foundation 掲載の査読論文)(英語)
  2. Generative AI Research Spotlight: Demystifying Diffusion-Based ModelsNVIDIA Technical Blog(英語)
  3. Explained: Generative AIMIT News(マサチューセッツ工科大学)(英語)

内容は 2026-10-03 時点で上の資料を確認して書いています。研究が進んで説明が変わることもあります。写真のクレジットは各写真の下にあります。

次の雑学 ▶

テクノロジースマホの電池はなぜだんだん持たなくなるの?新品の頃より、電池の減りが早くなった気がする…そんな経験はございませんか?
NANI?! どうぶつ図鑑
好奇心の森の本、Amazonで発売中NANI?! どうぶつ図鑑

びっくりネタ40こを、大きな写真と短い文で。子どもと一緒に読める雑学図鑑です。Kindle Unlimitedなら読み放題で読めます。

Amazonで見る