制作時間は半分になった。それだけで喜んでいませんか？

AIクリエイティブの成果は、制作時間や本数だけでは判断できません。何を速くしたのか、その結果として顧客の反応や事業の判断がどう変わり、次の制作に何が残ったのか。AI導入を単なる効率化で終わらせないための評価方法を考えます。

生成AIによって、コピーや画像、企画のたたき台を短時間で制作できるようになりました。制作時間が半分になり、一日に検討できる案も増えた。それ自体は、間違いなく前進です。

ただし、クリエイティブの成果まで二倍になったとは限りません。

AI導入の効果は、制作速度だけでは判断できないからです。速くなった工程の先で、顧客の反応がどう変わり、社内の判断がどれだけ良くなり、次の制作に何が残ったのか。そこまで見て初めて、AIが事業に与えた価値を評価できます。

AIが減らしたのは、時間か。それとも仕事か

生成AIが仕事を速くすることは、研究でも確認されています。

顧客対応業務を対象にした研究では、生成AIの支援によって生産性が平均で約14％向上し、経験の浅い従業員ほど大きな効果が見られました。顧客の反応や従業員の定着にも、良い変化が確認されています。NBER「Generative AI at Work」

経営コンサルタントを対象にした別の実験では、AIの能力が合う課題において、完了できた作業が12.2％増え、所要時間は25.1％短縮され、回答品質も平均32％向上しました。

注目したいのは、その続きです。AIの能力範囲から外れた課題では、支援を受けた人の成績が悪化しました。文章が整い、説明に説得力があるように見えても、結論そのものが誤っている場合があったのです。Organization Science掲載研究

速く、きれいにつくれることと、正しい成果へ近づくことは同じではない。クリエイティブの現場にも、そのまま通じる話ではないでしょうか。

「制作本数」が増えた会社に、何が残っているだろう

以前は一週間に10案だった広告を、AIによって30案つくれるようになったとします。制作効率だけを見れば、申し分のない成果です。

その30案が同じ発想を言い換えただけで、顧客理解も判断材料も増えていなかったらどうでしょう。公開後の結果が一括して報告され、どの仮説が効いたのか分からないまま次の制作へ進めば、会社に残るのは大量の制作物と処理件数です。

本来、案を増やす意味は、選択肢を眺めることではありません。異なる仮説を試し、顧客が何に反応したのかを知るためにあります。

制作本数が増えたのに、学習できる量は変わっていない。こうなると、AIは制作を効率化していても、事業を前進させているとは言いにくいのです。

AI活用を、事業目的に沿って評価する

AI活用のKPIを決めるとき、最初に考えたいのは「AIが何をできたか」ではなく、「この制作で何を変えたかったのか」です。

認知を広げる広告と、問い合わせを獲得する広告では、成功の定義が異なります。ブランドへの理解を深めたい仕事なら、短期的なクリック率だけで判断することもできません。

制作前から公開後まで、次のように問いを置くと評価しやすくなります。

段階	確認する問い
制作前	今回、顧客のどんな認識や行動を変えたいのか
制作中	AIによって、どの工程と判断が改善されたのか
公開後	目的に対応する反応は変化したか
次回	今回得た知見を、次の制作に再利用できるか

すべてを数値化する必要はありません。判断の理由や、検証できなかった点を記録するだけでも、制作は単発の納品から組織の学習へ変わります。

ここで時間短縮は、成果ではなく成果を生むための条件として扱われます。速くなったことを軽視するのではなく、その時間がどこへ移動したかまで見る、ということなのですよね。

浮いた時間の行き先が、AI導入の質を決める

AIで二時間短縮できたとして、その二時間をさらに多くの案をつくることだけに使えば、組織は制作量を増やせます。

顧客の声を読み直す時間に充てれば、次の仮説が変わるでしょう。公開後の反応を制作担当者と営業担当者が一緒に検討できれば、「なぜ効いたのか」という理解も残ります。

効率化によって生まれた余白を、観察や検証へ戻せるか。AIを単なる量産装置にする会社と、事業を学習させる道具として使える会社の差は、ここから生まれると考えます。

NISTも、AIの評価について、モデル単体の性能だけでなく、現実に近い状況で人が使用した際の影響を見る必要性を示しています。2025年に公表されたARIAの試行では、専門家による評価と実際の利用者による評価を組み合わせ、利用状況を含めてAIの妥当性を測っています。NIST「ARIA Pilot Evaluation Report」

クリエイティブも、生成した瞬間には完成していません。顧客に届き、反応が生まれ、社内に知見が戻ってくるところまでが仕事です。

明日から変えるなら、制作依頼書に一行加える

大がかりな評価制度を最初からつくる必要はありません。

この制作によって、顧客の何を変えたいのか。

次の制作依頼書にこの一行を加え、公開後、実際に何が変わったかを同じ場所へ書き戻します。予想が外れた場合も、それは失敗というより次回の判断材料です。

etomojiでは、AIを制作速度だけで評価するのではなく、目的の整理から制作後の検証までを一つの流れとして捉えています。AIが案をつくり、人が判断する。その判断が次の制作に受け継がれてこそ、効率化は競争力へ変わります。

制作時間が半分になった。その空いた半分で、会社は何を知ることができたでしょうか。

AIクリエイティブの成果を測るなら、最後に残るべき問いはそこです。