皆さん、こんにちは！ブログ記事作成自動化プロジェクト、6日目です。
今日は、生成AIにピックアップさせる記事の数を増やした場合の検証を行いました。結果は、量産化の難しさを痛感するものとなりました…。
具体的には、ChatGPTとGeminiに、それぞれ5記事と10記事の生成を指示してみました。
- ChatGPT 5記事: https://aiwebintersection.com/2025/02/08/2025%e5%b9%b42%e6%9c%888%e6%97%a5%e5%85%ac%e9%96%8b%e3%81%aeai%e9%96%a2%e9%80%a3%e3%83%8b%e3%83%a5%e3%83%bc%e3%82%b9chatgpt-o3%e2%80%91mini/
- ChatGPT 10記事: https://aiwebintersection.com/2025/02/08/2025%e5%b9%b42%e6%9c%888%e6%97%a5%e5%85%ac%e9%96%8b%e3%81%aeai%e9%96%a2%e9%80%a3%e3%83%8b%e3%83%a5%e3%83%bc%e3%82%b9chatgpt-o3-mini/
- Gemini 5記事: https://aiwebintersection.com/2025/02/08/2025%e5%b9%b42%e6%9c%888%e6%97%a5%e5%85%ac%e9%96%8b%e3%81%aeai%e9%96%a2%e9%80%a3%e3%83%8b%e3%83%a5%e3%83%bc%e3%82%b9gemini1-5-deep-research-5%e8%a8%98%e4%ba%8bver/
- Gemini 10記事: https://aiwebintersection.com/2025/02/08/2025%e5%b9%b42%e6%9c%888%e6%97%a5%e5%85%ac%e9%96%8b%e3%81%aeai%e9%96%a2%e9%80%a3%e3%83%8b%e3%83%a5%e3%83%bc%e3%82%b9gemini1-5-deep-research-10%e8%a8%98%e4%ba%8bver/
記事数が増えるにつれて、1記事あたりの文字数が減少し、内容が薄くなる傾向が見られました。また、引用元のURLも不正確なものが多く含まれていました。特にGeminiは、ChatGPT以上にその傾向が顕著で、Gemini関連のニュースですら正しくピックアップできていません。（今日は5記事verですらいい加減な内容ですが。。。）
これは、おそらくAIモデルが一度に処理できるリソースやトークン数に上限があるため、記事数が増えると、どこかのプロセスが省略されてしまうのではないかと考えられます。
この結果から、プロンプトエンジニアリングだけでは、記事の質と量の両立は難しいと判断しました。
そこで、新たな戦略として、
- 1回の処理で生成する記事数を1～3記事に絞る
- 複数回繰り返して記事を生成する
- 生成された記事をAIでファクトチェック＆品質評価し、良い記事を選別する
という処理を自動化するプログラムを開発することにしました！
明日からは、いよいよプログラミングに挑戦です。Pythonを使って、上記の処理を実現するプログラムを構築していきたいと思います。どんな壁にぶつかるか、今からワクワクドキドキです！
コメント