「分かりません」が13回。AIに正確さを求めすぎたら、意味不明な記事ができた

AIが書いた1本の記事に、この4種類の言葉が合計13回出てきました。

嘘は書いていません。原本にない感情も、勝手な因果関係も足していない。正確ではありました。

でも、読者からすると、何を読まされているのか分からない。僕も読み返して、「お前、何やってんの」と思いました。

正確にするほど、本文が防御だらけになった

直していたのは、僕が運営する復縁体験談サイト「福縁クラブ」の記事です。価値観の違いで別れ、復縁した6人の体験談を使っていて、過去には16クリック・535回表示されていました。せっかく実際の体験談があるのだから、原本にないことをAIに作らせたくありませんでした。

相手の本音を決めつけない。男性全体の話に広げない。復縁できると保証しない。そこを厳しく見た結果、AIは原本に書かれていないことを見つけるたび、本文で説明し始めました。

たとえば、修正前はこうです。

ただし、この予定表で決めたのは時間と予定の扱いです。パチンコなどへの支出をどうするかは、回答に書かれていません。

この一文は正確です。ただ、この記事を開いた人が知りたいのは、価値観が違った二人が復縁後に何を変えたのか。「支出について原本に書かれていない」という編集上の事情は、その判断に使えません。僕らは、原本にないものを丁寧に説明することへ力を使いすぎていました。

同じ箇所を、最終稿ではこう直しました。

「もっと私を優先して」と言い続けるのではなく、二人の時間と一人の時間を予定にした。価値観の違いを、我慢ではなく運用の問題へ変えたケースです。

相手のパチンコ代が減ったとは書かず、原本で確認できた「二人の時間と一人の時間を予定にした」という行動だけを使いました。正確さは残したまま、読者の判断に関係しない説明を消しています。

ここでやっと、問題が分かりました。「確認できないことは書かない」だけでは足りなかったんです。AIは「確認できません」と書くことでも、その指示を守れてしまいます。

必要だったのは、原本で確認できる行動、状況、言葉を使って、読者の疑問に答えることでした。書けないことの報告は、本文から外します。

同じ失敗をしないために、次からはAIへこう渡します。

原本にない事実や感情は足さない。確認できないことを「確認できない」と本文に列挙しない。読者の疑問に関係する、原本で確認できる行動・状況・言葉だけで構成する。注意事項は、読者の判断に必要なものだけを、関係する箇所へ1回書く。

それでも「分かりません」系の文が出てきても、機械的には消しません。二つだけ確認します。

必要な情報なのに原本が足りないなら、追加で調べるか、記事で答える範囲を狭めます。読者の判断に関係ないなら、本文には出しません。

修正後の記事では、6人の体験談を「別れた原因」と「復縁後に変えたこと」で比べられる形にしました。原本にない話は足していません。そのうえで、「分かりません」「書かれていません」「確認できません」「判断できません」は13回から0回になりました。

今回の原因は、僕が「何を書いてはいけないか」ばかりを見ていたことです。「確認できた何を、読者へ渡すか」が抜けていました。

AIに正確さを求めるのは大事です。ただ、正確なだけでは記事にならない。

原本にないことは書かない。原本にあることから、読者が使える部分を選ぶ。

この二つをセットにして、ようやく読める記事になりました。

この修正を含むサイト再構築の全体は、AdSense「有用性の低いコンテンツ」で落ちて、73記事より240回答を残したにまとめています。続きはXでも知らせます。