
AI の修正が堂々巡りするのは、「もっと洗練させて」が比べられないから
AI に手直しを頼むほど遠ざかっていくとき、たいていの原因はプロンプトの出来ではなく、違いの見えないフィードバックにある。「もっと自然に」「もっと洗練させて」には十通りの解釈がある。毎回伝えるのは三つだけにする。残すもの、目に見える一つの変更、触れてはいけない部分。そして AI に二つの版を出させて比べ、どの版も残しておく。
tag
同じトピックのミニクラスをまとめて読み、最新記事から文脈を補えます。
lessons
タグ導読
このタグは同じ細かな主題のミニクラスを集めています。まず最新の記事を読み、カテゴリーと関連リンクで文脈を補えます。

AI に手直しを頼むほど遠ざかっていくとき、たいていの原因はプロンプトの出来ではなく、違いの見えないフィードバックにある。「もっと自然に」「もっと洗練させて」には十通りの解釈がある。毎回伝えるのは三つだけにする。残すもの、目に見える一つの変更、触れてはいけない部分。そして AI に二つの版を出させて比べ、どの版も残しておく。

Google の AlphaEvolve のようなツールは、大量のコードの版を自動で作り、最も点数の高いものを選ぶ。見ているのは評価プログラムが測れるものだけで、測られていない条件は犠牲になりうる。任せる前に、基準、点数、破ってはいけない制約、停止条件、承認する人を書き出しておく。

Reddit のようによく読まれるページに 13 語ほどの文を足すだけで、ディープリサーチ型の AI が三〜五割の報告で攻撃者の推したい製品を引用した、という研究がある。AI が付ける出典は、どこで読んだかを示すだけで、内容が確かだとは示さない。判断に使う結論には、誰にも書き換えられない独立した出典が少なくとも一つ要る。

Anthropic が公開した社内事例では、同じ Claude でも、データソースと指標定義が整理されていなければ正答率は 21% 以下、整理後は 95% 超、1 か月保守しないと約 65% まで落ちた。AI に数字を調べさせる前に、ソースを指定し、定義を書き、保守する人を決める。

英国内務省は、顔から年齢を推定する AI で庇護希望者の年齢判断を助ける試験を進め、最後は必ず職員が決めると強調している。だが調査報道によれば、この仕組みは未成年を成人と見なしがちで、一部の集団では誤差がさらに大きい。AI の判断が人の扱いを変えるなら、誰が覆せるか、どんな証拠が要るか、本人が知っているかを先に設計しておく。

AI を使う人は増えたが、AI の進歩が速すぎると感じる人も同じくらい多い。利用率の上昇は信頼の裏づけではない。AI 機能の普及を急げるかは、使わない選択、AI がしたことの取り消し、失敗時に人へつなぐ道があるかで決まる。

AI の記憶機能は、利用者が以前口にした誤った考えを背景として保存し、その後の答えをその方向に寄せやすくすることが研究でわかった。書式の好みは安心して覚えさせてよいが、大事な判断の前には、AI に使った記憶を並べさせ、「あなたの過去の考え」を証拠から外させる。

AI サービスの障害は短いこともあるが、流れが止まる時間は障害よりも長くなりがちだ。AI を日々の仕事に組み込む前に、AI なしでの最小限の成果物を決めておく。元データは AI の外に置き、誰が切り替えを決めるかを決め、外への操作の前で止められるようにする。

YouTube、Meta、TikTok はいずれも AI 生成コンテンツにラベルを付け始めたが、ラベルが伝えるのは AI で作られたかもしれないということだけで、注意力を節約してはくれない。質の低い情報を減らしたいなら、「AI 製か」ではなく「出典はあるか、判断に責任を持つ人はいるか、限界は示されているか」を問い、それに沿って自分の情報の入口を整える。

「これは偽」と何度も書いた文書でモデルを微調整しても、モデルはその偽の主張を事実として覚えうる、という研究がある。比較的正しく学べたのは、「彼は勝っていない」のように否定を文そのものに入れたときだけだ。誤ったデータを本当だと思わせないには、真偽の状態をシステムが読める欄に置くか、書き換えるか、取り除く。横の一言の警告に頼らない。