AIの答え、どこまで信じる？15分で作る検証ログのすすめ

1. 出力を四種類の主張へ切り分ける

検証の最小単位を、確認できる一文にします。日付、人数、制度、製品仕様は事実、合計や割合は計算、発言や文章の抜粋は引用、施策や表現は提案として印を付けます。流暢な段落の中に種類が混在している場合、文章が自然でも検証済みにはしません。主語と対象期間が欠けた主張も保留にします。

次に重要度を付けます。契約、金額、安全、個人情報、資格要件、応募条件へ影響する主張は、誤りの影響が大きいため公開や送信を止めて確認します。表現の好みと事実誤認を同じ修正欄へ入れず、どの判断を誰が行ったかを分けます。AI自身に正しさを自己評価させた結果は独立した確認になりません。

• 事実・計算・引用・提案
• 影響度で確認順を決める
• AIの自己評価を証拠にしない

2. 根拠欄はURLだけで終わらせない

検証ログには、主張、根拠の提供者、資料名、該当箇所、公開日、確認日、採否、修正内容を置きます。検索結果の要約や別サイトの孫引きではなく、制度なら所管官庁、仕様なら提供企業、統計なら作成機関へ戻ります。URLが開けても主張を直接支えているかを読みます。対象国や版が違う資料は根拠に混ぜません。

計算は入力値、単位、式、丸め方を残して再計算します。引用は原文の意味を変えていないか、前後の条件を外していないかを確認します。提案は事実のように書かず、期待する効果、前提、止める条件を添えます。確認時点が古くなったログは、過去に合格したからと自動で再利用せず再確認へ戻します。

3. 三つのサイトで検証材料を集める

manapickでは同じ作業を人が行う実演を見て、AI出力と工程が一致するかを自分の素材で比べます。manapick AIでは、利用中のAIの公式情報、得意な用途、制約を読みます。manapick licenseでは、資格の実施団体と公式要項を確認します。受験条件や費用は、公式要項の記載を使います。

例えばAIが学習計画を作った場合、動画で実際の作業量を確かめ、AIの利用条件を読み、資格要項の科目と日程を公式ページで照合します。三サイトの結論が違うときは多数決にせず、一次情報の対象と確認日を優先します。リンク先が更新された場合に追跡できるよう、ログには閲覧日を残します。

4. 公開前の合格条件を固定する

公開条件は、重要主張に一次情報がある、計算を別の方法で再現した、引用を原文で確認した、個人情報と機密を除いた、編集者がリンクを開いた、のように観察可能な形にします。『だいたい正しい』『違和感がない』は合格条件にしません。未確認欄があれば、その主張を削るか確認中と表示します。

検証ログはAIを罰する記録ではなく、人の判断を再現するための道具です。出力が毎回変わる場合はモデル名、日付、入力の目的も記録しますが、機密プロンプトを共有場所へ残しません。自動更新の結果を直接公開せず、人が変更点を読み、採用を明示した版だけを利用します。