ooligo
claude-skill

Claude で準備書面の引用をすべて検証する

Difficulty
中級
Setup time
45-90 min
For
legal-ops-manager · in-house-counsel
Legal Ops

Stack

出典付きの主張には 3 つの問いが立ちます。その典拠は実在するか。いまも有効な法か。そして出典は、準備書面が言わせているとおりのことを実際に述べているか。citator は最初の 2 つを出版社のコーパスに突き合わせて答えます。これは言語モデルに任せてよい仕事ではありません。3 つ目に答えるものは存在せず、いま被害の相当部分はそこに集まっています。

数字は Damien Charlotin が維持する AI Hallucination Cases データベースにあります。2026 年 8 月 19 日更新時点で、当事者がハルシネーションによる資料に依拠したと裁判所が認定した決定を世界で 1,934 件収録し、うち 1,325 件が米国です。所見がタグ付けされた 1,832 件について、データベースは個別の瑕疵を 5,748 件記録しています。捏造 3,238 件、曲解 1,538 件、虚偽の逐語引用 937 件、陳腐化 35 件です。捏造が最多の類型で、KeyCite と Shepard’s が捕捉するのはこれです。残る 2,475 件 — 全体の 43% — は、実在し有効な典拠が、それが支えていない主張のために引用されているか、含んでいない語で引用されているものです。citator はそのすべてに対して問題なしを返します。

この Claude Skill はこの 3 つ目の問いだけを確認します。ドラフトを読み、引用の出現ごとに 1 行を作り、あなたが供給した出典テキストの中から支える記述を探します。見つかればその一節を逐語のままログに書き写します。見つからなければそう述べます。モデルが見覚えのあるものから引用を確認することは一切ありません。

バンドルは apps/web/public/artifacts/citation-verification-claude-skill/ にあり、次を収録しています。

  • SKILL.md — 入力、3 パスの手法、ログの逐語サンプル、注意点を含む Skill 定義
  • references/1-source-index-template.md — 記入式の出典インデックス。出所の閉じた語彙と抜粋の規則付き
  • references/2-verification-log-template.md — 認証に耐えるログ。適用範囲の明示とレビュー担当の署名欄付き
  • references/3-status-vocabulary.md — 6 つのステータスと昇格規則、Bluebook のシグナル対応表、逐語引用の忠実性規則

使うべき場面

内容が固まったドラフトに対して、citator のパスの後、引用した典拠をすべてテキストとして取得した後、そして提出の前に走らせます。

  • AI ツールが起草に関与したあらゆる提出書面。 ABA Formal Opinion 512(2024 年 7 月 29 日)は、どのツールがテキストを生成したかにかかわらず検証義務を弁護士に置き、生成出力への無批判な依拠をほぼ過誤に等しいものとして扱います。ログは、その調査が行われたことを示す手段です。
  • AI に関する証明を求める裁判所。 2023 年 5 月、テキサス州北部地区の Brantley Starr 判事の standing order は、書面のいかなる部分も生成 AI が起草していないこと、または AI が起草した部分は従来型の法律データベースに照らして確認したことのいずれかを証明するよう弁護士に求めました。以降、数百人の連邦・州の裁判官が独自版を出しています。虚偽であれば証明自体が制裁対象になるため、記録には裏付けが必要です。
  • 書式バンクから組み立てた書面。 使い回した節は、別の記録と別の時点の法に対して書かれた pin cite を抱えています。誰も読み直さず、出現ごとの行こそが、3 ドラフト前に pin cite がずれた判例の 4 回目の使用を浮かび上がらせます。
  • safe harbor 期間中の相手方書面。 Rule 11(c)(2) は制裁申立てを提出の 21 日前に送達することを求めます。相手方の書面を同じ検査にかければ、その期間は勘ではなく裏付けのあるリストになります。
  • 記録の比重が大きい提出。 Bates 範囲や調書の page:line を根拠とする事実主張も法的典拠と同じ扱いを受けます。これは citator がまったくカバーしない、引用確認のもう半分です。

使うべきでない場面

  • citator の代わりとして。 この Skill には出版社のコーパスも、その後の取扱いのデータも、判例の実在を確定する手段もありません。毎回、先に KeyCite、Shepard’s、または同等のものを走らせてください。これは 2 回目のパスであって代替ではなく、代替として使えば、まさに捕捉すべき失敗をそのまま再現します。
  • 典拠を取得していないドラフトに対して。 読むものがなければ全行が NO-SOURCE で返り、ログは宿題リストになります。取得が仕事であり、Skill は確認です。
  • 封印中または保護命令下の資料に、保存条件を確認する前に。 Opinion 512 はその判断を弁護士に残しており、最初の貼り付けの前に行うべきものです。
  • 主張が通るかを判断するために。 検証が問うのは、書かれたとおりの主張を出典が支えるかどうかです。その主張が申立てを勝たせるかは弁護士の判断であり、そこに留まります。
  • スキャン PDF に対して。 比較は文字単位です。先にテキストへ変換しないと、実行は画像を確認していることになります。

セットアップ

  1. apps/web/public/artifacts/citation-verification-claude-skill/ からバンドルを取得し、Claude Code なら ~/.claude/skills/ に置くか、Claude のプロジェクトにアップロードします。
  2. references/1-source-index-template.md を記入します。供給する出典ごとに 1 行、それぞれに閉じたリストの provenance 値 — westlawlexiscourtlistenergovinfopacerproductionreporter_pdf — と、retrieved_on に実際の取得日を入れます。
  3. 各典拠は抜粋としてテキスト取得します。pin cite のページとその前後 2 ページです。実際の範囲を pages_included に記録します。この列は、範囲外の pin cite が NO-SOURCE で返るか UNSUPPORTED で返るかを決めます。ここを誤ることが、実在する問題を見た目のきれいなログに変える最短経路です。
  4. ヘッダーの citator_run_oncitator_tool を設定します。citator を走らせていなければ空欄にします。するとログはその事実を表に出します。レビューするパートナーが見るべきなのはその状態です。
  5. 手作業で引用確認済みの提出書面に対して一度走らせ、両者を突き合わせます。試すのは 1 点だけです。すべての SUPPORTED 行が、出典で開いて確認できる一節を伴っているかどうかです。
  6. 新しいドラフトごとに、ドラフト、出典インデックス、出典ディレクトリを渡します。未解決セクションを読み、片づけ、提出します。

Skill が実際に行うこと

3 パスで、最初の 2 つの分離が歯止めです。

パス 1 は主張テーブルを構築します。 典拠ごとではなく 引用の出現 ごとに 1 行です。引用文献一覧ツールは重複を排除しますが、その重複排除こそがこの失敗類型を隠します。5 回引用された判例は 5 つの異なる主張を支えています。判例は実在し、有効な法であり、一覧には 1 度だけ現れ、そして 4 番目の pin cite は逆のことを述べているページを指しています。典拠を鍵にした行ではそれを示せず、主張を鍵にした行なら示せます。ログは出現数を典拠数の隣に印字するので、繰り返しを黙って畳んでしまった読み取りは、静かに紛れ込むのではなく目に見えます。

パス 2 は供給されたテキストにのみ突き合わせます。 各行について、Skill は出典インデックスに指定されたファイルを開き、支える一節を逐語で、その所在表示とともに書き出します。この設計のすべては拒否規則にあります。一節がなければステータスは昇格しない。 行が SUPPORTED に達するのは、その中に一節があるときだけです。モデルはこれらの引用の多くに見覚えを示すでしょう。公開されている法を大量に読んでいるからです。しかしその見覚えはここでは無価値です。見覚えこそが、存在しない判例への自信に満ちた引用を生む当のメカニズムだからです。

パス 3 はログを書きます。 ステータス別にまとめ、未解決の行を先頭に置き、何を確認しなかったかを名指しする適用範囲の明示で始まります。

一節がすでに特定されているため、2 つの検査が同乗します。逐語引用の忠実性は意味ではなく文字単位で確認します。 意味による比較は、引用符の中の言い換えを一致と判定しますが、その言い換えこそ制裁記録に現れる虚偽引用のパターンです。意図的な改変は独立の表にまとめます。限定句を取り除く省略記号は主張そのものを変え、(cleaned up) は内部の引用符と引用文献を覆いますが書き直しを許すものではありません。シグナル対応は、実際の支持関係を導入シグナルと突き合わせます。シグナルのない引用で、出典が推論を経てしか主張を支えないものは see を必要とします。この誤り単体は制裁対象ではありませんが、曲解の類型と一緒に現れます。シグナルを要したのに与えられなかった主張は、起草者の読みと出典の文言がすでに離れている主張だからです。

実際のコスト

コストは渡す出典テキストの量に従い、抜粋が、安く済む実行と入りきらない実行の分かれ目になります。

30 ページの準備書面はおよそ 20,000 トークンです。5 ページずつの典拠抜粋を 40 件加えると約 120,000 増えるので、フル実行は入力 140,000 トークン前後、出力 4,000 から 8,000 に着地します。Claude Sonnet 5 の定価(入力 100 万トークンあたり 3 ドル、出力 15 ドル)では 1 通あたり 0.45 から 0.70 ドル、Claude Opus 5(5 ドルと 25 ドル)では 0.80 から 1.20 ドルです。

全文取得は価格よりも形を変えます。判決 40 件の全文は 600,000 トークンを超え、標準のコンテキストウィンドウには入りません。1M トークンのウィンドウは Anthropic の API の機能であり、Claude のアプリで使えるものではありません。したがって実行を分割する必要があり、分割はパス 2 が供給されたすべての出典を見たうえでステータスを付けたという保証を壊します。広く取るのが正しい場面は 2 つです。裁判所が何を 判示した かに関する主張で、訴訟の経過が pin cite から離れた位置にある場合と、ウィンドウを組む pin cite が存在しない see generally の引用です。

効いてくるコストは時間です。40 件の典拠を持つ 30 ページの書面を手作業で引用確認すると、パラリーガルまたはアソシエイトで 4 から 8 時間の仕事になります(引用ページを 1 件ずつ取得して読む前提の推計)。Skill はそれを消しません。探索を表のレビューに変えるだけで、そのレビューは依然として必要です。署名欄のサンプル確認は、一節の規則が保たれたかを試す統制であり、機械が自分の出力に対して実行できない唯一の工程です。

成功指標

  • 初回パスの未解決率 — 全出現数に対する NO-SOURCEUNSUPPORTED の合計。1 通の中ではなくドラフトをまたいで追います。取得の運用が落ち着いた後も高いままの率は、pages_included に宿った出典インデックスの問題であってモデルの問題ではなく、プロンプトを強めても動きません。
  • 典拠 1 件あたりの出現数。 どんな長さの書面でも 1.3 を下回るなら、パス 1 がすべきでない重複排除をしています。この数字は歯止めそのものの健全性チェックです。
  • 提出後の引用への異議。 目標はゼロです。1 件でも、書面ではなく仕組み全体の見直しになります。

代替案との比較

citator 単独との比較。 KeyCite と Shepard’s は、出版社のコーパスに対して機械の権威をもって実在と取扱いに答えます。その支払いは続けてください。ここにあるものは何一つそれを置き換えません。両者がしないのはあなたの文を読むことで、Charlotin のデータベースでタグ付けされた瑕疵の 43% はまさにその空白です。規則は、両方を走らせること、citator を先に、この順で。 どちらか一方だけでは書面をカバーできません。

Clearbrief との比較。 引用が実在するか、出典が主張を支えるか、覆されていないかを確認し、ハイパーリンク付きの引用文献一覧を作る Word アドインです。Solo プランは 1 ユーザーあたり月 300 ドルで公開されており(2026 年 8 月 20 日確認)、1 席あたり年 3,600 ドルになります。起草が Word で行われ、席の稟議が通るなら購入してください。この Skill がカバーできない実在の側を押さえ、しかも執筆の場に同居します。稟議が通らないとき、書面がベンダーの保有しないプロダクションを引用しているとき、あるいは検証ログを誰かの Word セッション内の状態ではなく案件フォルダ内の持ち運べるファイルとして残したいときに、この Skill を使ってください。

Lexis+ with Protégé との比較。 2026 年 5 月に追加された Shepard’s Verify Trust Markers は、AI 生成テキスト 弁護士が起草したテキストの双方を走査し、各法的引用を Lexis の出典に照合し、検証できないものを表示します。Lexis 系の事務所はすでにこれを買っています。使ってください。引用をあなたの記録ではなくコーパスに照合するので、Bates を根拠とする事実主張には手が届きません。そこがこの Skill との重なりが終わる地点です。

Paxton AI との比較。 その Citator は Stanford の CaseHold で 94% を掲げていますが、ベンダー自身の測定であり、2025 年の PNAS の分析はこのベンチマークの一部が bag-of-words モデルでもほぼ満点を取れる程度に易しいと論じています。評点ではなく下限として扱ってください。他の 2 つと同じ規則で、答えるのは実在と取扱いです。

アソシエイトが引用を 1 件ずつ取得する現状との比較。 大半の事務所がしていることで、基準線として正しく、Skill はそれを置き換えません。変わるのはそのアソシエイトが読むものです。40 個の PDF と蛍光ペンではなく、未解決の行がすでに並べ替えられた表になります。

注意点

  • Skill が記憶から証明してしまう。 引用が正しいかと問われたモデルは、見覚えから、自信をもって答えます。捏造された典拠の背後にあるメカニズムそのものです。歯止め:SUPPORTED にはインデックス済みファイルから写した逐語の一節を行に印字することを要求し、ログが判定ではなく一節を示すようにして、レビュー担当が歯止めの成立を確認できるようにします。署名欄の 10 行サンプル確認は、このためだけに存在します。
  • 循環した出典。 それ自体が AI の要約である「出典」は、捏造を自らの捏造に照らして検証します。歯止め:provenanceother 値を持たず、要約を表現する手段もない閉じた語彙で、そこから外れた行はパス 1 で却下されます。判決要旨や書式バンクの抜粋は出典ではありません。判決本体を取得してください。
  • 重複排除が曲解を隠す。 歯止め:行は引用の出現を鍵にし、出現数を典拠数の隣に印字するので、両者が等しければきれいな書面ではなく読み取りの失敗として読めます。
  • ログが証明そのものと扱われる。 歯止め:適用範囲の明示がすべてのログの冒頭に立ち、実在とその後の取扱いを範囲外と名指しし、署名欄は人が署名するまで空のままです。Rule 11(b) が証明するのは状況に照らして合理的な調査であり、ログはそれが行われた証拠であって、そのもの自体ではありません。賭け金は記録に残っています。2 ダースを超える捏造引用を含む書面について 2026 年 3 月に Sixth Circuit が判断した Whiting v. City of Athens で、裁判所は弁護士費用、費用の倍額、各人に 15,000 ドルの懲罰的制裁、および懲戒付託を科しました。
  • 古い取得。 取得時点では有効な法であり先週覆された判例は、誰も確認しなかった判例とまったく同じに読めます。歯止め:retrieved_on は出典ごとに必須で filing_date と比較され、30 日を超える差はその出典を引用する全行に [STALE-PULL] を付けます。
  • 秘密保持。 歯止め:最初の封印文書を貼り付ける前に、事務所が受け入れているデータ保存条件を確認してください。Skill はあなたの保護命令が何を許すかについて見解を持たず、Opinion 512 はその判断をあなたに残しています。

スタック

  • Claude — 主張テーブルの抽出、一節の突き合わせ、逐語引用の差分、ログの組み立て
  • Lexis+ with Protégé または Thomson Reuters CoCounsel — 先に走り、実在と取扱いに答える citator のパス
  • Paxton AI — Westlaw や Lexis の契約を持たない事務所向けの、より安価な citator の選択肢

関連:上記ツールを買う前に走らせるべき受け入れテストは リーガル AI のグラウンディングとハルシネーション に、同じ 2 パスの引用歯止めを尋問準備に適用したものは デポジション尋問アウトラインの Skill にあります。

Files in this artifact

Download all (.zip)