# 実験素材：議事録AIの指示文を比べた実験

記事「AIで議事録を作る方法」で使った実験の素材です。実行日は2026年10月17日。モデルは Claude Haiku 5.5 と Sonnet 5.5。`claude -p --tools '' --setting-sources '' --no-session-persistence`（ツールなし・設定なし・1ターンの文章生成だけ）で呼びました。

## 会議（すべて合成）

| ファイル | 中身 |
|---|---|
| `transcript_clear.txt` | はっきり決める会議（2,757字）。2026-10-14（水）。決定・保留・見送り・ToDoを14項目仕込んである |
| `transcript_long.txt` | 上の会議の議題の間に、AIが作った雑談4本を挟んだ版（20,823字） |
| `transcript_asr.txt` | 音声認識の誤変換（決裁API、高梨、エフエーキュー等）を手で仕込んだ版 |
| `transcript_vague.txt` | 「じゃあそんな感じで」「やっちゃって」「出せたら出します」など曖昧な言い方で進む会議（1,068字）。2026-10-28（水） |

## 実験

| 実験 | 指示文 | 出力 | 採点 |
|---|---|---|---|
| 本実験（6指示文×2モデル×2会議長×5回＝120） | `prompts/prompts.json`, `prompts_long.json` | `outputs_main120.json` | `code/score_main.py`（14項目）、`code/score_date.py`（出張日） |
| 用語リスト（30） | `prompts/prompts_asr.json` | `outputs_asr30.json` | `code/score_asr.py` |
| 日付の直し方の追試（5指示文×2モデル×12回＝120） | `prompts/prompts_date.json` | `outputs_date_retest120.json` | `code/score_date.py` |
| 曖昧な会議（2指示文×2モデル×10回＝40） | `prompts/prompts_vague.json` | `outputs_vague40.json` | `code/score_vague2.py` |
| 完成版の確認（2モデル×10回＝20） | `prompts/prompts_final.json` | `outputs_final20.json` | 同上（日付）＋用語の置換を目視・正規表現で確認 |

## 出張日の分類（`score_date.py`）

- A：「来週の木曜」を10月22日と書いた
- B：日付に直さず発言どおり書いた、または「要確認」で止めた
- C：誤った日付（10/15、10/16、10/23など）を断定して書いた
- E：出張に触れなかった

正規表現で分類したあと、C判定と境界の出力は目で読んで確認しました。

## 限界

- 会議は合成で、読み上げ音声ではなく文字の文字起こしです。実会議の言い淀みや重なりは入っていません。
- 各条件は5〜12回です。差の大きさは目安で、断定には足りません。
- 採点は「ある・ない」と日付の一致で、文章の読みやすさは見ていません。
- Claudeの2モデルだけです。ChatGPT、Gemini、各社の議事録ツールの内蔵プロンプトは試していません。
