コンテンツにスキップ

Research Areas — 5つの研究領域

Open LLMO Research Initiative は、AI と Web の接点を 5つの領域に分けて研究する。各領域は独立した研究方向を持ちつつ、最終的には LLMOFramework Score の指標体系に統合される。

領域主な問い
1. AI Citation Analysis(AI 引用分析)LLM はどのコンテンツを、どの条件で引用するか
2. Grounding Visibility(根拠付けの可視化)AI が何を根拠に回答しているかをどう可視化するか
3. LLM Retrieval Optimization(LLM 検索最適化)LLM 検索層に対して文書をどう最適化するか
4. AI-native Documentation(AI ネイティブな文書化)LLM が扱いやすい文書フォーマットとは何か
5. Agent-oriented Information Architecture(エージェント指向の情報アーキテクチャ)AI エージェントが操作しやすい情報構造とは何か

1. AI Citation Analysis(AI 引用分析)

Section titled “1. AI Citation Analysis(AI 引用分析)”

ChatGPT、Claude、Gemini、Perplexity 等の LLM が、特定のトピックに対してどのコンテンツを引用するかの分析。引用の頻度、引用される文書の構造的特徴、引用に至る retrieval パスを観測対象とする。

  • 同一トピックに対する引用ドメインは LLM 間でどの程度一致するか
  • 引用される文書の構造的特徴(見出し階層、テーブル、統計密度、外部リンク数など)は特定できるか
  • 引用されやすい文書を後天的に作るためのチェックリストは構築可能か

AI 引用観測のデータ収集を開始している。Phase 1 で OSS の llmo-checker に Citation Visibility 指標として実装予定。


2. Grounding Visibility(根拠付けの可視化)

Section titled “2. Grounding Visibility(根拠付けの可視化)”

AI の応答に対する grounding(根拠付け)の可視化。LLM が答えを生成する際に何を根拠としたか、その根拠が検証可能な一次情報に辿れるかを扱う。

  • AI 応答から根拠ドキュメントへ逆引きする手法は標準化できるか
  • 根拠が「見える」サイト設計(出典明示、データソース引用、引用フォーマット)は AI の引用率に影響するか
  • Hallucination と grounding の弱さは相関するか

Citation Signals(LLMO Framework の5番目のコンポーネント)として既に部分的に扱われている。Phase 1 で Grounding Stability 指標として定量化を試みる。


3. LLM Retrieval Optimization(LLM 検索最適化)

Section titled “3. LLM Retrieval Optimization(LLM 検索最適化)”

LLM の検索層(RAG、embedding retrieval、Web 検索プラグイン等)に対して、文書側でできる最適化。chunking 戦略、semantic structure、文書長、見出し設計を研究対象とする。

  • chunk size と retrieval 精度の関係はトピックごとにどう変わるか
  • Markdown / HTML / JSON-LD の retrieval 効率差はどの程度か
  • 内部リンク密度は AI 検索の文脈拡張にどう寄与するか

llmoframework.com 自体が実装リファレンスとなっている。Phase 1 で chunking 比較実験を公開予定。


4. AI-native Documentation(AI ネイティブな文書化)

Section titled “4. AI-native Documentation(AI ネイティブな文書化)”

LLM が読み書きしやすい文書フォーマットの研究。llms.txt、Markdown 標準、AI 向けメタデータの最適形を扱う。

  • llms.txt は実際にどの LLM / クローラが参照しているか
  • Markdown と HTML、それぞれの retrieval 効率と表現力の最適点はどこか
  • AI 向けの構造化メタデータ(JSON-LD 等)は引用率に影響するか

llms.txt の実装と効果測定を継続中。Phase 1 で llms.txt-validator OSS ツールを公開予定。


5. Agent-oriented Information Architecture(エージェント指向の情報アーキテクチャ)

Section titled “5. Agent-oriented Information Architecture(エージェント指向の情報アーキテクチャ)”

AI エージェント(Claude Code、Cursor、自律 agent 等)が情報を取得・操作しやすい IA の研究。MCP(Model Context Protocol)exposure、API ドキュメント設計、検索可能性を扱う。

  • MCP サーバーを公開しているサイトは AI 検索の可視性で優位に立てるか
  • agent-readable な API ドキュメント(OpenAPI + 自然言語)は単なる API リファレンスより検索されやすいか
  • 自律 agent の探索行動を観測する手法は確立可能か

MCP exposure の検索可視性に対する影響を検証中。Phase 1 で Agent Visibility の予備指標を提案予定。


領域Phase 1 で予定する成果物
AI Citation Analysisllmo-checker の Citation Visibility 指標
Grounding VisibilityGrounding Stability 指標 + 評価データセット
LLM Retrieval Optimizationchunking 比較実験レポート
AI-native Documentationllms.txt-validator OSS
Agent-oriented IAAgent Visibility 予備指標

各領域の進捗は ChangelogGitHub Issues で公開する。