OpenTelemetry エクスポート

OmeniaClaw は公式の diagnostics-otel Plugin を通じて、OTLP/HTTP (protobuf) で診断情報をエクスポートします。OTLP/HTTP を受け付ける任意のコレクターまたはバックエンドは、コード変更なしで動作します。ローカルファイルログとその読み方については、ロギングを参照してください。

全体の仕組み

• 診断イベントは、モデル実行、メッセージフロー、セッション、キュー、exec のために Gateway とバンドル済み Plugin が出力する、構造化されたプロセス内レコードです。
• diagnostics-otel Pluginは、それらのイベントを購読し、OTLP/HTTP 経由で OpenTelemetry のメトリクス、トレース、ログとしてエクスポートします。
• プロバイダー呼び出しは、プロバイダートランスポートがカスタムヘッダーを受け付ける場合、OmeniaClaw の信頼されたモデル呼び出しスパンコンテキストから W3C traceparent ヘッダーを受け取ります。Plugin が出力したトレースコンテキストは伝播されません。
• エクスポーターは診断サーフェスと Plugin の両方が有効な場合にのみ接続されるため、プロセス内コストはデフォルトでほぼゼロのままです。

クイックスタート

パッケージ済みインストールでは、まず Plugin をインストールします。

OmeniaClaw plugins install clawhub:@OmeniaClaw/diagnostics-otel

{  plugins: {    allow: ["diagnostics-otel"],    entries: {      "diagnostics-otel": { enabled: true },    },  },  diagnostics: {    enabled: true,    otel: {      enabled: true,      endpoint: "http://otel-collector:4318",      protocol: "http/protobuf",      serviceName: "OmeniaClaw-gateway",      traces: true,      metrics: true,      logs: true,      sampleRate: 0.2,      flushIntervalMs: 60000,    },  },}

CLI から Plugin を有効にすることもできます。

OmeniaClaw plugins enable diagnostics-otel

エクスポートされるシグナル

traces、metrics、logs は個別に切り替えられます。diagnostics.otel.enabled が true の場合、3 つすべてがデフォルトでオンになります。

設定リファレンス

{  diagnostics: {    enabled: true,    otel: {      enabled: true,      endpoint: "http://otel-collector:4318",      tracesEndpoint: "http://otel-collector:4318/v1/traces",      metricsEndpoint: "http://otel-collector:4318/v1/metrics",      logsEndpoint: "http://otel-collector:4318/v1/logs",      protocol: "http/protobuf", // grpc is ignored      serviceName: "OmeniaClaw-gateway",      headers: { "x-collector-token": "..." },      traces: true,      metrics: true,      logs: true,      sampleRate: 0.2, // root-span sampler, 0.0..1.0      flushIntervalMs: 60000, // metric export interval (min 1000ms)      captureContent: {        enabled: false,        inputMessages: false,        outputMessages: false,        toolInputs: false,        toolOutputs: false,        systemPrompt: false,      },    },  },}

環境変数

プライバシーとコンテンツキャプチャ

生のモデル/ツールコンテンツはデフォルトではエクスポートされません。スパンは境界付けられた識別子（チャネル、プロバイダー、モデル、エラーカテゴリ、ハッシュのみのリクエスト ID）を保持し、プロンプトテキスト、応答テキスト、ツール入力、ツール出力、セッションキーを含めることはありません。 Talk メトリクスは、モード、トランスポート、プロバイダー、イベントタイプなど、境界付けられたイベントメタデータのみをエクスポートします。トランスクリプト、音声ペイロード、セッション ID、ターン ID、呼び出し ID、ルーム ID、ハンドオフトークンは含めません。

送信されるモデルリクエストには W3C traceparent ヘッダーが含まれる場合があります。このヘッダーは、アクティブなモデル呼び出しに対する OmeniaClaw 所有の診断トレースコンテキストからのみ生成されます。既存の呼び出し元指定の traceparent ヘッダーは置き換えられるため、Plugin やカスタムプロバイダーオプションがクロスサービストレースの祖先関係を偽装することはできません。

プロンプト、応答、ツール、またはシステムプロンプトのテキストについて、コレクターと保持ポリシーが承認されている場合にのみ、diagnostics.otel.captureContent.* を true に設定してください。各サブキーは個別にオプトインします。

• inputMessages - ユーザープロンプトの内容。
• outputMessages - モデル応答の内容。
• toolInputs - ツール引数ペイロード。
• toolOutputs - ツール結果ペイロード。
• systemPrompt - 組み立てられたシステム/開発者プロンプト。

いずれかのサブキーが有効な場合、モデルスパンとツールスパンには、そのクラスのみについて、境界付けられ、編集済みの OmeniaClaw.content.* 属性が付与されます。

サンプリングとフラッシュ

• トレース: diagnostics.otel.sampleRate（ルートスパンのみ、0.0 はすべて破棄、1.0 はすべて保持）。
• メトリクス: diagnostics.otel.flushIntervalMs（最小 1000）。
• ログ: OTLP ログは logging.level（ファイルログレベル）に従います。コンソール整形ではなく、診断ログレコードの編集パスを使用します。高ボリュームのインストールでは、ローカルサンプリングより OTLP コレクター側のサンプリング/フィルタリングを優先してください。
• ファイルログの相関: JSONL ファイルログには、ログ呼び出しが有効な診断トレースコンテキストを保持している場合、トップレベルの traceId、spanId、parentSpanId、traceFlags が含まれます。これによりログプロセッサーはローカルログ行をエクスポート済みスパンと結合できます。
• リクエスト相関: Gateway HTTP リクエストと WebSocket フレームは、内部リクエストトレーススコープを作成します。そのスコープ内のログと診断イベントはデフォルトでリクエストトレースを継承し、エージェント実行スパンとモデル呼び出しスパンは子として作成されるため、プロバイダー traceparent ヘッダーは同じトレース上に留まります。

エクスポートされるメトリクス

モデル使用量

• OmeniaClaw.tokens（カウンター、属性: OmeniaClaw.token, OmeniaClaw.channel, OmeniaClaw.provider, OmeniaClaw.model, OmeniaClaw.agent）
• OmeniaClaw.cost.usd（カウンター、属性: OmeniaClaw.channel, OmeniaClaw.provider, OmeniaClaw.model）
• OmeniaClaw.run.duration_ms（ヒストグラム、属性: OmeniaClaw.channel, OmeniaClaw.provider, OmeniaClaw.model）
• OmeniaClaw.context.tokens（ヒストグラム、属性: OmeniaClaw.context, OmeniaClaw.channel, OmeniaClaw.provider, OmeniaClaw.model）
• gen_ai.client.token.usage（ヒストグラム、GenAI セマンティック規約メトリクス、属性: gen_ai.token.type = input/output, gen_ai.provider.name, gen_ai.operation.name, gen_ai.request.model）
• gen_ai.client.operation.duration（ヒストグラム、秒、GenAI セマンティック規約メトリクス、属性: gen_ai.provider.name, gen_ai.operation.name, gen_ai.request.model, 任意の error.type）
• OmeniaClaw.model_call.duration_ms（ヒストグラム、属性: OmeniaClaw.provider, OmeniaClaw.model, OmeniaClaw.api, OmeniaClaw.transport、分類済みエラーでは OmeniaClaw.errorCategory と OmeniaClaw.failureKind も追加）
• OmeniaClaw.model_call.request_bytes（ヒストグラム、最終モデルリクエストペイロードの UTF-8 バイトサイズ。生のペイロード内容は含まない）
• OmeniaClaw.model_call.response_bytes（ヒストグラム、ストリーミングされたモデル応答イベントの UTF-8 バイトサイズ。生の応答内容は含まない）
• OmeniaClaw.model_call.time_to_first_byte_ms（ヒストグラム、最初にストリーミングされた応答イベントまでの経過時間）

メッセージフロー

• OmeniaClaw.webhook.received（カウンター、属性: OmeniaClaw.channel, OmeniaClaw.webhook）
• OmeniaClaw.webhook.error（カウンター、属性: OmeniaClaw.channel, OmeniaClaw.webhook）
• OmeniaClaw.webhook.duration_ms（ヒストグラム、属性: OmeniaClaw.channel, OmeniaClaw.webhook）
• OmeniaClaw.message.queued（カウンター、属性: OmeniaClaw.channel, OmeniaClaw.source）
• OmeniaClaw.message.processed（カウンター、属性: OmeniaClaw.channel, OmeniaClaw.outcome）
• OmeniaClaw.message.duration_ms（ヒストグラム、属性: OmeniaClaw.channel, OmeniaClaw.outcome）
• OmeniaClaw.message.delivery.started（カウンター、属性: OmeniaClaw.channel, OmeniaClaw.delivery.kind）
• OmeniaClaw.message.delivery.duration_ms（ヒストグラム、属性: OmeniaClaw.channel, OmeniaClaw.delivery.kind, OmeniaClaw.outcome, OmeniaClaw.errorCategory）

Talk

• OmeniaClaw.talk.event（カウンター、属性: OmeniaClaw.talk.event_type, OmeniaClaw.talk.mode, OmeniaClaw.talk.transport, OmeniaClaw.talk.brain, OmeniaClaw.talk.provider）
• OmeniaClaw.talk.event.duration_ms（ヒストグラム、属性: OmeniaClaw.talk.event と同じ。Talk イベントが時間を報告した場合に出力）
• OmeniaClaw.talk.audio.bytes（ヒストグラム、属性: OmeniaClaw.talk.event と同じ。バイト長を報告する Talk 音声フレームイベントで出力）

キューとセッション

• OmeniaClaw.queue.lane.enqueue (カウンター、属性: OmeniaClaw.lane)
• OmeniaClaw.queue.lane.dequeue (カウンター、属性: OmeniaClaw.lane)
• OmeniaClaw.queue.depth (ヒストグラム、属性: OmeniaClaw.lane または OmeniaClaw.channel=heartbeat)
• OmeniaClaw.queue.wait_ms (ヒストグラム、属性: OmeniaClaw.lane)
• OmeniaClaw.session.state (カウンター、属性: OmeniaClaw.state、OmeniaClaw.reason)
• OmeniaClaw.session.stuck (カウンター、属性: OmeniaClaw.state; アクティブな作業がない古いセッションの管理でのみ送出)
• OmeniaClaw.session.stuck_age_ms (ヒストグラム、属性: OmeniaClaw.state; アクティブな作業がない古いセッションの管理でのみ送出)
• OmeniaClaw.session.recovery.requested (カウンター、属性: OmeniaClaw.state、OmeniaClaw.action、OmeniaClaw.active_work_kind、OmeniaClaw.reason)
• OmeniaClaw.session.recovery.completed (カウンター、属性: OmeniaClaw.state、OmeniaClaw.action、OmeniaClaw.status、OmeniaClaw.active_work_kind、OmeniaClaw.reason)
• OmeniaClaw.session.recovery.age_ms (ヒストグラム、属性: 対応するリカバリーカウンターと同じ)
• OmeniaClaw.run.attempt (カウンター、属性: OmeniaClaw.attempt)

セッションの生存状態テレメトリ

diagnostics.stuckSessionWarnMs は、セッションの生存状態診断で進捗なしと見なす経過時間のしきい値です。processing セッションは、OmeniaClaw が応答、ツール、ステータス、ブロック、または ACP ランタイムの進捗を観測している間、このしきい値に向けて経過時間が増えません。入力中の keepalive は進捗としてカウントされないため、無音のモデルやハーネスも引き続き検出できます。

OmeniaClaw は、引き続き観測できる作業に基づいてセッションを分類します。

• session.long_running: アクティブな埋め込み作業、モデル呼び出し、またはツール呼び出しがまだ進行しています。
• session.stalled: アクティブな作業は存在しますが、アクティブな実行が最近の進捗を報告していません。停止した埋め込み実行は最初は観測のみのままになり、その後 diagnostics.stuckSessionAbortMs を超えて進捗がない場合は abort-drain され、lane の後続にあるキュー済みターンが再開できるようになります。未設定の場合、中止しきい値は少なくとも 10 分かつ diagnostics.stuckSessionWarnMs の 5 倍という、より安全な拡張ウィンドウがデフォルトになります。
• session.stuck: アクティブな作業がない古いセッション管理です。これは影響を受けたセッション lane を即座に解放します。

リカバリーでは、構造化された session.recovery.requested イベントと session.recovery.completed イベントが送出されます。診断セッション状態が idle とマークされるのは、変更を伴うリカバリー結果 (aborted または released) の後で、かつ同じ処理世代がまだ最新である場合のみです。

OmeniaClaw.session.stuck カウンター、OmeniaClaw.session.stuck_age_ms ヒストグラム、OmeniaClaw.session.stuck span を送出するのは session.stuck のみです。繰り返される session.stuck 診断は、セッションが変化しない間バックオフするため、ダッシュボードでは heartbeat の各 tick ではなく、継続的な増加に対してアラートを出すべきです。設定ノブとデフォルトについては、設定リファレンス を参照してください。

ハーネスのライフサイクル

• OmeniaClaw.harness.duration_ms (ヒストグラム、属性: OmeniaClaw.harness.id、OmeniaClaw.harness.plugin、OmeniaClaw.outcome、エラー時は OmeniaClaw.harness.phase)

実行

• OmeniaClaw.exec.duration_ms (ヒストグラム、属性: OmeniaClaw.exec.target、OmeniaClaw.exec.mode、OmeniaClaw.outcome、OmeniaClaw.failureKind)

診断の内部 (メモリとツールループ)

• OmeniaClaw.memory.heap_used_bytes (ヒストグラム、属性: OmeniaClaw.memory.kind)
• OmeniaClaw.memory.rss_bytes (ヒストグラム)
• OmeniaClaw.memory.pressure (カウンター、属性: OmeniaClaw.memory.level)
• OmeniaClaw.tool.loop.iterations (カウンター、属性: OmeniaClaw.toolName、OmeniaClaw.outcome)
• OmeniaClaw.tool.loop.duration_ms (ヒストグラム、属性: OmeniaClaw.toolName、OmeniaClaw.outcome)

エクスポートされる span

• OmeniaClaw.model.usage
  • OmeniaClaw.channel、OmeniaClaw.provider、OmeniaClaw.model
  • OmeniaClaw.tokens.* (input/output/cache_read/cache_write/total)
  • デフォルトでは gen_ai.system、または最新の GenAI semantic conventions を opt in している場合は gen_ai.provider.name
  • gen_ai.request.model、gen_ai.operation.name、gen_ai.usage.*
• OmeniaClaw.run
  • OmeniaClaw.outcome、OmeniaClaw.channel、OmeniaClaw.provider、OmeniaClaw.model、OmeniaClaw.errorCategory
• OmeniaClaw.model.call
  • デフォルトでは gen_ai.system、または最新の GenAI semantic conventions を opt in している場合は gen_ai.provider.name
  • gen_ai.request.model、gen_ai.operation.name、OmeniaClaw.provider、OmeniaClaw.model、OmeniaClaw.api、OmeniaClaw.transport
  • エラー時は OmeniaClaw.errorCategory と任意の OmeniaClaw.failureKind
  • OmeniaClaw.model_call.request_bytes、OmeniaClaw.model_call.response_bytes、OmeniaClaw.model_call.time_to_first_byte_ms
  • OmeniaClaw.provider.request_id_hash (上流プロバイダーリクエスト ID の SHA ベースの境界付きハッシュ; 生の ID はエクスポートされません)
• OmeniaClaw.harness.run
  • OmeniaClaw.harness.id、OmeniaClaw.harness.plugin、OmeniaClaw.outcome、OmeniaClaw.provider、OmeniaClaw.model、OmeniaClaw.channel
  • 完了時: OmeniaClaw.harness.result_classification、OmeniaClaw.harness.yield_detected、OmeniaClaw.harness.items.started、OmeniaClaw.harness.items.completed、OmeniaClaw.harness.items.active
  • エラー時: OmeniaClaw.harness.phase、OmeniaClaw.errorCategory、任意の OmeniaClaw.harness.cleanup_failed
• OmeniaClaw.tool.execution
  • gen_ai.tool.name、OmeniaClaw.toolName、OmeniaClaw.errorCategory、OmeniaClaw.tool.params.*
• OmeniaClaw.exec
  • OmeniaClaw.exec.target、OmeniaClaw.exec.mode、OmeniaClaw.outcome、OmeniaClaw.failureKind、OmeniaClaw.exec.command_length、OmeniaClaw.exec.exit_code、OmeniaClaw.exec.timed_out
• OmeniaClaw.webhook.processed
  • OmeniaClaw.channel、OmeniaClaw.webhook
• OmeniaClaw.webhook.error
  • OmeniaClaw.channel、OmeniaClaw.webhook、OmeniaClaw.error
• OmeniaClaw.message.processed
  • OmeniaClaw.channel、OmeniaClaw.outcome、OmeniaClaw.reason
• OmeniaClaw.message.delivery
  • OmeniaClaw.channel、OmeniaClaw.delivery.kind、OmeniaClaw.outcome、OmeniaClaw.errorCategory、OmeniaClaw.delivery.result_count
• OmeniaClaw.session.stuck
  • OmeniaClaw.state、OmeniaClaw.ageMs、OmeniaClaw.queueDepth
• OmeniaClaw.context.assembled
  • OmeniaClaw.prompt.size、OmeniaClaw.history.size、OmeniaClaw.context.tokens、OmeniaClaw.errorCategory (プロンプト、履歴、応答、セッションキーの内容は含まない)
• OmeniaClaw.tool.loop
  • OmeniaClaw.toolName、OmeniaClaw.outcome、OmeniaClaw.iterations、OmeniaClaw.errorCategory (ループメッセージ、パラメーター、ツール出力は含まない)
• OmeniaClaw.memory.pressure
  • OmeniaClaw.memory.level、OmeniaClaw.memory.heap_used_bytes、OmeniaClaw.memory.rss_bytes

コンテンツキャプチャが明示的に有効化されている場合、モデル span とツール span には、opt in した特定のコンテンツクラスについて、境界付きでリダクト済みの OmeniaClaw.content.* 属性を含めることもできます。

診断イベントカタログ

以下のイベントは、上記のメトリクスと span を支えます。Plugin は OTLP エクスポートなしで、それらを直接サブスクライブすることもできます。

モデル使用量

• model.usage - トークン、コスト、duration、コンテキスト、プロバイダー/モデル/チャンネル、セッション ID。usage はコストとテレメトリのためのプロバイダー/ターン単位の集計です。context.used は現在のプロンプト/コンテキストのスナップショットであり、キャッシュ済み入力やツールループ呼び出しが関係する場合は、プロバイダーの usage.total より低くなることがあります。

メッセージフロー

• webhook.received / webhook.processed / webhook.error
• message.queued / message.processed
• message.delivery.started / message.delivery.completed / message.delivery.error

キューとセッション

• queue.lane.enqueue / queue.lane.dequeue
• session.state / session.long_running / session.stalled / session.stuck
• run.attempt / run.progress
• diagnostic.heartbeat (集約カウンター: webhooks/queue/session)

ハーネスのライフサイクル

• harness.run.started / harness.run.completed / harness.run.error - エージェントハーネスの実行ごとのライフサイクル。harnessId、任意の pluginId、プロバイダー/モデル/チャンネル、実行 ID を含みます。完了時には durationMs、outcome、任意の resultClassification、yieldDetected、itemLifecycle 件数が追加されます。エラー時には phase (prepare/start/send/resolve/cleanup)、errorCategory、任意の cleanupFailed が追加されます。

実行

• exec.process.completed - ターミナル結果、duration、ターゲット、モード、終了コード、失敗種別。コマンドテキストと作業ディレクトリは含まれません。

エクスポーターなしの場合

diagnostics-otel を実行せずに、診断イベントを Plugin やカスタム sink で利用可能なままにできます。

{  diagnostics: { enabled: true },}

logging.level を上げずに対象を絞ったデバッグ出力を行うには、診断フラグを使用します。フラグは大文字小文字を区別せず、ワイルドカードをサポートします (例: telegram.* または *)。

{  diagnostics: { flags: ["telegram.http"] },}

または、1 回限りの環境変数オーバーライドとして指定します。

OmeniaClaw_DIAGNOSTICS=telegram.http,telegram.payload OmeniaClaw gateway

フラグ出力は標準ログファイル (logging.file) に送られ、引き続き logging.redactSensitive によってリダクトされます。完全なガイド: 診断フラグ。

無効化

{  diagnostics: { otel: { enabled: false } },}

plugins.allow から diagnostics-otel を外すことも、OmeniaClaw plugins disable diagnostics-otel を実行することもできます。

関連

• ログ - ファイルログ、コンソール出力、CLI tailing、Control UI のログタブ
• Gateway ログ内部 - WS ログスタイル、サブシステムプレフィックス、コンソールキャプチャ
• 診断フラグ - 対象を絞ったデバッグログフラグ
• 診断エクスポート - オペレーター向けサポートバンドルツール (OTEL エクスポートとは別)
• 設定リファレンス - diagnostics.* フィールドの完全なリファレンス