Skip to content
cccskills
FreePublished on GitHub

openai-realtime-audio

OpenAI API (developers.openai.com) の音声 API リファレンス。

GPT-Live (gpt-live-1, full-duplex, delegation, /v1/live/sessions), Realtime API (WebRTC / WARP / WebSocket / SIP, sessions / events, client secrets, VAD (server_vad / semantic_vad), tools/MCP), speech-to-speech voice agents, speech-to-text (gpt-transcribe / gpt-live-transcribe), text-to-speech, custom voices, translation。

The English summary is being prepared. Showing the original description.

Works withOpenAI
See how to install

Files included (45)

  • SKILL.md5.4 KB
  • references/audio/audio-and-speech.md4.9 KB
  • references/audio/custom-voices.md5.5 KB
  • references/audio/file-transcription.md3.7 KB
  • references/audio/README.md708 B
  • references/audio/text-to-speech.md3.0 KB
  • references/audio/transcription-workflow.md2.6 KB
  • references/live/costs.md3.4 KB
  • references/live/decisions-voice.md4.9 KB
  • references/live/delegation.md8.5 KB
  • references/live/events.md6.2 KB
  • references/live/migration.md6.0 KB
  • references/live/overview.md3.9 KB
  • references/live/partner-integrations.md1.8 KB
  • references/live/prompting.md4.8 KB
  • references/live/README.md1.6 KB
  • references/live/server-controls.md4.7 KB
  • references/live/sessions.md8.2 KB
  • references/live/sip.md6.0 KB
  • references/live/webrtc.md5.6 KB
  • references/live/websocket.md5.6 KB
  • references/realtime/client-secrets.md2.3 KB
  • references/realtime/conversations.md4.0 KB
  • references/realtime/costs.md2.5 KB
  • references/realtime/models-prompting.md2.8 KB
  • references/realtime/overview.md3.4 KB
  • references/realtime/README.md2.1 KB
  • references/realtime/server-controls.md2.6 KB
  • references/realtime/sip.md2.4 KB
  • references/realtime/tools-mcp.md3.8 KB
  • references/realtime/transcription.md3.0 KB
  • references/realtime/translation.md2.9 KB
  • references/realtime/vad.md2.1 KB
  • references/realtime/voice-agents.md3.4 KB
  • references/realtime/webrtc-warp.md4.3 KB
  • references/realtime/webrtc.md3.4 KB
  • references/realtime/websocket.md2.3 KB
  • samples/client-secret-issuance.md2.0 KB
  • samples/file-transcription.md1.2 KB
  • samples/README.md1.6 KB
  • samples/realtime-transcription-stream.md1.6 KB
  • samples/text-to-speech-synthesis.md2.3 KB
  • samples/voice-agent-basic.md2.9 KB
  • samples/webrtc-browser-session.md2.0 KB
  • samples/websocket-server-connection.md1.7 KB

SKILL.md (original)

Review the instructions the agent will receive before you install.

openai-realtime-audio

OpenAI の音声 API を 2 系統でカバーする。

  • GPT-Live(gpt-live-1、full-duplex で backend への delegation を持つ音声 API、/v1/live/sessions、2026-09-10 GA)。公式ハブは新規の会話型音声アプリでは GPT-Live から始めるよう案内している
  • Realtime API(WebRTC / WARP / WebSocket / SIP 経由の低遅延 speech-to-speech セッション)と、Audio エンドポイント(file transcription, text-to-speech, custom voices)

対象版: developers.openai.com の Markdown twin を 2026-10-17 に取得(changelog 最新 Oct 15, 2026。URL に版は無い)。 Deprecation の要点: TTS モデルは 2027-01-06、文字起こしモデルと /v1/audio/translations は 2027-02-26、legacy realtime / audio は 2027-01-20 に停止予定。

ディレクトリ構成

skills/openai-realtime-audio/
  SKILL.md
  references/
    live/
      README.md
      overview.md
      webrtc.md
      websocket.md
      sip.md
      server-controls.md
      sessions.md
      delegation.md
      prompting.md
      migration.md
      decisions-voice.md
      costs.md
      partner-integrations.md
      events.md
    realtime/
      README.md
      overview.md
      webrtc.md
      webrtc-warp.md
      websocket.md
      sip.md
      conversations.md
      vad.md
      transcription.md
      translation.md
      tools-mcp.md
      server-controls.md
      costs.md
      voice-agents.md
      models-prompting.md
      client-secrets.md
    audio/
      README.md
      audio-and-speech.md
      file-transcription.md
      text-to-speech.md
      transcription-workflow.md
      custom-voices.md
  samples/
    README.md
    webrtc-browser-session.md
    websocket-server-connection.md
    client-secret-issuance.md
    realtime-transcription-stream.md
    file-transcription.md
    text-to-speech-synthesis.md
    voice-agent-basic.md

scripts/ は意図的に作成していない。接続コード(WebRTC/WebSocket セットアップ、client secret 発行等)は samples/ 側で完結してカバーしているため。

探索手順

タスクからカテゴリを引き、カテゴリの README.md で目的のページを特定する:

  1. 下記マッピング表でタスクに対応するカテゴリを探す
  2. そのカテゴリの references/{category}/README.md(samples/ は直下の README.md)を参照して目的のページを特定する
  3. 該当ページの .md を Read して詳細を確認する

棲み分け

  • live/(GPT-Live、/v1/live/sessions)と realtime/(Realtime API)は接続ガイド(voice-webrtc / voice-websockets / voice-sip / voice-server-controls)を共有するが、handshake・認証情報・イベント形式は互換ではない。realtime/ と live/ のページを混ぜて読まない
  • GPT-Live の client delegation(自前 agent を接続する方式)は GPT-Live 側の機能。openai-agents スキルの Agents SDK(RealtimeAgent / RealtimeSession / handoffs)とは別物
  • Decisions API 本体は本スキルの対象外。live/decisions-voice.md の音声連携のみを扱う
  • webhook 一般・Responses API のリファレンスは openai-api-core スキルを参照
  • Realtime というキーワードは Supabase の Realtime(データベース pub/sub 製品)と無関係なので混同しないこと

タスク → カテゴリ マッピング

タスクカテゴリ参照 README
GPT-Live で full-duplex 音声会話・delegation(Responses / client)・Decisions 連携を作りたいlivereferences/live/README.md
GPT-Live の接続(WebRTC / WebSocket / SIP / sideband)・課金・Realtime からの移行livereferences/live/README.md
WebRTC/WebSocket/SIP で Realtime セッションを張りたいrealtimereferences/realtime/README.md
WebRTC 接続を WARP で高速化したいrealtimereferences/realtime/README.md
conversation/event ライフサイクル・VAD・tools/MCP を知りたいrealtimereferences/realtime/README.md
client secret(ephemeral key)発行・コスト・プロンプティングを知りたいrealtimereferences/realtime/README.md
ファイルの音声書き起こし・text-to-speech(非リアルタイム)を知りたいaudioreferences/audio/README.md
custom voice を作成・利用したいaudioreferences/audio/README.md
transcription ワークフローの選定(file vs realtime)を知りたいaudioreferences/audio/README.md
典型的な使い方を知りたいsamplessamples/README.md

Reviews

No reviews yet. Tell others what you thought.

Comments

No login needed. Share how it worked for you, ask a question, or note where it did not run.

No comments yet. Be the first to write one.

Comments are published right away. Do not include personal information such as email addresses or phone numbers. Up to 2 URLs.

0 / 1,000 characters

This form is protected by reCAPTCHA, and the Google Privacy Policy and Terms of Service apply.

More skills from this repository

AMD ROCm / HIP GPU コンピューティングリファレンス。 hipMalloc, hipLaunchKernelGGL, HIP Graph, hipGreenCtx, HIPRTC, hipify, rocBLAS, MIOpen, RCCL, hipThreads, libhipcxx, rocprofv3, amd-smi, rocminfo, TheRock / Core SDK 10, CDNA1-4 / RDNA1-4, MI300 / MI350 / MI350P, gfx942, Matrix Core, wave32/64。

The English summary is being prepared. Showing the original description.

Fandhe-AI/agent-reference-skills4Updated Oct 22, 2026

Android アプリ開発 (Kotlin) の推奨アーキテクチャリファレンス。 Jetpack, androidx, UI layer, Domain layer, Data layer, state holder, UDF, SSOT, オフラインファースト, モジュール化, ViewModel, viewModelScope, SavedStateHandle, Lifecycle, repeatOnLifecycle, collectAsStateWithLifecycle, LiveData, Hilt による DI, Paging 3 によるページング処理。

The English summary is being prepared. Showing the original description.

Fandhe-AI/agent-reference-skills4Updated Oct 22, 2026

Android アプリ開発 (Kotlin) のバックグラウンド・非同期処理リファレンス。 Jetpack androidx WorkManager: Worker, CoroutineWorker, WorkRequest, Constraints, WorkInfo, WorkContinuation, expedited work, テスト。 Service: フォアグラウンドサービス, バウンドサービス, AIDL, Messenger。 AlarmManager, PendingIntent, BroadcastReceiver, JobScheduler, Doze。 Kotlin コルーチン, Flow, StateFlow, SharedFlow, Channel。

The English summary is being prepared. Showing the original description.

Fandhe-AI/agent-reference-skills4Updated Oct 22, 2026

Android アプリ開発 (Kotlin) の Gradle ビルドシステムリファレンス。 Android Gradle Plugin (AGP), Kotlin DSL (build.gradle.kts), version catalog, KSP, R8/ProGuard, App Bundle, baseline profile。

The English summary is being prepared. Showing the original description.

Fandhe-AI/agent-reference-skills4Updated Oct 22, 2026

Android Jetpack Compose (Kotlin) の androidx Material3 コンポーネントリファレンス。 Button, IconButton, FloatingActionButton, Checkbox, Switch, Slider, TextField, SearchBar, DropdownMenu, Chip, DatePicker, TimePicker, Card, Scaffold, Dialog, BottomSheet, TopAppBar, NavigationBar, NavigationRail, Tab, Snackbar, ProgressIndicator, Badge, Icon, MaterialTheme, ColorScheme, Typography, Shapes。

The English summary is being prepared. Showing the original description.

Fandhe-AI/agent-reference-skills4Updated Oct 22, 2026

Android Jetpack Compose (Kotlin) のアニメーション・描画リファレンス。 androidx.compose.animation / graphics API。 AnimatedVisibility, AnimatedContent, animate*AsState, Animatable, AnimationSpec, Canvas, DrawScope, Brush, Path, Color, Image。

The English summary is being prepared. Showing the original description.

Fandhe-AI/agent-reference-skills4Updated Oct 22, 2026

See all skills by Fandhe-AI

Report a problem with this skill