본문으로 건너뛰기
cccskills
무료GitHub에 공개

infinitetalk

Generate talking-person videos from a portrait or an existing video and an audio track, aligning lip movements, expressions, and body motion with speech. It supports long-form generation and can create speech from text using Kokoro-82M.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

원문원문 설명 보기

自媒体创作者与内容创作者在制作数字人播报或视频重配音时,只需单张人像图片与音频,即可一键生成唇形、头部运动及身体姿态精准同步的无限时长说话视频。轻松搞定虚拟主播内容,大幅节省真人拍摄与后期剪辑时间!

설치 방법 보기

이럴 때 유용합니다

  • Create a talking-person video from a portrait and recorded speech
  • Generate a video using existing footage and a replacement audio track
  • Create a talking-person video from text using speech synthesis
  • Generate a long-form virtual presenter video

포함된 파일(5)

  • SKILL.md5.5 KB
  • references/environment_setup.md2.8 KB
  • references/model_download.md4.1 KB
  • references/usage_examples.md6.1 KB
  • scripts/infer_infinitetalk.py15.9 KB

SKILL.md(원문)

설치하기 전에 에이전트에게 전달되는 지시 내용을 확인할 수 있습니다.

InfiniteTalk - 音频驱动视频生成

任务目标

  • 本 Skill 用于:将音频(语音)转换为同步的说话人视频,支持从单张图片或现有视频生成音频驱动的说话视频
  • 能力包含:
    • Image-to-Video:从单张图片生成音频驱动的说话视频
    • Video-to-Video:对现有视频进行音频驱动的重配音
    • 多维度同步:唇形、头部运动、身体姿态、面部表情与音频精准对齐
    • 无限时长:支持无限制时长的视频生成
    • 低显存适配:支持量化、模型卸载等显存优化方案
  • 触发条件:当需要生成音频驱动的数字人视频、视频配音、虚拟主播内容时使用

前置准备

  • 模型下载:在使用本 Skill 前,必须先下载所需的模型权重文件,具体步骤见 references/model_download.md
  • 硬件要求:
    • GPU:推荐使用 16GB+ 显存的 GPU(可使用量化方案适配低显存设备)
    • 内存:建议 32GB+ 系统内存
    • 磁盘空间:至少 50GB 可用空间(模型权重约 30GB)
  • 环境配置:详细依赖安装见 references/environment_setup.md

操作步骤

模式一:Image-to-Video(图片生成视频)

  1. 准备输入

    • 确保有一张清晰的人脸图片作为输入
    • 准备音频文件(支持 mp3、wav 等格式)
    • 可选:使用 TTS 功能从文本生成音频
  2. 执行生成

    • 调用 scripts/infer_infinitetalk.py 进行推理
    • 参数说明:
      • input_path: 输入图片路径
      • audio_path: 驱动音频路径(或提供 text 使用 TTS)
      • output_path: 输出视频路径
      • mode: clip(单段)或 streaming(长视频)
      • size: infinitetalk-480(480P)或 infinitetalk-720(720P)
      • sample_steps: 采样步数(默认 40)
      • sample_audio_guide_scale: 音频引导强度(默认 4.0)
  3. 验证输出

    • 检查生成的视频是否同步良好
    • 确认唇形、头部动作与音频匹配
    • 如有异常,调整 sample_audio_guide_scale 参数

模式二:Video-to-Video(视频重配音)

  1. 准备输入

    • 准备参考视频文件
    • 准备目标音频文件
  2. 执行生成

    • 使用相同的脚本,但 input_path 指向视频文件
    • 脚本会自动提取视频的首帧作为参考
  3. 处理长视频

    • 使用 streaming 模式生成无限时长视频
    • 通过 motion_frame 参数控制驱动帧长度(默认 9)

模式三:使用 TTS 生成音频

  1. 文本转语音

    • 提供待合成的文本内容
    • 指定声音模型(Kokoro-82M)
    • 脚本会自动生成音频文件
  2. 生成视频

    • 使用生成的音频驱动视频生成
    • 支持双人对话模式(使用标记 (s1) 和 (s2) 区分说话人)

资源索引

注意事项

  • 模型权重较大(约 30GB),首次使用需要提前下载
  • 建议使用高显存 GPU(16GB+),低显存设备可使用量化方案
  • 输入音频建议采样率为 16000Hz,脚本会自动进行响度归一化
  • 输入图片/视频应包含清晰的人脸区域
  • 生成速度取决于 GPU 性能,480P 分辨率下生成 1 秒视频约需 5-10 秒
  • 如遇到显存不足错误,可尝试:
    • 降低分辨率(使用 size=infinitetalk-480)
    • 启用量化(添加 --quant int8 参数)
    • 启用模型卸载(添加 --offload_model true)

使用示例

  • 基础图片生成视频:
    python scripts/infer_infinitetalk.py \
      --input_path ./input.jpg \
      --audio_path ./audio.wav \
      --output_path ./output.mp4 \
      --size infinitetalk-480 \
      --mode clip
    
  • 长视频生成:
    python scripts/infer_infinitetalk.py \
      --input_path ./input.jpg \
      --audio_path ./long_audio.wav \
      --output_path ./long_output.mp4 \
      --size infinitetalk-480 \
      --mode streaming
    
  • 使用 TTS 生成:
    python scripts/infer_infinitetalk.py \
      --input_path ./input.jpg \
      --text "你好,今天天气真不错" \
      --output_path ./tts_output.mp4 \
      --size infinitetalk-480
    

리뷰

아직 리뷰가 없습니다. 사용해 본 소감을 남겨 주세요.

댓글

로그인 없이 쓸 수 있습니다. 사용 후기, 질문, 작동하지 않은 환경 등을 편하게 남겨 주세요.

아직 댓글이 없습니다. 첫 댓글을 남겨 보세요.

보내면 바로 공개됩니다. 이메일 주소나 전화번호 같은 개인 정보는 쓰지 마세요. URL은 2개까지입니다.

0 / 1,000자

이 양식은 reCAPTCHA로 보호되며 Google 개인정보처리방침 및 서비스 약관이 적용됩니다.

같은 저장소의 스킬

Organize AI agents into execution, management, and review roles for complex projects. Choose preset or custom teams, share project context and decisions, and combine their discussions and work into meeting records, feasibility reports, or implementation outputs.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

  • Reviewing a technical architecture from several perspectives
  • Discussing product pricing across market and cost considerations
  • Assessing a new product's feasibility
anbeime/skill8.3천2026년 10월 18일 업데이트

Generate character images, backgrounds, synthetic speech, and music for product videos featuring 小省导购员, a digital shopping presenter. Coordinate these assets with InfiniteTalk to produce a 25-second vertical video made from five scenes.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

  • Producing a 25-second vertical product presentation video
  • Generating reference images for the 小省导购员 character
  • Creating business setting backgrounds for a video
anbeime/skill8.3천2026년 10월 18일 업데이트

Convert PDF, Word, and Excel documents into structured Markdown for search and knowledge bases. The skill tries three parsers in sequence when needed and returns metadata, a confidence score, and the parser used.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

  • Prepare documents for retrieval-augmented generation
  • Structure documents for an internal knowledge base
  • Extract structured text from contracts
anbeime/skill8.3천2026년 10월 18일 업데이트

Organize parsed documents into four color-coded cards covering facts, explanations, risks, and actions. Preserve source references and generation details so readers can review evidence, identify uncertainty, and consider next steps in research, financial, or legal analysis.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

  • Separating facts from interpretations in financial reports
  • Organizing evidence and risks in legal documents
  • Turning research documents into evidence-linked analysis cards
anbeime/skill8.3천2026년 10월 18일 업데이트

Record operations across multiple AI agents and connect events into a traceable history. Search records by tracking ID, time window, or responsible component to support audits and investigations, with local storage available when the vector database fails.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

  • Trace task dispatch and execution across agents
  • Search audit records by time or responsible component
  • Keep recording events during vector database failures
anbeime/skill8.3천2026년 10월 18일 업데이트

Screen documents and external URLs before they enter a processing workflow. Check blocked domains and document permissions, then produce a pass or reject decision, a risk report, and a tracking ID for later review.

한국어 요약은 준비 중입니다. 영어 요약을 표시하고 있습니다.

  • Screening documents before adding them to a knowledge base
  • Checking external URLs against a domain blocklist
  • Reviewing document permissions before processing
anbeime/skill8.3천2026년 10월 18일 업데이트

anbeime의 스킬 모두 보기

이 스킬의 문제 신고