Live_Portrait_Monitor ：利用摄像头驱动静态图像转换为实时动态视频

Live_Portrait_Monitor 基于快手的这个 LivePortrait 项目，实现了摄像头驱动图像转换为实时动态视频，生成逼真的肖像动画效果。 这个项目旨在让静态肖像通过摄像头变得栩栩如生。通过预训练模型和脚本，用户可以将静态图像转换为动态视频。 [video width="848" height="464" mp4="https://img.xiaohu.ai/2024/07/349343836-80020a36-6ec9-4efa-abf7-c1adbbfc6f39.mp4"][/video] 肖像动画生成 通过预训练模型和推理脚本，将静态肖像图像转换为动态视频，生成逼真的肖像动画效果。 实时和非实时推理 支持从监视器或网络摄像头输入图像，实现实时推理和非实时推理，用户可以选择不同的输入源进行肖像动画生成。 预训练模型支持 包含多种预训练模型，包括面部特征提取模型、运动提取模型和生成模型，确保高质量的肖像动画效果。 提供了用于面部检测的InsightFace模型，确保精准的面部特征定位。 定制化设置 用户可以通过调整脚本参数，进行定制化设置，如指定输入源、关闭某些特定功能等，以达到最佳效果。 提供了调整驱动头部位置的功能，通过修改脚本参数来调整生成结果的头部位置。 一些案例展示： Monitor输入 输入方式 ：通过预录制的视频或静态图像作为输入。 使用场景 ：适用于需要使用已有素材（例如照片或视频）进行肖像动画生成的情况。 实现方法 ： 通过脚本 inference_monitor.py 运行，将静态图像或视频作为输入源，生成对应的动态肖像。 示例命令： python inference_monitor.py -s assets/examples/source/MY_photo.jpg [video width="848" height="464" mp4="https://img.xiaohu.ai/2024/07/349343877-471c65a2-567f-4822-93af-882f0d041f18.mp4"][/video] [video width="848" height="464" mp4="https://img.xiaohu.ai/2024/07/349343925-3bf96941-3a93-475b-9d47-8c70e0bd1e48.mp4"][/video] [video width="848" height="464" mp4="https://img.xiaohu.ai/2024/07/349343992-23a83942-48a6-4922-8a50-b8f7ebdaa143.mp4"][/video] [video width="848" height="464" mp4="https://img.xiaohu.ai/2024/07/349343968-c65006c6-bfc2-4c99-b7d0-4d8853f0c9da.mp4"][/video] Webcam 输入方式 ：通过实时捕捉网络摄像头的图像作为输入。 使用场景 ：适用于实时应用，例如视频通话、实时演示等场景，通过摄像头捕捉当前画面进行肖像动画生成。 实现方法 ： 通过脚本 inference_org.py 运行，使用网络摄像头捕捉实时图像，生成对应的动态肖像。 示例命令： python inference_org.py -s assets/examples/source/s9.jpg -d assets/examples/driving/d0.mp4 --no_flag_pasteback [video width="852" height="480" mp4="https://img.xiaohu.ai/2024/07/347285372-4e16fbc7-8c13-4415-b946-dd731ac00b6e.mp4"][/video] GitHub： https://github.com/Mrkomiljon/Live_Portrait_Monitor LivePortrait 项目介绍 https://xiaohu.ai/p/10845

Menu

分类目录

Live_Portrait_Monitor ：利用摄像头驱动静态图像转换为实时动态视频

Related Posts

Runway 推出视频扩展工具：Expand Video 可以无缝的为视频扩展画面

GetPickle AI是一款革新虚拟会议的AI工具让你的替身帮你开会你去干别的

Comfyui_Object_Migration：一致性换衣模型和工作流实物衣服一键穿上

ElevenLabs 推出构建语言对话AI代理的功能可使用其语音模型接入AI模型

Stripe 推出 Stripe Agent Toolkit：让 AI 代理能自动进行支付帮你购物、订机票等

Mistral AI 发布了全新的 Pixtral Large 开源模型超越 GPT-4o、Gemini-1.5 Pro 和 Claude-3.5 Sonnet

Recommendeds

微软推出 Recall 功能它能记住你在电脑上进行的一切操作和信息

Cradle：仅靠屏幕图像输入 AI模仿人类玩《荒野大镖客2》

Meta AI 推出新一代SAM 2 可实时在图像或视频中识别出特定对象并进行跟踪

Jamba：首个Mamba的生产级模型开创性的SSM – Transformer架构

LlamaFS：基于Llama 3的能自动帮你分类整理电脑里文件的工具

和 GPT 4o 匹敌世界上最快的语音机器实现500毫秒的语音到语音响应

Chameleon：能同时理解和生成文本与图像混合模态模型

DuckDuckGo 推出私密 AI聊天机器人承诺不会使用你的数据训练模型

Google 宣布 Gemini 1.5 Pro 开放 API 新增对原生语音理解能力

BioMedLM ：一个可以在笔记本电脑上运行推理的生物医学语言模型

Welcome Back!

Retrieve your password

Add New Playlist

Are you sure want to unlock this post?

Are you sure want to cancel subscription?

Menu

分类目录

Live_Portrait_Monitor ：利用摄像头驱动静态图像转换为实时动态视频

Support authors and subscribe to content

加入会员

Related Posts

Recommendeds

Welcome Back!

Retrieve your password

Add New Playlist

Are you sure want to unlock this post?

Are you sure want to cancel subscription?