<div data-rbd-draggable-context-id="9" data-rbd-draggable-id="fbhmh"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="fbhmh-0-0"> <div class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="fbhmh-0-0"><span data-offset-key="fbhmh-0-0">Synclabs发布新版的唇型同步模型:Sync-1.6.0,</span><span style="font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, Oxygen-Sans, Ubuntu, Cantarell, 'Helvetica Neue', sans-serif;">新版模型进行了唇形同步升级 </span></div> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="ddumo"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="ddumo-0-0"> <ul> <li class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="ddumo-0-0"><span data-offset-key="ddumo-0-0">能够产生平滑、准确的唇形</span></li> </ul> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="e6ea1"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="e6ea1-0-0"> <ul> <li class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="e6ea1-0-0"><span data-offset-key="e6ea1-0-0">同时减少视频帧之间的闪烁现象</span></li> </ul> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="co2o8"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="co2o8-0-0"> <div class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="co2o8-0-0"><span data-offset-key="co2o8-0-0">SyncLabs构建了基于给定音频条件生成视频的音视频模型。</span></div> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="28m30"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="28m30-0-0"> <div class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="28m30-0-0"><span data-offset-key="28m30-0-0"> </span></div> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="4hjql"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="4hjql-0-0"> <div class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="4hjql-0-0"><span data-offset-key="4hjql-0-0">用户只需提交音频和视频,SyncLabs会同步视频至音频,并同步口型,无需训练,最终返回一个口型同步的视频。</span></div> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="560bu"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="560bu-0-0"> <div class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="560bu-0-0"><span data-offset-key="560bu-0-0"> </span></div> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="f7iob"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="f7iob-0-0"> <div class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="f7iob-0-0"><strong>你可以通过以下两个方法来获得其服务</strong></div> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="68los"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="68los-0-0"> <ul> <li class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="68los-0-0"><span data-offset-key="68los-0-0"><strong>Playground:</strong>Synclabs提供了一个直观的浏览器界面,让你可以直接体验Sync的功能。</span></li> </ul> </div> </div> <div data-rbd-draggable-context-id="9" data-rbd-draggable-id="be9sl"> <div class="" data-block="true" data-editor="25cvi" data-offset-key="be9sl-0-0"> <ul> <li class="public-DraftStyleDefault-block public-DraftStyleDefault-ltr" data-offset-key="be9sl-0-0"><span data-offset-key="be9sl-0-0"><strong>API集成:</strong>你还可以通过API将其模型集成到自己的应用、平台或服务中,开发相应的产品。</span></li> </ul> 在线体验:<a href="https://synclabs.so/" target="_blank" rel="noopener">synclabs.so</a> <img class="wp-image-4990 aligncenter" src="https://img.xiaohu.ai/2024/03/demo-1024x560.png" alt="" width="778" height="426" /> <h3>视频翻译+AI配音</h3> </div> <span data-offset-key="68los-0-0">Synclabs</span>还推出了一个创新的视频翻译AI配音应用<strong>:<a href="https://github.com/synchronicity-labs/translation-starter" target="_blank" rel="noopener">translation-starter</a>,</strong>允许用户在不到30分钟内启动和盈利。通过提供YouTube视频链接,该应用能够翻译视频内容并实现与音频完美同步的视频口型。该项目已开源,并提供了简单的操作教程。它利用了多个工具和服务,包括视频转录、文本到语音生成、口型同步、互联网支付和快速部署,创建了一个无缝的工作流程。 [video width="1920" height="1080" mp4="https://img.xiaohu.ai/2024/03/X2Twitter.com_17524810433688821761080p.mp4"][/video] 非常适合想要将视频翻译、声音克隆和口型同步技术集成到他们的业务或工作流中的用户。 <ul data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">一个可以在30分钟内启动和盈利的AI配音应用。</li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">用户只需提供一个YouTube链接,应用便能翻译视频并实现完美的口型同步。</li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">项目代码已经开源。</li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">提供了简单的教程说明应用的工作原理。</li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">应用的工作流程包括:使用<a class="css-1qaijid r-bcqeeo r-qvutc0 r-poiln3 r-1loqt21" dir="ltr" style="font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, Oxygen-Sans, Ubuntu, Cantarell, 'Helvetica Neue', sans-serif;" role="link" href="https://twitter.com/gladia_io" data-immersive-translate-walked="b69d0b63-43c5-4925-a542-6e5401335e01">@gladia_io </a>进行视频的转录和翻译,使用 <a class="css-1qaijid r-bcqeeo r-qvutc0 r-poiln3 r-1loqt21" dir="ltr" role="link" href="https://twitter.com/elevenlabsio" data-immersive-translate-walked="b69d0b63-43c5-4925-a542-6e5401335e01">@elevenlabsio</a> 克隆发言人的声音并生成文本到语音,使用@synclabs_ai将视频与翻译后的音频进行口型同步,通过@stripe实现互联网支付,最后使用 <a class="css-1qaijid r-bcqeeo r-qvutc0 r-poiln3 r-1loqt21" dir="ltr" role="link" href="https://twitter.com/vercel" data-immersive-translate-walked="b69d0b63-43c5-4925-a542-6e5401335e01">@vercel</a> + <a class="css-1qaijid r-bcqeeo r-qvutc0 r-poiln3 r-1loqt21" dir="ltr" role="link" href="https://twitter.com/supabase" data-immersive-translate-walked="b69d0b63-43c5-4925-a542-6e5401335e01">@supabase</a> 在不到15分钟内部署 。</li> </ul> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong><a href="https://github.com/synchronicity-labs/translation-starter" target="_blank" rel="noopener">Translation-starter</a>项目的主要功能特点包括:</strong></p> <ol data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">视频翻译</strong>: 该应用能够将任何视频内容翻译成用户选择的任何语言,适用于多种语言环境。</p> </li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">完美口型同步</strong>: 利用人工智能技术,确保翻译后的视频中的口型与说话声音完美同步,提高观看体验。</p> </li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">声音克隆和语音合成</strong>: 通过Eleven Labs等服务集成了声音克隆和语音合成技术,可以生成与原始说话者声音相似的声音,增加视频的自然度和真实感。</p> </li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">快速部署</strong>: 提供了快速部署的指南和工具,使用户能够在15分钟内部署一个生产就绪的应用。</p> </li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">多平台集成</strong>: 项目整合了多个第三方服务和平台,包括Next.js(Web应用框架)、Vercel(部署)、Supabase(数据库、认证、存储)、Inngest(无服务器队列)和Stripe(支付处理)。</p> </li> <li data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"> <p data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d"><strong data-immersive-translate-walked="c7890bf9-5a89-45ae-b10a-f1e4a343457d">自定义和扩展</strong>: 通过详细的本地运行指导,用户可以自定义和扩展应用,满足特定的业务需求或个人偏好。</p> </li> </ol> GitHub:<a href="https://github.com/synchronicity-labs/translation-starter" target="_blank" rel="noopener">https://github.com/synchronicity-labs/translation-starter</a> 在线演示:<a href="https://translate.synclabs.so/" target="_blank" rel="noopener">https://translate.synclabs.so/</a> 下面是关于如何使用的简单教程: [video width="1662" height="1080" mp4="https://img.xiaohu.ai/2024/03/X2Twitter.com_17524963292329041931080p.mp4"][/video] </div>