V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
earisty
V2EX  ›  分享创造

[小红书神器] 把视频教程自动转成漫画图文,植入自己的角色,还可以用来发小红书

  •  
  •   earisty · 8 天前 · 1222 次点击

    造了个轮子:把视频教程自动转成漫画图文,植入自己的角色,还可以用来发小红书

    V 友们好,平时看 B 站或者小红书上的教程视频(比如做菜、手工或者一些技术操作),总觉得跟着视频一步步做很麻烦,得不停地暂停、回放。有时候就想看个省流版的图文步骤。

    手动截图拼图太累了,所以最近利用业余时间搓了一个 AI 小工具,想把这个流程自动化。

    这工具主要做:

    输入一个视频链接(目前支持了 B 站和小红书),它会自动分析视频里的关键步骤,然后把这些步骤重新绘制成一套手绘/漫画风格的图文教程,还能融合你自己的虚拟角色,更有特色(可以直接看 github readme 核心工作流大概是这样:

    1. 解析视频:提取关键帧。

    2. AI 理解:接入了 Google Gemini 的深度思考模式,让 AI 去理解视频里到底在干啥,总结出关键步骤的描述文本。

    3. 重绘与融合(比较好玩的功能):根据描述生成手绘图。重点是,你可以上传一个自己的角色形象(比如你的头像 IP 、或者家里的猫),AI 会尝试把这个角色融合到教程画面里去当主角。

    4. 生成成品:最后输出一个带解说文字的分镜长图,或者适合发社交媒体的九宫格。

    目前还在迭代中,角色融合有时候还会有点抽风,但大体流程跑通了。

    发上来给大家看看,希望能收到一些反馈和建议。顺便求个 star ,有兴趣的可以一起开发~

    github: https://github.com/RanFeng/clipsketch-ai

    在线免费试用: https://clipsketch-ai.vercel.app/

    我自己做了个成品如下:

    成品演示

    感谢!

    3 条回复    2025-12-05 17:16:33 +08:00
    rming
        1
    rming  
       8 天前 via iPhone
    不错的思路
    xy19009188
        2
    xy19009188  
       4 天前 via iPhone   ❤️ 1
    有没有 docker 版
    earisty
        3
    earisty  
    OP
       2 天前
    @xy19009188 暂无哎,以后可以加一个
    关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   2520 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 14:58 · PVG 22:58 · LAX 06:58 · JFK 09:58
    ♥ Do have faith in what you're doing.