衡宇 西风 发自 凹非寺
量子位 | 公众号 QbitAI
原来现在的二刺猿都是这样玩的——
AIGC辅助下,0绘画基础也能轻松捏崽展开幻想,没有喜欢的角色粮,根本没在怕的!
青山刚昌28年没有让《名侦探柯南》新兰党如愿,这就速速安排俩人结婚:
《鬼灭之刃》《间谍过家家》《咒术回战》……自己动手丰衣足食:
好家伙,这个名为捏Ta的“游戏”,让二刺猿们玩嗨了:有人去年一年用它捏了几百个自己的娃(震惊脸)。
打听了一圈,它不仅是个小程序,更是个AI驱动的UGC共创社区,平均每次活动都有数万次的UGC投稿。
重度二次元人士对它认可度很高,而且背后创始人也是个老二刺猿了(doge)。
穿越进幻想世界
说回捏Ta,它的主要功能很聚焦,就是捏图。
因为用上了AIGC能力,还有现成提示词供人选择,所以哪怕是画画小白+Prompt小白,也能轻轻松松秒秒钟把脑海里的二次元娃捏出来(而且还不OOC)。
而且可较好地保持角色一致性,覆盖了角色方方面面的细节特征,所以捏出来的图可用来自制连环画:
甚至还能打造一整个家族的故事:
只要脑洞够大,啥都能捏出来:
至于具体怎么操作,总的来说有文字捏、图片捏、CP图三种捏法。
还有上百种角色、上百种风格以及“魔咒词典”里各种设定可以挑选,选中的不同“魔咒”都会像程序员的编码器一样高亮区分。
从我们的体验效果来看,控制性强如可爱的弥豆子的肱二头肌:
图片捏,可以选择上传手机相册里的图片也可以选择此前生成的图片进行“二创”,可调节捏的力度。同文字捏一样可以自己设计prompt,也可以直接挑选。
CP图,需要分别描述两个角色,而且还有CP模版可选择。
让心中CP牵手成功不是问题:
好的脑洞当然不满足于同人创作,自定义自己的专属原创角色——捏宝也行,然后就可以在捏图中捏自己的宝宝,俗称“养娃”:
如果你什么灵感都没有,建议重点体验“奇旅”的神奇玩法,玩家可以选择已有角色或是自己创造的角色作为“探员”,体验剧情故事,培养个性人设。
(椰树就是咱自己起名、自己捏的专属探员)
简单来说,奇旅玩法就是系统描述剧情,玩家根据剧情捏对应的图,角色还会给你评价:
把图和剧情文字搭配起来,一个属于你和你的捏宝的连环漫画就诞生了。
敲黑板!从角色到台词,到剧情,再到最后的生图,整个奇旅全都是AIGC的功劳。
根据八卦来的消息,捏Ta背后基于Stable Diffusion开源框架,同时将基础模型重新训练,持续微调对齐迭代——团队也透露,之后会推出一个开源二次元模型。
此外,模型使用了多个专家微调网络的MoE来固定角色,而不仅仅是使用一张参考图的特征提取。这样的角色建模覆盖了方方面面的角色细节特征,而不是一个单角度或者只是脸部的特征。
因此在细节更一致的前提下角色的表现力更强,更能做出跟一张参考图片上完全不一样的样子。
而这样的固定也不需要任何模型训练时间,有很强的批量能力,所以用户一年做500个角色也不是问题。
做“AI时代的米哈游+小红书”
一通体验,捏Ta的特点就呼之欲出了。
首先,它是一个踩着时代热点而生的AI创作社区。
利用底层AI大模型的多模态生成能力,为用户提供了新一代UGC创作的基础元素:角色和故事。
其次,它能带给用户个性化体验。
因为全流程的AIGC参与,加上储备的角色库和事件库,捏出的任何娃,都可以用捏图推进剧情,就像在异世界摆好了机位,只等按下快门。
好,接下来就是一个保留项目了——这个AI社区背后是什么样一支团队?
量子位获悉,捏Ta背后的公司在2022年12月成立,名叫看见概念,团队目前有15名成员。
创始人兼CEO是胡修涵,本人就是个二次元爱好者——故而他能get二次元用户自发玩梗的热情和对好的创作平台的渴望。“捏Ta”这个名字不仅生动形象让人手痒(想捏),还是日语“梗”(Neta)的读音。
胡修涵与看见概念的合伙人在Meta工作时相识。那时候,胡修涵担任技术组长负责Facebook、WhatsApp、Instagram三个平台的视频相关全套技术方案,包括发布的内容工具、内容管理,以及版权数据分析、广告系统对接等等。在最早的Pix2Pix、StyleGAN时代,就成功将AI功能落入覆盖了全球十几亿人的创作者生态。
归国后,胡又在内容科技独角兽特赞工作过一段时间。
2022年年底,ChatGPT打响第一枪,胡修涵觉得这一波AI浪潮是一次对UGC生态带来核心影响的机会。
我们瞄准的可能是最大的一个机会,类似于“米哈游+小红书”的机会。
每个人都有自己的新的Avatar,在社区和其他人交换“标签”共创,这是原来虚拟人技术没有C端化时做不到的,即便能够设计角色,也无法让角色有自己的故事成长。
此外,看见概念团队还是有技术本钱在身上的。
团队成员深入参与过多个开源社区项目,参与开发ComfyUI插件生态、使用最多的SD安装镜像,也为AnimateDiff、二次元的最好的开源模型之一AIDXL、Chat凉宫春日等有所贡献。
这些项目不限于文生图,也包括动画、语言生成。
过往的技术积累,能够最大限度保障捏Ta背后的AI多模态技术不会掉队。
我们希望做的是用最小的成本同时能支持文字、语音、漫画、视频等多个方向的技术能力积累,同时获得大量真实的需求反馈。
与此同时,一直以来团队成员拥有的开源精神,也成为了目前捏Ta社区的基因。
胡修涵聊到:“二次元有很好内容协作基因,字幕组、动画组、鬼畜二创都是曾经的内容协作组织,对拥抱一个开放的共创环境至关重要。”
毕竟,“为爱发电”意味着能够尽可能降低人才和社区组织的成本。
“如果未来世界每个人一生都有几个AI伙伴,那我们希望它们是精彩的、有温度的、有记忆的。”胡修涵表示,团队希望的就是打造塑造AI伙伴的工具,让每个人的故事里有更多人生延展性。
“能够有一个在短暂的时间内体验到瞬息全宇宙的机会。