封面
统计数据
据统计,在2022年中国儿童绘本市场规模约为80亿元,预计到2025年将超过100亿元,在中国图书零售市场中占比达到 28.27% 。
并且随着 二孩政策 的全面放开和家长对儿童早期教育重视的提高,儿童绘本市场还会继续快速增长,市场潜力巨大。
但绘本的制作也是较为复杂的。要对故事情节进行构思,还要进行绘制。
但最近腾讯最近 开源 的 SEED-Story 能够自动生成绘本,大大降低了儿童绘本的市场准入门槛。
项目介绍
SEED-Story,是一种基于 SEED-X 的 MLLM,能够生成由丰富连贯的叙述文本以及 人物和风格一致 的图像组成的 多模态长篇故事。
输入一张图片和一段文本,SEED-Story 就可以生成与图片人物一致,剧情丰富的连环画。
故事最多可以跨越 25 个多模态序列,想要获得更长的故事就需要再次输入照片和文字。
在输入时,照片和文字的组合是很重要的,输入 相同的图片 但是输入的 文字不同 就可以得到 两个不同的故事。
我们可以看到,输入的图片是一致的,但第一张图的描述中有一个带着黄色帽子的男人,所以在后续的故事中就出现了这个人物。
而第二张输入的图片描述时没有这个人物,在后续的故事中也就没有出现这个人物。
可以通过输入不同的描述来生成 不同的故事,得到 更多的灵感。
总结
通过该项开源技术,绘制 儿童画本 变得简单迅捷,想要在儿童文学作品的市场分上一杯羹也会变得更加简单。
同时该技术还能应用在 教育领域,在给儿童做启蒙教育时也能够加以应用,让儿童教育更加简单。
项目链接:
https://github.com/TencentARC/SEED-Story
关