传媒:图像篇专题(二):解析Midjourney的成长之路-小而美的AI绘画龙头,静待花开终有时.pdf

我们将“Al+传媒”的研究框架体系定义为“通用大模型”+”行业小样本”的技术架构,“Al+传媒”在应用层表现效力优劣的

关键取决于通用大模型对垂直应用的适配程度及迭代速度,

1、适配程度是指:多模态的输入及输出是否匹配应用层的输入及输出。比如GPT-4属于“图+文”多模态输入+“文”单模态输

出,因此输入模态为“图或文”且输出模态为“文”的垂直应用更适配GPT-4。

2、迭代速度是指:应用层产生的“行业小样本”的数据量是否匹配大模型的迭代要求。根据我们对GPT模型的理解,比如BingAl产生的“行业小样本”源自Bing的搜索结果,ChatGPT产生的“行业小样本”源自用户的反馈和互动。因此我们认为,对于超出GPT所使用的预训练数据库范围(2021年9月前)的事实性表述,Bing Al反馈的是搜索的结果,ChatGPT反馈的是用户主动的观点,Bing Al反馈的效果比ChatGPT更好。

我们认为“行业小样本”的价值取决于数据数量及数据质量,数量大且质量高(多模态)的应用场景复用及迭代Al能力的效力更强,因此更进一步理解我们的研究框架,我们将“行业小样本”的结构分层(中层小模型+下层应用及内容),并将“行业小样本”的结合方式分类(调用+训练):

1、“行业小样本”的数据集来自小模型或应用及内容:Al产业链包括上层大模型、中层小模型、下层应用及内容,包括应用及内容直接接入大模型或通过小模型接入大模型两种方式,即“大模型+应用及内容”或“大模型+小模型+应用或内容”,其中具备特定功能的AIGC软件产品及MaaS我们理解为“小模型”+“应用”的技术范式,本身具备较高质量的Al能力,若接入匹配的多模态大模型,有望实现能力上的质变突破。

2、“行业小样本”的结合方式包括“能力调用”及“能力训练”两类:

(1)“能力调用”是指下游垂类场景直接调用通用大模型的通用能力,并基于垂类场景内产生的特性化数据不断提升调用能力在垂类场景内的适配程度。我们认为现阶段下游应用及内容主要采取此类方式接入大模型能力,此类方式可高效快速调用大模型先进能力,在时间上及成本上具备优势。我们认为“能力调用”匹配“Al+传媒”的第一层利好,即通过Al降本增效,大幅提高数据及内容的供给量。内容产业本质由供给决定需求,因此内容供给量的明显提升将有效带动传媒基本面拐点及增量空间出现。

(2)“能力训练”是指下游垂类场景将通用大模型针对特性化数据集进行再训练,从而形成垂类场景专属大模型。例如彭博社利用自身丰富的金融数据源,基于开源的GPT-3框架再训练,开发出了金融专属大模型BloombergGPT。我们认为“能力训练”匹配“Al+传媒”的第二层利好,即下游垂类场景本身的数据或内容反过来“再训练”通用大模型(或开源大模型),形成传媒内容场景专属大模型,形成更稳定且高质的内容输出。我们认为训练难度文本<图片<视频<影视<游戏,且内容数量逐步递减但内容质量逐步递增,即偏后端的影视、游戏在内容数量上训练量级不足,因此高质量的内容形态首先通过“能力调用”输出AIGC内容,再将AIGC内容“再训练”大模型以解决高质量内容数量不足的问题(合成数据“再训练”范畴)。

本文将选取国外Al图像生成领域的龙头之一进行解析,Midjourney是国外一款搭载在Discord社区上的图像生成应用,通过差异化产品定位拥有了早期数据积累及活跃社区,截至2023年3月在Discord上的用户数超1300万,是目前用户数最多的服务器,年营收约1亿美元。公司团队成员仅11人,人效极高,团队成员及顾问拥有Al技术及产品创业的复合背景,从不同纬度赋能公司发展。

基于CLIP及Diffusion的开源模型构建专属闭源模型,数据飞轮快速构建护城河。Midjourney通过参考CLIP及Diffusion开源模型的基础上抓取公开数据进行训练,从而构建自己的闭源模型以适应行业技术的飞速发展。此外,通过收集用户反馈及数据标注,Midjourney不断迭代模型,在Value Chain上占据多个数据层、模型层、应用层整个技术栈。

以艺术风格建立差异化竞争优势,具备广阔的用户基础,目标客群付费意愿强烈。Midjourney拥有多种不同风格可供选择,艺术风格在市场上具备差异化优势。prompt简短生成效果惊艳,具备较强商业性,锁定基数大付费意愿强的创意设计目标客群,被大量实践证明能显著提高工作效率。2022年3月V1发布时仍参考了很多的开源模型,同年4月、7月、11月分别发布

V2、V3、V4,其中V4补充了生物、地点等信息,迭代出了自己的模型优势,增强对细节的识别能力及多物体、多人物的场景塑造能力。2023年3月,在经历多次更新后的Midjourney V5版本解决了一些技术难题,完成了跨越性的突破。

Midjourney与Discord双轮驱动,激励用户点赞积累标注数据。Discord为Midjourney的启动提供了绝佳的社交体验平台,成功将其带入了大众市场。一方面Discord bot降低了用户使用门槛;另一方面,图片创作是一个在讨论中不断迭代的过程,欣赏其他用户的作品有也助于激发灵感。此外,Midjourney通过赠送免费使用时间来激励用户点赞,从而积累标注数据不断优化模型生成效果。

本文来自知之小站

 

PDF报告已分享至知识星球,微信扫码加入立享3万+精选资料,年更新1万+精选报告

(星球内含更多专属精选报告.其它事宜可联系zzxz_88@163.com)