Meta 将涂鸦变动画的AI项目对外开源

2023-04-14 09:49:00 来源:黑科技

4月14日,Meta 对外开源了一个人工智能项目,通过本次开源,可以让任何人将他们的涂鸦变为现实动画。该公司希望通过将动画绘图作为开源项目提供,其他开发人员将能够创造新的、更丰富的体验。

Fundamental AI Research (FAIR) 团队最初于 2021 年发布了该工具的网络版。它要求用户上传单个类人角色的绘图或选择一个演示图。如果用户使用自己的涂鸦,会看到一份同意书,询问 Meta 是否可以使用绘图来帮助训练其模型。

接下来,用户需要调整捕获框的大小,使其紧贴创作。该工具为用户提供了一支笔和橡皮擦,可以在调整关节的位置之前调整绘图。用户会看到草图的动画版本。用户可以从四种类别的各种预设动画中进行选择:舞蹈、滑稽、跳跃和行走。

动画绘图利用对象检测模型、姿势估计模型和基于图像处理的分割方法来捕获绘图的数字版本。然后它使用传统的计算机图形技术对图像进行变形和动画处理。

在几个月内演示上线,用户已授予 Meta 许可,可以将超过 160 万张图像用于训练目的。有些人上传了公司标志、动漫人物、鱼和毛绒动物的图像,尽管该工具规定只有人物形象才能工作。

除了对包含声音效果和文本叠加的更深入工具集的请求外,人们上传到该工具的一系列图像表明人们对更广泛的绘图到动画体验有着广泛的兴趣。在某种程度上,这导致 Meta 开源了该项目的源代码,其中包含约 180,000 张图纸的数据集。“通过将模型和代码作为开源发布,该项目为开发人员提供了一个构建和扩展项目的起点,在开源社区中培养了创新和协作的文化,”Meta 在博客文章中写道。

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。