//再不认真就输了!
//致力于发现AIGC动态与教程。

喜好儿AI周报Weekly(第3期)阿里研究院新AI框架,一张照片生成动画视频 | Qreates | AI模特Aitana | Pika1.0 | SDXL Turbo | SparseCtrl | 多模态任务智能体AI |

探索人工智能,洞察智慧价值,一口气读完本周AIGC新鲜事

本期导读:

  • 产品设计生成神器Qreates
  • AI模特Aitana成网红
  • Stability AI发布SDXL Turbo
  • Pika发布了新的AI视频模型Pika1.0
  • 视频版本的ControlNet——SparseCtrl
  • 北大清华联手推出多模态任务智能体AI模型
  • 阿里研究院新AI框架,一张照片生成动画视频

https://heehel.com/aigc/qreates-product-design-artifact.html

Qreates是一个可以将图片生成产品样机模型的AI工具网站,可以自由改变产品的角度,镜头,大小等,目前已经开发公测。这一产品设计神器不仅简化了设计流程,而且提供了全方位的设计自由度,从而为创作者们开辟了全新的创作可能性。Qreates产品设计神器的推出,标志着设计领域正迎来一场智能工具的革新浪潮,将技术与创意完美融合。未来,Qreates有望成为人工智能创新设计AI工具领域的引领者,推动设计工作的快速、高效发展。

Qreates使用网址链接:
https://qreates.app/signup/


https://heehel.com/ai-news/ai-autonews/ai-model-aitana.html

最近,一位名叫Aitana的粉红色头发美女网红在社交媒体上崭露头角,她拥有超过15万的粉丝,每条动态都能轻松获得上万点赞。然而,令人惊讶的是,Aitana并非真实存在的人物,而是由西班牙的AI模特公司The Clueless打造的人工智能虚拟形象。据创始人称,每接一条广告,Aitana可获得约1000欧元(约7.8k人民币)的收入,平均月收入为3千欧元,最高时可达一万。


https://heehel.com/aigc/sdxl-turbo.html

Stability AI再次引起行业关注,发布了经过SDXL蒸馏的全新模型——SDXL Turbo。该模型在图像生成领域取得了巨大突破,将类似LCM生成图片所需步数从原本的50步缩减至仅需1步。据该公司CEO透露,SDXL Turbo在4090显卡上可实现每秒14帧的惊人图像生成速度,为用户提供了更加高效的图像处理体验。

stability.ai官方网站地址:
https://stability.ai/

SDXL Turbo模型下载网址链接:
https://civitai.com/models/215418?modelVersionId=242733

模型和权重下载网址链接:
https://huggingface.co/stabilityai/sdxl-turbo


https://heehel.com/aigc/pikalabs.html

尽管 Runway 在AI视频生成领域目前处于领先地位,但是Pika发布的Pika1.0也紧追其上。Pika 1.0 声称可以在不到一分钟的时间内生成单个镜头的视频动画,并展示了一些令人惊艳的成果。与此同时,Pika 还预告了 beta2.0 版本的到来。相比这次升级,Pika 1.0 在生成动画视频方面, 展示了更丝滑的场景感和更连续的画面,给人带来更加沉浸的体验。

Pika1.0官方网站地址:
https://pika.art/

PikaLabs官方网站地址:
https://pikalabs.org/


https://heehel.com/aigc/video-version-of-controlnet.html

一个可以增强AI生成视频可控性的项目——SparseCtrl,这个项目的诞生将为Animatediff注入新的生命力,相当于是视频领域的ControlNet。专注于视频生成,解决了在使用ControlNet进行视频生成时每一帧都需要手动介入的问题。通过SparseCtrl,用户不仅能够自动选择关键帧来介入,降低了资源消耗,还能更灵活地掌控视频生成的过程 。

详细的论文网址链接:
https://guoyww.github.io/projects/SparseCtrl/


https://heehel.com/aigc/an-embodied-generalist-agent-in-3d-world.html

清华大学与北京大学研究团队共同开发了一种名为 LEO 的共享模型架构,具有多模态和多任务智能体。LEO 是一个在3D场景中具备感知、基础、推理、规划和行动能力的智能模型。它能为3D场景中的物体或事件创建描述性文字,回答关于3D环境内的问题并进行逻辑上推理,并能在其中找到特定的位置或物体,甚至控制AI机器人执行特定任务。

LEO项目及演示网址:https://embodied-generalist.github.io/
LEO项目论文链接:https://arxiv.org/abs/2311.12871
LEO项目下载地址:https://github.com/embodied-generalist/embodied-generalist


https://heehel.com/ai-news/reference-net.html

只需一张照片,就能生成高度稳定的动画视频了,阿里研究团队发布角色图片到动画的新AI框架,他们设计了名为Reference Net的模块,类似control net那样指导运动,并采用高效的时间建模方法来确保视频帧之间平滑的过渡。可以对任意角色进行动画处理,例如照片,动漫图。角色动画方面取得了比其他图像到视频方法更好的结果。

Reference Net论文下载链接:
https://arxiv.org/pdf/2311.17117.pdf

Reference Net项目演示地址:
https://humanaigc.github.io/animate-anyone/

Reference Net项目代码下载链接:
https://github.com/HumanAIGC/AnimateAnyone

版权声明:本文采用知识共享 署名4.0国际许可协议 [BY-NC-SA] 进行授权
文章名称:《喜好儿AI周报Weekly(第3期)阿里研究院新AI框架,一张照片生成动画视频 | Qreates | AI模特Aitana | Pika1.0 | SDXL Turbo | SparseCtrl | 多模态任务智能体AI |》
文章链接:https://heehel.com/aigc/weekly-3.html
本站资源仅供个人学习交流,未经许可不得用于商业用途,自行承担法律责任。
如有疑问,请联系微信:heehelcom

喜好儿——再不认真就输了!

致力于发现ai人工智能应用的新世界, 长期更新目前热门AI教程与动态!期待在这个工业变革时代中,希望你我都能发出一点光。

登录

找回密码

注册