大酷樂
  • 汽车
  • 理财
  • 军事
  • 科技
  • 游戏
  • 互联网
  • 娱乐
  • 财经
  • 科学
  • 社会
  • 亲子
  • 电影
  • 健康
  • 教育
  1. 首頁
  2. 科学

Sora还没开源,但这家国产AIGC视频公司已经靠还原现实赚钱了

2024-03-12 简体 HK SG TW

今天小编分享的科学经验:Sora还没开源,但这家国产AIGC视频公司已经靠还原现实赚钱了,欢迎阅读。

最近 AIGC 的落地,又有了一些热议和争论。

在金沙江创投主管合伙人朱啸虎的爆款采访中,他表达了对自研大模型商业闭环的悲观,但又坚定地表示非常看好应用," 我信仰 AGI,但我信仰应用啊,信仰能马上商业化的。"

在他的犀利表达中,一家应用公司意外走红。

它就是 AIGC 视频广告公司FancyTech(时代涌现)。

对国内大模型五小虎不愿一看的朱啸虎,提到 FancyTech,真的是不吝溢美之词,直夸很酷。

夸它什么呢?主要是两点,一是效果好,二是能马上变现。

FancyTech 商业成绩如何,还要等我们进一步挖掘;而论效果,我们搜寻来了网上的视频,确实不错。

但谁会只相信品牌放出的 demo 呢???

搜索之下,我们发现 FancyTech 的免费测试链接——那还等什么,直接冲啊。

FancyTech 真的 fancy 吗?

实测第一站,我们率先体验的是 FancyTech还原现实的换装功能。

简单来说就是基于一张商品图,可以生成模特上身图,并且是能自定义姿势、自定义背景、自定义脸的那种。

说实话,AIGC 的风这么大,给模特换装已经不是啥稀奇功能了,甚至这一块的开源力量也不小。

但之前接触过类似 Google 的 Tryon Diffusion 等,都没有 FancyTech 这样能够进行详细的自定义。

就上手体验而言,FancyTech 的体验比较傻瓜式。

首先需要上传一张服装影像,接着上传可供参考的模特姿势,同时选择模特的性别、人种等,继而再上传(最少)一张背景参考图,就能得到最终的模特上身效果。

衣服整体还原效果还是挺真实的。

实测第二站,是 FancyTech 另外一个主打的功能,图生视频。

上传任意一张图片,点击下方的运行键即可。

等待时间大概在 35s 左右,我们得到了这样一个效果:

模特有眨眼动作,肢体中心也有自然的轻微转移,商品、模特都没有变形。

我们还试着多跑几次,每次出来的效果都很稳定。

而相同的事情丢给同为 AIGC 视频生成工具的 Pika 干,得到的效果是这样的:

动作幅度更大,但商品细节似乎有模糊处理。不知是否是模特表情夸张引起的五官变形,恐怖谷效应扑面而来。

两者对比,能看出 FancyTech 生成的视频结果在商品实物还原方面,还是很能打的。

为了试验它的效果稳定与否,我们又对比了一组。

这是 FancyTech 的效果:

这是 Pika 的效果:

这一组效果也都还不错,并且能感受到,FancyTech 也可以有较大的人物动作幅度,有接近真人模特的动作展示,视频时间也能达到 4s 左右。

在给品牌使用的流程上,这些生成都是自动化的,从生成图片到视频、再到发布,都不需要人工参与。

就怎么说呢,跟某宝上售卖服装配的展示视频好像也没差?

看了一下别人利用 FancyTech 做出的商品广告,比我们这种纯小白做的,那是酷炫多了。

最最重要的是,看起来不穿帮,对现实场景有比较好的还原,不会一眼假是 AI 做的:

技术上是如何实现的?

亲身体验下来,FancyTech 是有两把刷子在身上的。

定位也很明晰:聚焦电商和广告视频领網域,利用 AI 驱动生成商品表达视频,能基于用户反馈调整视频细节,还能附带画外音、音乐、字幕等。

而且与市场上很多的 AI 视频生成工具,包括 Sora、Pika 等在内,FancyTech 采用的方式不是文字生成视频,而是图片生成视频。

但这样的 AIGC 视频生成效果,背后究竟是通过什么原理实现的?是基于某些开源方案打造,还是重新纯自研?

带着种种问题,我们向 FancyTech 求解了一下背后的技术细节。

"FancyTech 是自研的全链路底层技术,然后配合工程化能力。" 对方倒也没藏着掖着,直接亮出来了自家的技术实现方案。" 我们学习了大量的热门视频,自研的模型来写脚本,再通过 AI Agent 串联各模型生成视频。"

整体来说,FancyTech 的工作流包含以下三个组成部分:

视频模型:生成素材,提升素材丰富度;

AI Agent:自动化生成,提升交付效率;

数据效果反馈:自动优化素材,提升发布效果。

三者形成循环,实现数据驱动,达到持续优化视频生成效果的目的。

更进一步的,我们则就最基本的视频模型方面进行了了解。

以前,AI 无法真正取代商品展示拍摄,是因为效果不尽人意,尤其是难以模拟 3D 场景的真实动态。

但看看刚才亲自试出来的效果,不管是连衣裙本身面料和重量带来的垂坠感,还是模特动作变换导致的裙摆摆动,FancyTech 都能展现出自然效果。

是怎么做到的呢?

一是 FancyTech 自己组建了数据标注团队,在训练过程中收集了大量的真实数据,进行清洗、标注,从而拥有了质量够高的数据集。

这样一来,就非常有利于最终产出优质效果的视频。

二是构建覆盖多类型商品的场景图生成框架,实现全自动化、多品类、多种组合搭配的商品生成、场景生成、细节复原与增强。

为了精确保持商品细节并进行合理变化,FancyTech 还自研了影像特征提取器,将影像特征抽成 100 自由度(合理变化)和 0 自由度特征(保持细节)。

第四点是,针对不同商品和细分品类,团队训练了自己的多模态(文 + 图)影像生成模型 DeepVideo。

在自研模型的基础上,FancyTech 团队采用元学习和强化学习的训练方案,持续提升不同控制条件下的泛化能力。

第五点也是 FancyTech 着重强调介绍的一点,是团队自研商品细节增强模型,ProductRefiner。

ProductRefiner 负责的功能是加强细节复原,此外,还能描述输入可选细节,进一步提升商品细节展现。

在训练过程中,ProductRefiner 选用了自监督训练方法,无需构建成对数据集,极大地降低了成本。

而且能对模特的上身和下身着装进行分割,在保证输入影像背景不变的前提下,对上衣和下衣进行修复和还原。

阿里系创始团队

就在这样的技术加持下,去年一年,FancyTech 和超过 500 个国内外品牌进行合作,日均生成视频量超过 10 万。

而且根据朱啸虎公开的说法,FancyTech 是在赚钱的:

去年收入达到 5000 多万,(比他投资时的 2022 年)涨了五六倍。

在基础大模型业务商业化路径仍然不分明的时候,聚焦特别场景,能有这样一个成绩,FancyTech 背后团队究竟是什么来历?

据量子位了解,成立于 2020 年的 FancyTech,背后是一支阿里系团队。

其创始人兼 CEO,William Li,花名空界,曾是天猫奢品 Luxury Pavilion 初代负责人,也在手机淘宝历任分享平台和用户社群的产品运营负责人。

创始团队的其他成员,也都来自于手淘、天猫、阿里云等资深算法、运营及技术岗位。

看到这里,你一定也对 FancyTech 能深谙电商展示玩法不足为奇了。

现在,成立快 4 年的 FancyTech 已经将算法团队扩大至近百人规模,其中算法团队近 20 人,数据标注团队约 50 人。

在我们联系上 FancyTech 的时候,这支队伍刚刚对产品进行了一次迭代,视频长度从原来的 2s,拓展至 4s 左右。

那么,有技术,有市场,有商业化,FancyTech 的下一步又有什么打算?

量子位得到的答案是这样的:

Sora 的出现,把其他所有的视频模型公司都打回了同一起跑线上——这对我们来说反而有利。

我们走商业化路线,追求的是商品的还原,而 Sora 验证了下一步该怎么样去增强持续性。

目前,FancyTech 内部算法团队已经开始投入自家 Transformer+Diffusion 框架的研发,预计在今年 4、5 月份会拿出成果。

是的没错,尽管有了 Sora 那样惊艳世人的模型出场,FancyTech 的目标倒是一直没变过:

" 我们希望成为长视频赛道里,对现实还原得最好的公司。"

熱門排行
  • 王治郅:杨瀚森主要的问题是速度 他的速度跟不上现代篮球的节奏 王治郅:杨瀚森主要的问题是速度 他的速度跟 郟君昊 | 2025-05-05
  • 贸易战烧进电影院:特朗普拟重税打击外国电影 逼好莱坞等回美拍片 贸易战烧进电影院:特朗普拟重税打击外国电影 習又夏 | 2025-05-05
  • 贷款追高炒黄金的人后悔了!有人一天亏掉6年工资,卖掉舍不得,不卖扛不住 贷款追高炒黄金的人后悔了!有人一天亏掉6年 寸飛蘭 | 2025-05-05
  • 手机电池突破8000mAh?硅碳技术的回旋镖:「折寿」换容量 手机电池突破8000mAh?硅碳技术的回旋镖:「折 衛青柏 | 2025-05-05
  • 贷款追高炒黄金的人后悔了!有人一天亏掉6年工资,卖掉舍不得,不卖扛不住 贷款追高炒黄金的人后悔了!有人一天亏掉6年 繁綺文 | 2025-05-05
  • 任天堂对Genki提起Switch 2商标侵权诉讼,后者回应称将严肃对待 任天堂对Genki提起Switch 2商标侵权诉讼,后 郜萌運 | 2025-05-05
  • 哪吒汽车APP和官网恢复正常 知情人士:之前断网因流量欠费 哪吒汽车APP和官网恢复正常 知情人士:之前断 袁曼雁 | 2025-05-05
  • 极越汽车 CEO 夏一平名下青岛/义乌两家公司被列入经营异常 极越汽车 CEO 夏一平名下青岛/义乌两家公司 集玲琳 | 2025-05-05
  • 全国经济第一大省明确,推动组建农商联合银行 全国经济第一大省明确,推动组建农商联合银行 佼昌翰 | 2025-05-05
  • 桑保利:亚马尔有配合意识&有点像梅西 姆巴佩更专注进球&更像C罗 桑保利:亚马尔有配合意识&有点像梅西 姆巴佩 甄正浩 | 2025-05-05
  • 高露现身上海虹桥机场 黑色外套点缀亮色爱心装饰俏皮亮眼 高露现身上海虹桥机场 黑色外套点缀亮色爱 惠惠君 | 2023-05-02
  • 《歧路旅人2》:向光而生 《歧路旅人2》:向光而生 衛青柏 | 2023-05-02
  • vivo X90S曝光:处理器更新为天玑9200+ 安卓最强芯 vivo X90S曝光:处理器更新为天玑9200+ 安卓最 袁曼雁 | 2023-05-05
  • “懒癌”发病率上升,定期体检别忽视 “懒癌”发病率上升,定期体检别忽视 幸聽楓 | 2023-05-02
  • 宋慧乔获百想视后 韩素希发图手动加爱心表情庆祝 宋慧乔获百想视后 韩素希发图手动加爱心表 賁芳蕤 | 2023-05-02
  • 曹操墓,里面都有啥? 曹操墓,里面都有啥? 衛青柏 | 2023-05-02
  • 十年了,他们终于要HE! 十年了,他们终于要HE! 惠惠君 | 2023-05-07
  • 中央部署经济工作,释放5大信号 中央部署经济工作,释放5大信号 郜萌運 | 2023-05-02
  • 高德上线手机弯道会车预警功能 高德上线手机弯道会车预警功能 習又夏 | 2023-05-02
  • 陈自瑶抱病为爱女做蛋糕庆生,王浩信点赞没露面 陈自瑶抱病为爱女做蛋糕庆生,王浩信点赞没露 賁芳蕤 | 2023-05-02
  • 等比例长大的童星,李兰迪算一个 等比例长大的童星,李兰迪算一个 郟君昊 | 2023-05-02
  • 这些被抓来做实验的流浪狗,最终拯救了无数糖尿病人 这些被抓来做实验的流浪狗,最终拯救了无数糖 集玲琳 | 2023-05-02
  • 高端国产车:军车血统,目前电动车越野的“天花板”? 高端国产车:军车血统,目前电动车越野的“天花 謝飛揚 | 2023-05-02
  • 《云襄传》终于抬上来啦,男O女A让人好上头! 《云襄传》终于抬上来啦,男O女A让人好上头! 集玲琳 | 2023-05-02
  • 21家A股游戏公司2022年收入651亿 今年“游戏+AI”能否逆风翻盘? 21家A股游戏公司2022年收入651亿 今年“游 衛青柏 | 2023-05-04
  • 信用风险释放趋缓,结构性风险需重点关注 ——2023年一季度债市信用风险回顾与下阶段展望 信用风险释放趋缓,结构性风险需重点关注 — 袁曼雁 | 2023-05-02
  • 与周立波夫妇闹纠纷成老赖,唐爽被司法拘留15日 与周立波夫妇闹纠纷成老赖,唐爽被司法拘留15 寸飛蘭 | 2023-05-05
  • 普京签署总统令,批准对俄刑法典相关法条的修正案 普京签署总统令,批准对俄刑法典相关法条的修 集玲琳 | 2023-05-02
  • 解除资格!停止一切合作 解除资格!停止一切合作 佼昌翰 | 2023-05-02
  • 中银证券给予南京银行增持评级 中银证券给予南京银行增持评级 袁曼雁 | 2023-05-03
  • 3699起 联想小新mini主机上架 13代酷睿标压处理器 3699起 联想小新mini主机上架 13代酷睿标压 習又夏 | 2023-05-05
  • 前董事长被免,天山生物全面进入“中植系”时代?股价曾在一月内暴涨超400% 前董事长被免,天山生物全面进入“中植系”时 惠惠君 | 2023-05-02
  • 疯成这样,怎么还能被全网吹捧? 疯成这样,怎么还能被全网吹捧? 郜萌運 | 2023-05-02
  • 狂吼11次“让一下”!交警咆哮开道嘶吼到吐 狂吼11次“让一下”!交警咆哮开道嘶吼到吐 寸飛蘭 | 2023-05-03
  • 摩根大通收购美国第一共和银行 摩根大通收购美国第一共和银行 謝飛揚 | 2023-05-02
  • 台剧赢麻了,又来一部8.9 台剧赢麻了,又来一部8.9 衛青柏 | 2023-05-02
  • 事关农村土地承包和农民权益,《农村土地承包合同管理办法》5月1日起施行 事关农村土地承包和农民权益,《农村土地承包 郟君昊 | 2023-05-02
  • 下降45分,上涨35分!34所自划线院校复试分数线涨幅汇总 下降45分,上涨35分!34所自划线院校复试分数线 袁曼雁 | 2023-05-07
  • "三高"已盯上青少年,做好这件事是关键 "三高"已盯上青少年,做好这件事是关键 習又夏 | 2023-05-05
  • 五一档没一个能打的 五一档没一个能打的 集玲琳 | 2023-05-05
  • 恐怖韩剧下神坛,这次胆小可入 恐怖韩剧下神坛,这次胆小可入 袁曼雁 | 2023-05-05
  • 这剧是不是用ChatGPT写的呀? 这剧是不是用ChatGPT写的呀? 惠惠君 | 2023-05-02
  • 200户连夜疏散,原因让人愤怒!“损失超一亿”,官方通报 200户连夜疏散,原因让人愤怒!“损失超一亿”, 袁曼雁 | 2023-05-03
  • 性骚扰惯犯,滚出娱乐圈 性骚扰惯犯,滚出娱乐圈 謝飛揚 | 2023-05-05
  • 48岁何炅自曝已老花眼,黄磊睡前认老,《向往的生活》证实将停办 48岁何炅自曝已老花眼,黄磊睡前认老,《向往的 佼昌翰 | 2023-05-02
  • 一个《长月烬明》倒了,《狐妖》《长相思》《与凤行》…在路上了 一个《长月烬明》倒了,《狐妖》《长相思》《 惠惠君 | 2023-05-02
  • 张天爱假期晒“酷”存照 卷发披肩穿黑色吊带裙大秀好身材 张天爱假期晒“酷”存照 卷发披肩穿黑色吊 嬴覓晴 | 2023-05-02
  • 当年轻人开始不随份子钱 当年轻人开始不随份子钱 袁曼雁 | 2023-05-02
  • 毕滢用8年时间成功逼宫?曾被传已婚生子的她,不容小觑 毕滢用8年时间成功逼宫?曾被传已婚生子的她, 幸聽楓 | 2023-05-03
  • 宋慧乔获视后首次晒照,拿奖杯笑容温柔 宋慧乔获视后首次晒照,拿奖杯笑容温柔 郜萌運 | 2023-05-02

©2022 大酷樂 版權所有

隱私政策 | 服務條款 | 聯繫我們