大酷樂
  • 汽車
  • 理财
  • 軍事
  • 科技
  • 遊戲
  • 互聯網
  • 娛樂
  • 财經
  • 科學
  • 社會
  • 親子
  • 電影
  • 健康
  • 教育
  1. 首頁
  2. 科學

Sora還沒開源,但這家國產AIGC視頻公司已經靠還原現實賺錢了

2024-03-12 简体 HK SG TW

今天小編分享的科學經驗:Sora還沒開源,但這家國產AIGC視頻公司已經靠還原現實賺錢了,歡迎閲讀。

最近 AIGC 的落地,又有了一些熱議和争論。

在金沙江創投主管合夥人朱嘯虎的爆款采訪中,他表達了對自研大模型商業閉環的悲觀,但又堅定地表示非常看好應用," 我信仰 AGI,但我信仰應用啊,信仰能馬上商業化的。"

在他的犀利表達中,一家應用公司意外走紅。

它就是 AIGC 視頻廣告公司FancyTech(時代湧現)。

對國内大模型五小虎不願一看的朱嘯虎,提到 FancyTech,真的是不吝溢美之詞,直誇很酷。

誇它什麼呢?主要是兩點,一是效果好,二是能馬上變現。

FancyTech 商業成績如何,還要等我們進一步挖掘;而論效果,我們搜尋來了網上的視頻,确實不錯。

但誰會只相信品牌放出的 demo 呢???

搜索之下,我們發現 FancyTech 的免費測試鏈接——那還等什麼,直接衝啊。

FancyTech 真的 fancy 嗎?

實測第一站,我們率先體驗的是 FancyTech還原現實的換裝功能。

簡單來説就是基于一張商品圖,可以生成模特上身圖,并且是能自定義姿勢、自定義背景、自定義臉的那種。

説實話,AIGC 的風這麼大,給模特換裝已經不是啥稀奇功能了,甚至這一塊的開源力量也不小。

但之前接觸過類似 Google 的 Tryon Diffusion 等,都沒有 FancyTech 這樣能夠進行詳細的自定義。

就上手體驗而言,FancyTech 的體驗比較傻瓜式。

首先需要上傳一張服裝影像,接着上傳可供參考的模特姿勢,同時選擇模特的性别、人種等,繼而再上傳(最少)一張背景參考圖,就能得到最終的模特上身效果。

衣服整體還原效果還是挺真實的。

實測第二站,是 FancyTech 另外一個主打的功能,圖生視頻。

上傳任意一張圖片,點擊下方的運行鍵即可。

等待時間大概在 35s 左右,我們得到了這樣一個效果:

模特有眨眼動作,肢體中心也有自然的輕微轉移,商品、模特都沒有變形。

我們還試着多跑幾次,每次出來的效果都很穩定。

而相同的事情丢給同為 AIGC 視頻生成工具的 Pika 幹,得到的效果是這樣的:

動作幅度更大,但商品細節似乎有模糊處理。不知是否是模特表情誇張引起的五官變形,恐怖谷效應撲面而來。

兩者對比,能看出 FancyTech 生成的視頻結果在商品實物還原方面,還是很能打的。

為了試驗它的效果穩定與否,我們又對比了一組。

這是 FancyTech 的效果:

這是 Pika 的效果:

這一組效果也都還不錯,并且能感受到,FancyTech 也可以有較大的人物動作幅度,有接近真人模特的動作展示,視頻時間也能達到 4s 左右。

在給品牌使用的流程上,這些生成都是自動化的,從生成圖片到視頻、再到發布,都不需要人工參與。

就怎麼説呢,跟某寶上售賣服裝配的展示視頻好像也沒差?

看了一下别人利用 FancyTech 做出的商品廣告,比我們這種純小白做的,那是酷炫多了。

最最重要的是,看起來不穿幫,對現實場景有比較好的還原,不會一眼假是 AI 做的:

技術上是如何實現的?

親身體驗下來,FancyTech 是有兩把刷子在身上的。

定位也很明晰:聚焦電商和廣告視頻領網域,利用 AI 驅動生成商品表達視頻,能基于用户反饋調整視頻細節,還能附帶畫外音、音樂、字幕等。

而且與市場上很多的 AI 視頻生成工具,包括 Sora、Pika 等在内,FancyTech 采用的方式不是文字生成視頻,而是圖片生成視頻。

但這樣的 AIGC 視頻生成效果,背後究竟是通過什麼原理實現的?是基于某些開源方案打造,還是重新純自研?

帶着種種問題,我們向 FancyTech 求解了一下背後的技術細節。

"FancyTech 是自研的全鏈路底層技術,然後配合工程化能力。" 對方倒也沒藏着掖着,直接亮出來了自家的技術實現方案。" 我們學習了大量的熱門視頻,自研的模型來寫腳本,再通過 AI Agent 串聯各模型生成視頻。"

整體來説,FancyTech 的工作流包含以下三個組成部分:

視頻模型:生成素材,提升素材豐富度;

AI Agent:自動化生成,提升交付效率;

數據效果反饋:自動優化素材,提升發布效果。

三者形成循環,實現數據驅動,達到持續優化視頻生成效果的目的。

更進一步的,我們則就最基本的視頻模型方面進行了了解。

以前,AI 無法真正取代商品展示拍攝,是因為效果不盡人意,尤其是難以模拟 3D 場景的真實動态。

但看看剛才親自試出來的效果,不管是連衣裙本身面料和重量帶來的垂墜感,還是模特動作變換導致的裙擺擺動,FancyTech 都能展現出自然效果。

是怎麼做到的呢?

一是 FancyTech 自己組建了數據标注團隊,在訓練過程中收集了大量的真實數據,進行清洗、标注,從而擁有了質量夠高的數據集。

這樣一來,就非常有利于最終產出優質效果的視頻。

二是構建覆蓋多類型商品的場景圖生成框架,實現全自動化、多品類、多種組合搭配的商品生成、場景生成、細節復原與增強。

為了精确保持商品細節并進行合理變化,FancyTech 還自研了影像特征提取器,将影像特征抽成 100 自由度(合理變化)和 0 自由度特征(保持細節)。

第四點是,針對不同商品和細分品類,團隊訓練了自己的多模态(文 + 圖)影像生成模型 DeepVideo。

在自研模型的基礎上,FancyTech 團隊采用元學習和強化學習的訓練方案,持續提升不同控制條件下的泛化能力。

第五點也是 FancyTech 着重強調介紹的一點,是團隊自研商品細節增強模型,ProductRefiner。

ProductRefiner 負責的功能是加強細節復原,此外,還能描述輸入可選細節,進一步提升商品細節展現。

在訓練過程中,ProductRefiner 選用了自監督訓練方法,無需構建成對數據集,極大地降低了成本。

而且能對模特的上身和下身着裝進行分割,在保證輸入影像背景不變的前提下,對上衣和下衣進行修復和還原。

阿裏系創始團隊

就在這樣的技術加持下,去年一年,FancyTech 和超過 500 個國内外品牌進行合作,日均生成視頻量超過 10 萬。

而且根據朱嘯虎公開的説法,FancyTech 是在賺錢的:

去年收入達到 5000 多萬,(比他投資時的 2022 年)漲了五六倍。

在基礎大模型業務商業化路徑仍然不分明的時候,聚焦特别場景,能有這樣一個成績,FancyTech 背後團隊究竟是什麼來歷?

據量子位了解,成立于 2020 年的 FancyTech,背後是一支阿裏系團隊。

其創始人兼 CEO,William Li,花名空界,曾是天貓奢品 Luxury Pavilion 初代負責人,也在手機淘寶歷任分享平台和用户社群的產品運營負責人。

創始團隊的其他成員,也都來自于手淘、天貓、阿裏雲等資深算法、運營及技術崗位。

看到這裏,你一定也對 FancyTech 能深谙電商展示玩法不足為奇了。

現在,成立快 4 年的 FancyTech 已經将算法團隊擴大至近百人規模,其中算法團隊近 20 人,數據标注團隊約 50 人。

在我們聯系上 FancyTech 的時候,這支隊伍剛剛對產品進行了一次迭代,視頻長度從原來的 2s,拓展至 4s 左右。

那麼,有技術,有市場,有商業化,FancyTech 的下一步又有什麼打算?

量子位得到的答案是這樣的:

Sora 的出現,把其他所有的視頻模型公司都打回了同一起跑線上——這對我們來説反而有利。

我們走商業化路線,追求的是商品的還原,而 Sora 驗證了下一步該怎麼樣去增強持續性。

目前,FancyTech 内部算法團隊已經開始投入自家 Transformer+Diffusion 框架的研發,預計在今年 4、5 月份會拿出成果。

是的沒錯,盡管有了 Sora 那樣驚豔世人的模型出場,FancyTech 的目标倒是一直沒變過:

" 我們希望成為長視頻賽道裏,對現實還原得最好的公司。"

熱門排行
  • 王治郅:楊瀚森主要的問題是速度 他的速度跟不上現代籃球的節奏 王治郅:楊瀚森主要的問題是速度 他的速度跟 郟君昊 | 2025-05-05
  • 貿易戰燒進電影院:特朗普拟重税打擊外國電影 逼好萊塢等回美拍片 貿易戰燒進電影院:特朗普拟重税打擊外國電影 習又夏 | 2025-05-05
  • 貸款追高炒黃金的人後悔了!有人一天虧掉6年工資,賣掉舍不得,不賣扛不住 貸款追高炒黃金的人後悔了!有人一天虧掉6年 寸飛蘭 | 2025-05-05
  • 手機電池突破8000mAh?硅碳技術的回旋镖:「折壽」換容量 手機電池突破8000mAh?硅碳技術的回旋镖:「折 衛青柏 | 2025-05-05
  • 貸款追高炒黃金的人後悔了!有人一天虧掉6年工資,賣掉舍不得,不賣扛不住 貸款追高炒黃金的人後悔了!有人一天虧掉6年 繁綺文 | 2025-05-05
  • 任天堂對Genki提起Switch 2商标侵權訴訟,後者回應稱将嚴肅對待 任天堂對Genki提起Switch 2商标侵權訴訟,後 郜萌運 | 2025-05-05
  • 哪吒汽車APP和官網恢復正常 知情人士:之前斷網因流量欠費 哪吒汽車APP和官網恢復正常 知情人士:之前斷 袁曼雁 | 2025-05-05
  • 極越汽車 CEO 夏一平名下青島/義烏兩家公司被列入經營異常 極越汽車 CEO 夏一平名下青島/義烏兩家公司 集玲琳 | 2025-05-05
  • 全國經濟第一大省明确,推動組建農商聯合銀行 全國經濟第一大省明确,推動組建農商聯合銀行 佼昌翰 | 2025-05-05
  • 桑保利:亞馬爾有配合意識&有點像梅西 姆巴佩更專注進球&更像C羅 桑保利:亞馬爾有配合意識&有點像梅西 姆巴佩 甄正浩 | 2025-05-05
  • 高露現身上海虹橋機場 黑色外套點綴亮色愛心裝飾俏皮亮眼 高露現身上海虹橋機場 黑色外套點綴亮色愛 惠惠君 | 2023-05-02
  • 《歧路旅人2》:向光而生 《歧路旅人2》:向光而生 衛青柏 | 2023-05-02
  • vivo X90S曝光:處理器更新為天玑9200+ 安卓最強芯 vivo X90S曝光:處理器更新為天玑9200+ 安卓最 袁曼雁 | 2023-05-05
  • “懶癌”發病率上升,定期體檢别忽視 “懶癌”發病率上升,定期體檢别忽視 幸聽楓 | 2023-05-02
  • 宋慧喬獲百想視後 韓素希發圖手動加愛心表情慶祝 宋慧喬獲百想視後 韓素希發圖手動加愛心表 賁芳蕤 | 2023-05-02
  • 曹操墓,裏面都有啥? 曹操墓,裏面都有啥? 衛青柏 | 2023-05-02
  • 十年了,他們終于要HE! 十年了,他們終于要HE! 惠惠君 | 2023-05-07
  • 中央部署經濟工作,釋放5大信号 中央部署經濟工作,釋放5大信号 郜萌運 | 2023-05-02
  • 高德上線手機彎道會車預警功能 高德上線手機彎道會車預警功能 習又夏 | 2023-05-02
  • 陳自瑤抱病為愛女做蛋糕慶生,王浩信點贊沒露面 陳自瑤抱病為愛女做蛋糕慶生,王浩信點贊沒露 賁芳蕤 | 2023-05-02
  • 等比例長大的童星,李蘭迪算一個 等比例長大的童星,李蘭迪算一個 郟君昊 | 2023-05-02
  • 這些被抓來做實驗的流浪狗,最終拯救了無數糖尿病人 這些被抓來做實驗的流浪狗,最終拯救了無數糖 集玲琳 | 2023-05-02
  • 高端國產車:軍車血統,目前電動車越野的“天花板”? 高端國產車:軍車血統,目前電動車越野的“天花 謝飛揚 | 2023-05-02
  • 《雲襄傳》終于抬上來啦,男O女A讓人好上頭! 《雲襄傳》終于抬上來啦,男O女A讓人好上頭! 集玲琳 | 2023-05-02
  • 21家A股遊戲公司2022年收入651億 今年“遊戲+AI”能否逆風翻盤? 21家A股遊戲公司2022年收入651億 今年“遊 衛青柏 | 2023-05-04
  • 信用風險釋放趨緩,結構性風險需重點關注 ——2023年一季度債市信用風險回顧與下階段展望 信用風險釋放趨緩,結構性風險需重點關注 — 袁曼雁 | 2023-05-02
  • 與周立波夫婦鬧糾紛成老賴,唐爽被司法拘留15日 與周立波夫婦鬧糾紛成老賴,唐爽被司法拘留15 寸飛蘭 | 2023-05-05
  • 普京籤署總統令,批準對俄刑法典相關法條的修正案 普京籤署總統令,批準對俄刑法典相關法條的修 集玲琳 | 2023-05-02
  • 解除資格!停止一切合作 解除資格!停止一切合作 佼昌翰 | 2023-05-02
  • 中銀證券給予南京銀行增持評級 中銀證券給予南京銀行增持評級 袁曼雁 | 2023-05-03
  • 3699起 聯想小新mini主機上架 13代酷睿标壓處理器 3699起 聯想小新mini主機上架 13代酷睿标壓 習又夏 | 2023-05-05
  • 前董事長被免,天山生物全面進入“中植系”時代?股價曾在一月内暴漲超400% 前董事長被免,天山生物全面進入“中植系”時 惠惠君 | 2023-05-02
  • 瘋成這樣,怎麼還能被全網吹捧? 瘋成這樣,怎麼還能被全網吹捧? 郜萌運 | 2023-05-02
  • 狂吼11次“讓一下”!交警咆哮開道嘶吼到吐 狂吼11次“讓一下”!交警咆哮開道嘶吼到吐 寸飛蘭 | 2023-05-03
  • 摩根大通收購美國第一共和銀行 摩根大通收購美國第一共和銀行 謝飛揚 | 2023-05-02
  • 台劇赢麻了,又來一部8.9 台劇赢麻了,又來一部8.9 衛青柏 | 2023-05-02
  • 事關農村土地承包和農民權益,《農村土地承包合同管理辦法》5月1日起施行 事關農村土地承包和農民權益,《農村土地承包 郟君昊 | 2023-05-02
  • 下降45分,上漲35分!34所自劃線院校復試分數線漲幅匯總 下降45分,上漲35分!34所自劃線院校復試分數線 袁曼雁 | 2023-05-07
  • "三高"已盯上青少年,做好這件事是關鍵 "三高"已盯上青少年,做好這件事是關鍵 習又夏 | 2023-05-05
  • 五一檔沒一個能打的 五一檔沒一個能打的 集玲琳 | 2023-05-05
  • 恐怖韓劇下神壇,這次膽小可入 恐怖韓劇下神壇,這次膽小可入 袁曼雁 | 2023-05-05
  • 這劇是不是用ChatGPT寫的呀? 這劇是不是用ChatGPT寫的呀? 惠惠君 | 2023-05-02
  • 200户連夜疏散,原因讓人憤怒!“損失超一億”,官方通報 200户連夜疏散,原因讓人憤怒!“損失超一億”, 袁曼雁 | 2023-05-03
  • 性騷擾慣犯,滾出娛樂圈 性騷擾慣犯,滾出娛樂圈 謝飛揚 | 2023-05-05
  • 48歲何炅自曝已老花眼,黃磊睡前認老,《向往的生活》證實将停辦 48歲何炅自曝已老花眼,黃磊睡前認老,《向往的 佼昌翰 | 2023-05-02
  • 一個《長月燼明》倒了,《狐妖》《長相思》《與鳳行》…在路上了 一個《長月燼明》倒了,《狐妖》《長相思》《 惠惠君 | 2023-05-02
  • 張天愛假期曬“酷”存照 卷發披肩穿黑色吊帶裙大秀好身材 張天愛假期曬“酷”存照 卷發披肩穿黑色吊 嬴覓晴 | 2023-05-02
  • 當年輕人開始不随份子錢 當年輕人開始不随份子錢 袁曼雁 | 2023-05-02
  • 畢滢用8年時間成功逼宮?曾被傳已婚生子的她,不容小觑 畢滢用8年時間成功逼宮?曾被傳已婚生子的她, 幸聽楓 | 2023-05-03
  • 宋慧喬獲視後首次曬照,拿獎杯笑容温柔 宋慧喬獲視後首次曬照,拿獎杯笑容温柔 郜萌運 | 2023-05-02

©2022 大酷樂 版權所有

隱私政策 | 服務條款 | 聯繫我們