大酷樂
  • 汽車
  • 理财
  • 軍事
  • 科技
  • 遊戲
  • 互聯網
  • 娛樂
  • 财經
  • 科學
  • 社會
  • 親子
  • 電影
  • 健康
  • 教育
  1. 首頁
  2. 财經

一張圖生成一個世界!李飛飛世界模型首秀

2024-12-04 简体 HK SG TW

今天小編分享的财經經驗:一張圖生成一個世界!李飛飛世界模型首秀,歡迎閱讀。

今天凌晨,AI 教母李飛飛創立的 World Labs 推出第一個重磅成果:世界模型,一張單個影像便可生成 3D 世界。

此消息一出,業界炸開了鍋。李飛飛也第一時間在 X 上宣傳:

在大家還在 2D 視頻生成賽道卷生卷死的時候,World Labs 已經進入 Next Level,AI 生成 3D 世界。

據 World Labs 官方介紹,目前大多數 GenAI 工具都制作影像或視頻等 2D 内容,存在缺乏控制和一致性的問題,而 3D 生成則可以提高控制和一致性,其模型可以預測 3D 幾何圖形,填充場景中看不到的部分。這将改變我們制作電影、遊戲、模拟器和物理世界的其他數字表現形式的方式。

一、一張圖生成一個世界

輸入任意一張圖,World Labs 還你一個世界。

比如,丢給 World Labs 一張左邊的圖片,它能給你一個這樣的 3D 世界:

你可以通過 WASD 建控制 3D 世界得上下左右視角,還可以拖動滑鼠逛這個世界的每一個角落。

同時,官方也給了很多玩法。

相機效果

生成場景後,我們可以使用虛拟攝影機進行實時渲染。通過精确控制虛拟攝影機的各項參數,可以實現各種藝術攝影效果。

例如,我們可以模拟淺景深效果,使得只有距離攝影機一定距離的物體才清晰對焦,從而突出主體并增強畫面的層次感。

此外,還可以模拟推移變焦效果,即同時調整攝影機的位置和視野,創造出獨特的視覺衝擊力和動态感。

3D 效果

World Labs 官方介紹,大多數生成模型是預測像素。而生成 3D 場景則不僅限于像素層面的表現,其優勢更多地體現在:

持久的現實:一旦生成了一個世界,它就會一直存在。如果你把視線移開并回來,場景不會在你的背後改變。

實時控制:生成場景後,可以實時移動場景。可以徜徉于花朵的細節,或者偷看角落看看揭示了什麼。

符合物理規則:生成的世界遵循現實世界的基本物理規則。它們具有堅實感和深度感,與某些 AI 生成的視頻的夢幻般的性質形成鮮明對比。

World Labs 生成的 3D 場景通過深度貼圖技術,使得其中每個像素都按其與相機的距離着色,更具空間感。

不僅如此,World Labs 還可以添加各種動效,比如聲效、燈光等,構建 3D 場景的互動式效果,瞬間進入 " 真賽博空間 "。

在大家還在 2D 視頻生成賽道卷生卷死的時候,World Labs 已經進入 Next Level,AI 生成 3D 世界。

據 World Labs 官方介紹,目前大多數 GenAI 工具都制作影像或視頻等 2D 内容,存在缺乏控制和一致性的問題,而 3D 生成則可以提高控制和一致性,其模型可以預測 3D 幾何圖形,填充場景中看不到的部分。這将改變我們制作電影、遊戲、模拟器和物理世界的其他數字表現形式的方式。

一、一張圖生成一個世界

輸入任意一張圖,World Labs 還你一個世界。

比如,丢給 World Labs 一張左邊的圖片,它能給你一個這樣的 3D 世界:

你可以通過 WASD 建控制 3D 世界得上下左右視角,還可以拖動滑鼠逛這個世界的每一個角落。

同時,官方也給了很多玩法。

相機效果

生成場景後,我們可以使用虛拟攝影機進行實時渲染。通過精确控制虛拟攝影機的各項參數,可以實現各種藝術攝影效果。

例如,我們可以模拟淺景深效果,使得只有距離攝影機一定距離的物體才清晰對焦,從而突出主體并增強畫面的層次感。

此外,還可以模拟推移變焦效果,即同時調整攝影機的位置和視野,創造出獨特的視覺衝擊力和動态感。

3D 效果

World Labs 官方介紹,大多數生成模型是預測像素。而生成 3D 場景則不僅限于像素層面的表現,其優勢更多地體現在:

持久的現實:一旦生成了一個世界,它就會一直存在。如果你把視線移開并回來,場景不會在你的背後改變。

實時控制:生成場景後,可以實時移動場景。可以徜徉于花朵的細節,或者偷看角落看看揭示了什麼。

符合物理規則:生成的世界遵循現實世界的基本物理規則。它們具有堅實感和深度感,與某些 AI 生成的視頻的夢幻般的性質形成鮮明對比。

World Labs 生成的 3D 場景通過深度貼圖技術,使得其中每個像素都按其與相機的距離着色,更具空間感。

不僅如此,World Labs 還可以添加各種動效,比如聲效、燈光等,構建 3D 場景的互動式效果,瞬間進入 " 真賽博空間 "。

走進繪畫世界

World Labs 團隊還展示了他們從梵高、霍珀、修拉和康定斯基等作品中生成了世界。

創意工作流程

除了以上玩法外,3D 生成還可以與其他 AI 工具組合,比如 Midjourney、Runway、Suno 等,這将極大地改變創作者的工作流程。

例如,可以先使用文生圖模型生成影像,不同的模型生成的影像風格不盡相同,而 World Labs 可以繼承這些風格。

比如我們輸入相同的 Prompt,可以得到不同風格得 3D 世界:

一間充滿活力的卡通風格青少年卧室,床上鋪着五顏六色的毯子,雜亂的書桌上放着一台電腦,牆上貼着海報,運動裝備散落。一把吉他靠在牆上,中間是一塊舒适的圖案地毯。窗外的光線為房間增添了溫暖、年輕的氛圍。

二、3 個月估值 10 億,空間智能時代才剛剛開始

今年 4 月,被稱為 "AI 教母 " 的斯坦福大學教授李飛飛,帶隊成立 World Labs(空間智能)。這是她 2018 年從谷歌離職重返斯坦福後,第一次直接下場參與的創業項目。

World Labs 是一家專注于打造世界模型進行 3D 世界的感知、生成和互動的 AI 初創公司。

在短短 3 個月的時間裡,World Labs 就進行了兩輪融資,融資總額超過 2.3 億美元,估值突破 10 億美元,投資方包括矽谷知名風投 a16z 和 AI 基金 Radical Ventures。

李飛飛認為,未來 AI 的核心在于 " 空間智能 ",即讓 AI 具備感知、推理并與 3D 世界互動的能力,這是實現更高級 AI 應用的關鍵。

在她看來,視覺在人類理解和與世界互動中占據核心位置,AI 發展應優先提升視覺能力,超越語言模型的局限,讓 AI 從 " 大語言模型 " 過渡到 " 大世界模型 ",以應對更復雜的 3D 環境感知和互動需求。

也因此,她希望通過 World Labs 推動這一領網域的發展,實現更高層次的空間智能。

World Labs 堪稱超級明星團隊,除了李飛飛外,還有李飛飛徒弟,在實時風格轉換和超分辨率領網域有突出貢獻的賈斯汀 · 約翰遜、神經輻射場(NeRF)提出者本 · 米爾登霍爾以及 3D 重建專家克裡斯托夫 · 拉斯納。

盡管 World Labs 在技術研發和團隊配置上具有領先優勢,此次發布的最新成果也驚豔眾人,但面臨的挑戰也不少。

首先,從技術角度來看,構建一個具有高精度的 3D 世界理解和生成模型需要大量的數據和計算資源,同時還需要解決實時互動的技術難題。

在 3D 生成賽道,并不是一片藍海,除了 World Labs 外,英偉達、Meta 等多家公司也在積極布局物理 AI 與 3D 世界的相關技術,市場競争激烈。

再有,在商業化路徑上,盡管 LWM 的潛力巨大,但如何找到合适的商業模式,尤其是平衡研發投入與市場回報,是創業公司面臨的共同難題。

如果找不到盈利模式,能活下去的概率很小,畢竟已經不少 AI 領網域的明星初創公司賣身大廠了。

不過,不得不承認的是,在潮水的變化面前,空間智能,一切才剛剛開始。

熱門排行
  • 王治郅:楊瀚森主要的問題是速度 他的速度跟不上現代籃球的節奏 王治郅:楊瀚森主要的問題是速度 他的速度跟 郟君昊 | 2025-05-05
  • 貿易戰燒進電影院:特朗普拟重稅打擊外國電影 逼好萊塢等回美拍片 貿易戰燒進電影院:特朗普拟重稅打擊外國電影 習又夏 | 2025-05-05
  • 貸款追高炒黃金的人後悔了!有人一天虧掉6年工資,賣掉舍不得,不賣扛不住 貸款追高炒黃金的人後悔了!有人一天虧掉6年 寸飛蘭 | 2025-05-05
  • 手機電池突破8000mAh?矽碳技術的回旋镖:「折壽」換容量 手機電池突破8000mAh?矽碳技術的回旋镖:「折 衛青柏 | 2025-05-05
  • 貸款追高炒黃金的人後悔了!有人一天虧掉6年工資,賣掉舍不得,不賣扛不住 貸款追高炒黃金的人後悔了!有人一天虧掉6年 繁綺文 | 2025-05-05
  • 任天堂對Genki提起Switch 2商标侵權訴訟,後者回應稱将嚴肅對待 任天堂對Genki提起Switch 2商标侵權訴訟,後 郜萌運 | 2025-05-05
  • 哪吒汽車APP和官網恢復正常 知情人士:之前斷網因流量欠費 哪吒汽車APP和官網恢復正常 知情人士:之前斷 袁曼雁 | 2025-05-05
  • 極越汽車 CEO 夏一平名下青島/義烏兩家公司被列入經營異常 極越汽車 CEO 夏一平名下青島/義烏兩家公司 集玲琳 | 2025-05-05
  • 全國經濟第一大省明确,推動組建農商聯合銀行 全國經濟第一大省明确,推動組建農商聯合銀行 佼昌翰 | 2025-05-05
  • 桑保利:亞馬爾有配合意識&有點像梅西 姆巴佩更專注進球&更像C羅 桑保利:亞馬爾有配合意識&有點像梅西 姆巴佩 甄正浩 | 2025-05-05
  • 高露現身上海虹橋機場 黑色外套點綴亮色愛心裝飾俏皮亮眼 高露現身上海虹橋機場 黑色外套點綴亮色愛 惠惠君 | 2023-05-02
  • 《歧路旅人2》:向光而生 《歧路旅人2》:向光而生 衛青柏 | 2023-05-02
  • vivo X90S曝光:處理器更新為天玑9200+ 安卓最強芯 vivo X90S曝光:處理器更新為天玑9200+ 安卓最 袁曼雁 | 2023-05-05
  • “懶癌”發病率上升,定期體檢别忽視 “懶癌”發病率上升,定期體檢别忽視 幸聽楓 | 2023-05-02
  • 宋慧喬獲百想視後 韓素希發圖手動加愛心表情慶祝 宋慧喬獲百想視後 韓素希發圖手動加愛心表 賁芳蕤 | 2023-05-02
  • 曹操墓,裡面都有啥? 曹操墓,裡面都有啥? 衛青柏 | 2023-05-02
  • 十年了,他們終于要HE! 十年了,他們終于要HE! 惠惠君 | 2023-05-07
  • 中央部署經濟工作,釋放5大信号 中央部署經濟工作,釋放5大信号 郜萌運 | 2023-05-02
  • 高德上線手機彎道會車預警功能 高德上線手機彎道會車預警功能 習又夏 | 2023-05-02
  • 陳自瑤抱病為愛女做蛋糕慶生,王浩信點贊沒露面 陳自瑤抱病為愛女做蛋糕慶生,王浩信點贊沒露 賁芳蕤 | 2023-05-02
  • 等比例長大的童星,李蘭迪算一個 等比例長大的童星,李蘭迪算一個 郟君昊 | 2023-05-02
  • 這些被抓來做實驗的流浪狗,最終拯救了無數糖尿病人 這些被抓來做實驗的流浪狗,最終拯救了無數糖 集玲琳 | 2023-05-02
  • 高端國產車:軍車血統,目前電動車越野的“天花板”? 高端國產車:軍車血統,目前電動車越野的“天花 謝飛揚 | 2023-05-02
  • 《雲襄傳》終于抬上來啦,男O女A讓人好上頭! 《雲襄傳》終于抬上來啦,男O女A讓人好上頭! 集玲琳 | 2023-05-02
  • 21家A股遊戲公司2022年收入651億 今年“遊戲+AI”能否逆風翻盤? 21家A股遊戲公司2022年收入651億 今年“遊 衛青柏 | 2023-05-04
  • 與周立波夫婦鬧糾紛成老賴,唐爽被司法拘留15日 與周立波夫婦鬧糾紛成老賴,唐爽被司法拘留15 寸飛蘭 | 2023-05-05
  • 信用風險釋放趨緩,結構性風險需重點關注 ——2023年一季度債市信用風險回顧與下階段展望 信用風險釋放趨緩,結構性風險需重點關注 — 袁曼雁 | 2023-05-02
  • 普京籤署總統令,批準對俄刑法典相關法條的修正案 普京籤署總統令,批準對俄刑法典相關法條的修 集玲琳 | 2023-05-02
  • 解除資格!停止一切合作 解除資格!停止一切合作 佼昌翰 | 2023-05-02
  • 中銀證券給予南京銀行增持評級 中銀證券給予南京銀行增持評級 袁曼雁 | 2023-05-03
  • 3699起 聯想小新mini主機上架 13代酷睿标壓處理器 3699起 聯想小新mini主機上架 13代酷睿标壓 習又夏 | 2023-05-05
  • 前董事長被免,天山生物全面進入“中植系”時代?股價曾在一月内暴漲超400% 前董事長被免,天山生物全面進入“中植系”時 惠惠君 | 2023-05-02
  • 瘋成這樣,怎麼還能被全網吹捧? 瘋成這樣,怎麼還能被全網吹捧? 郜萌運 | 2023-05-02
  • 狂吼11次“讓一下”!交警咆哮開道嘶吼到吐 狂吼11次“讓一下”!交警咆哮開道嘶吼到吐 寸飛蘭 | 2023-05-03
  • 摩根大通收購美國第一共和銀行 摩根大通收購美國第一共和銀行 謝飛揚 | 2023-05-02
  • 台劇赢麻了,又來一部8.9 台劇赢麻了,又來一部8.9 衛青柏 | 2023-05-02
  • 下降45分,上漲35分!34所自劃線院校復試分數線漲幅匯總 下降45分,上漲35分!34所自劃線院校復試分數線 袁曼雁 | 2023-05-07
  • 事關農村土地承包和農民權益,《農村土地承包合同管理辦法》5月1日起施行 事關農村土地承包和農民權益,《農村土地承包 郟君昊 | 2023-05-02
  • "三高"已盯上青少年,做好這件事是關鍵 "三高"已盯上青少年,做好這件事是關鍵 習又夏 | 2023-05-05
  • 五一檔沒一個能打的 五一檔沒一個能打的 集玲琳 | 2023-05-05
  • 恐怖韓劇下神壇,這次膽小可入 恐怖韓劇下神壇,這次膽小可入 袁曼雁 | 2023-05-05
  • 這劇是不是用ChatGPT寫的呀? 這劇是不是用ChatGPT寫的呀? 惠惠君 | 2023-05-02
  • 200戶連夜疏散,原因讓人憤怒!“損失超一億”,官方通報 200戶連夜疏散,原因讓人憤怒!“損失超一億”, 袁曼雁 | 2023-05-03
  • 性騷擾慣犯,滾出娛樂圈 性騷擾慣犯,滾出娛樂圈 謝飛揚 | 2023-05-05
  • 48歲何炅自曝已老花眼,黃磊睡前認老,《向往的生活》證實将停辦 48歲何炅自曝已老花眼,黃磊睡前認老,《向往的 佼昌翰 | 2023-05-02
  • 一個《長月燼明》倒了,《狐妖》《長相思》《與鳳行》…在路上了 一個《長月燼明》倒了,《狐妖》《長相思》《 惠惠君 | 2023-05-02
  • 當年輕人開始不随份子錢 當年輕人開始不随份子錢 袁曼雁 | 2023-05-02
  • 張天愛假期曬“酷”存照 卷發披肩穿黑色吊帶裙大秀好身材 張天愛假期曬“酷”存照 卷發披肩穿黑色吊 嬴覓晴 | 2023-05-02
  • 畢滢用8年時間成功逼宮?曾被傳已婚生子的她,不容小觑 畢滢用8年時間成功逼宮?曾被傳已婚生子的她, 幸聽楓 | 2023-05-03
  • 宋慧喬獲視後首次曬照,拿獎杯笑容溫柔 宋慧喬獲視後首次曬照,拿獎杯笑容溫柔 郜萌運 | 2023-05-02

©2022 大酷樂 版權所有

隱私政策 | 服務條款 | 聯繫我們