1. 創(chuàng)業(yè)頭條
  2. 前沿領域
  3. 人工智能
  4. 正文

AI技術讓手辦「整活」:3D建模居然可以這樣簡單

 2022-09-01 11:19  來源:互聯(lián)網(wǎng)  我來投稿 撤稿糾錯

  域名預訂/競價,好“米”不錯過

科技領域,既有用元宇宙開發(fā)布會的公司,也有All in元宇宙的公司,很多虛擬世界已經建立起來,人們面臨的問題正在變成:真實世界中,人類創(chuàng)造了億萬種物品豐富著我們的生活,那么如何才能快速復制這些物品到全新的元宇宙世界中呢?

3D內容對于元宇宙至關重要,很多科技公司正在推出用于構建虛擬世界的工具,隨著計算機圖形技術、元宇宙和AI之間的交集越來越多,這些技術也在不斷升級。

最近,華為HMS Core 3D建模服務發(fā)布了人形角色自動建模和骨骼綁定的功能,引起了我們的注意。

看到一個可愛的手辦,在想能不能擁有它的3D虛擬形象?只用手機圍繞手辦拍攝一圈,就能構建一個造型精準的3D模型并為其自動綁定骨骼。

在導入動作數(shù)據(jù)后,它不僅可以隨你走動、向你招手,還可以完成跳舞等復雜動作。

在開放的Demo App中,我們只需要用普通手機攝像頭圍繞目標物體進行一通360度拍攝,清晰的3D模型即可生成。除了Q版的動漫手辦以外,毛絨玩具或者機器人等人形角色也可以被掃描成模型并賦予骨骼。

那么它的能力到底如何呢?我們也實際操作了一把,我們用華為的技術給機器之心的毛絨玩偶構建了3D模型并綁定好骨骼。

只需使用視頻中的同款動作數(shù)據(jù)驅動模型,就可以跳同款舞蹈啦:

如果四肢短小的玩偶都可以搞定的話,看起來絕大多數(shù)人形角色都是沒問題的!

通過AI能力用2D照片生成3D模型,是人工智能學術會議中的一個熱門領域,剛剛過去的國際頂會CVPR上就有數(shù)十篇這個方向的論文。通過對物體的不同角度進行拍攝,將2D圖像轉換為三角網(wǎng)格模型,生成的3D模型可供建筑師、設計師、藝術家和游戲開發(fā)者導入圖形引擎,并可以在此基礎上修改比例、更改材料或嘗試不同的照明效果。而如今,前沿技術的一部分已經成為了手機上的應用,不禁讓人感嘆科技發(fā)展的速度。

3D建模,手機也行

快速構建3D模型的能力來自華為終端云服務開放能力合集HMS Core,其擁有3D建模、3D引擎、AR Engine等多個圖形領域的開放服務。其中,3D建模服務可以給我們帶來很多想象空間,可以用在商品展示、教學、虛擬人物,甚至動畫制作上。

華為HMS Core 3D建模服務,不需要用TOF、深度攝像頭或LiDAR激光雷達等特殊硬件,只需要一個普通手機的RGB攝像頭即可完成建模。

這個過程在使用者看來是「一鍵生成」的,背后經歷的卻是一系列復雜的處理過程。

高精度的幾何重建需要先進行物體分割,將目標物與背景分離,并進行圖像匹配、特征提取和深度估計,AI算法通過分析不同角度的圖像來判斷位置關系,生成點云構建3D模型,再計算出紋理材質對模型表面進行貼圖。

在這個過程中,華為利用自研的高低模技術,通過計算剔除冗余的面片,可以用更低的面片數(shù)(5萬以下)達成高面片數(shù)(10萬及以上)模型的效果,在中低端手機上也能實現(xiàn)精細的視覺效果。

自動 生成3D 虛擬形象的「筋骨」

為了讓模型動起來,我們還需要對模型進行「骨骼綁定」:

傳統(tǒng)流程中,骨骼綁定也需要動畫師手工來完成,HMS Core的能力大幅提升了動畫制作的效率:通過自動的骨骼綁定和蒙皮權重估計,HMS Core可以讓你剛剛掃描出來的3D模型在導入動作數(shù)據(jù)后活動起來。

值得一提的是,在這個領域,此前少數(shù)實現(xiàn)自動關節(jié)估計的方法都需要目標模型擺好標準姿態(tài)。華為利用AI算法減少了人為規(guī)則的需求,可以支持非對稱的多種姿態(tài)。

面對模型的各種姿態(tài),AI算法需要大量數(shù)據(jù)進行訓練,但在3D模型重建任務上,業(yè)內其實并沒有這樣的數(shù)據(jù)集。

對此,華為自研了一套3D人形角色自動生成框架,可以基于千百個模型數(shù)據(jù),生成數(shù)十萬甚至是上百萬的角色模型和骨骼。通過數(shù)據(jù)增強,HMS Core支持了非對稱姿態(tài)、不同體型和類別的人形角色的自動骨骼綁定。

投射到現(xiàn)實世界

最后,若想將構建好的3D模型呈現(xiàn)在真實的世界中,實現(xiàn)真人與3D虛擬物體交互的效果,還需要準確高效的AR能力。

華為HMS Core的AR Engine通過整合算法實現(xiàn)了厘米級的精準定位,開發(fā)者可以通過這些能力讓虛擬世界與現(xiàn)實世界自然地融合在一起。

例如,AR Engine提供了光照估計和環(huán)境Mesh能力,使得3D虛擬形象的影子會隨著燈光變化,并可被現(xiàn)實世界中的物體擋住,帶來更自然的視覺交互體驗。

圖形領域能力全面 開放,加速元宇宙時代到來

隨著業(yè)界虛實融合步伐加快,華為HMS Core全面開放圖形領域的相關能力,助力開發(fā)者高效構建虛實融合的數(shù)字世界。

圖片來自2022年7月HUAWEI Developer Day(簡稱HDD)杭州站主論壇現(xiàn)場

開發(fā)者可以通過直接調用軟件接口獲得華為圖形領域的核心能力,節(jié)省大量時間和精力,高效完成應用開發(fā)。

相信有了這種能力的加持,或許下一個爆款的App已在路上,元宇宙時代也將加速到來。(文章來源于公眾號:機器之心)

申請創(chuàng)業(yè)報道,分享創(chuàng)業(yè)好點子。點擊此處,共同探討創(chuàng)業(yè)新機遇!

相關標簽
元宇宙
ai技術

相關文章

  • 匯聚中國AI頂尖力量 云天勵飛參與華為AI大模型聯(lián)合創(chuàng)新

    2023年7月6日,第六屆世界人工智能大會(WAIC2023)在上海開幕,“人工智能大模型”是本屆大會的備受矚目的話題,據(jù)悉,在昇騰AI大模型的創(chuàng)新研發(fā)中,華為聯(lián)手26家行業(yè)領軍企業(yè),組建了一支協(xié)同創(chuàng)新的“AI明星隊”,云天勵飛作為中國人工智能企業(yè)的杰出代表,和互聯(lián)網(wǎng)大廠、運營商、科研院所等優(yōu)秀團隊

    標簽:
    ai技術
  • 用友大易:邁入AI招聘2.0時代,讓人力資源回歸本質

    這幾個月來,以ChatGPT為代表的生成式AI展現(xiàn)出的能力令世界驚嘆。自從2016年AlphaGo戰(zhàn)勝李世石掀起了一波AI浪潮后,AI仿佛已經沉寂了很久,ChatGPT的橫空出世就如同一束耀眼的光芒,讓AI這個名詞重回C位。過去在AI1.0時代,主要通過訓練模型來實現(xiàn)圖像識別、聲音識別、語言處理等特

    標簽:
    ai技術
  • 新發(fā)布的PaaS2.0,能否助力涂鴉智能再起飛?

    文:互聯(lián)網(wǎng)江湖作者:志剛2023年的IoT需要一個新故事。6月29日,涂鴉智能在開發(fā)者大會上,發(fā)布了企業(yè)級戰(zhàn)略PaaS2.0,希望通過一個平臺+四大開發(fā)服務,建立起IoT生態(tài)。對于這場發(fā)布會,市場的態(tài)度是積極的。美東時間6月29日收盤,涂鴉智能美股股價上漲5.6%,來到1.87美元/股。近日股價穩(wěn)定

    標簽:
    ai技術
  • 河南元宇宙創(chuàng)造者大賽成果“元豫宙”斬獲TopDigital創(chuàng)新營銷獎金獎

    6月29日,在上海舉行的TopDigital營銷盛典上,河南文旅元宇宙空間“元豫宙”,憑借其匠心獨具的創(chuàng)新性場景設計、美輪美奐的超寫實場景呈現(xiàn)、新潮炫酷的沉浸式虛擬體驗,斬獲TopDigital創(chuàng)新營銷獎虛擬場景設計組金獎。元豫宙,是河南省文化和旅游廳主辦的“行走河南·讀懂中國”品牌推廣暨元宇宙創(chuàng)造

    標簽:
    元宇宙
  • 大模型難掩AI制藥的悲傷:越過山丘,無人等候

    美團曾經的二號人物王慧文對標OpenAI的創(chuàng)業(yè)項目光年之外,以20億賣給美團,再度引發(fā)市場對大模型的熱議。

    標簽:
    ai技術
  • 庫克已納投名狀:蘋果AI沒得選,只能選百度

    蘋果16弄了兩個版本,一個是專門給中國人用的,準備用百度的AI,還要交錢。第二個是全世界都可以用的,用了ChatGPT,包括臺灣、香港、澳門都可以用。以后都這樣了。好,問題就出在這,蘋果和百度的合作出現(xiàn)問題了,新聞連起來看,才能明白其中含義。新聞一:蘋果正在和騰訊、字節(jié)初步接洽,考慮將二者的AI模型

  • AI加速時代的“進度條”,我們撥動了百分之幾?

    “技術日新月異,人類生活方式正在快速轉變,這一切給人類歷史帶來了一系列不可思議的奇點。我們曾經熟悉的一切,都開始變得陌生?!庇嬎銠C之父約翰·馮·諾依曼曾這樣說到。

    標簽:
    ai智能
  • AI視頻賽道,要變天了

    “毀滅你,與你何干?”,這是在劉慈欣的科幻小說《三體》里用來形容人類與三體人之間的戰(zhàn)爭的一句話。

    標簽:
    ai智能
  • “創(chuàng)造市場”與“算法進化”,中美AI競速的岔路口

    “人工智能的商業(yè)模式,是要創(chuàng)造一個市場,而非一個算法”。這是世界AI泰斗MichaelI.Jordan的觀點。而當前的全球AI市場,占據(jù)主導地位的中美雙方,卻也走出了兩條截然不同的技術路徑,前者執(zhí)著于前沿技術的探索,后者則發(fā)力應用優(yōu)化和商業(yè)化落地。南轅北轍的兩個方向,或許已經無法直接進行排位先后、優(yōu)

    標簽:
    ai智能
  • 智能體進化發(fā)展了一年,現(xiàn)在的RPA Agent迭代到什么程度了?

    智能體進化發(fā)展了一年,現(xiàn)在的RPAAgent迭代到什么程度了?從實在智能最新發(fā)布的實在Agent7.0,看RPAAgent的迭代升級抓取豆瓣信息、自己制作PPT,這款AIAgent真的實現(xiàn)了流程全自動化AIAgent構建到執(zhí)行全自動化,持續(xù)進化RPAAgent再次降低智能體應用門檻實在智能重磅發(fā)布實

  • 崔大寶:大模型降溫背后的難點、卡點、節(jié)點

    崔大寶|節(jié)點財經創(chuàng)始人進入2024年,大模型似乎有熄火之勢:資本市場,與之關聯(lián)的概念炒不動了,英偉達股價動輒暴跌重挫,引發(fā)“泡沫戳破”的擔憂;消費市場,BATH們的推新活動少了,產品更新迭代的速度慢了,民眾的關注度降了……熱鬧的大概只剩下兩場酣仗:自5月15日字節(jié)跳動宣布“以厘計費”,打響國內大模型

    標簽:
    大模型
  • 這一屆“出道”的數(shù)字人,已經拿捧上了“鐵飯碗”

    文|智能相對論作者|陳泊丞好消息!你心心念念的事業(yè)單位發(fā)錄取公告了!壞消息!他們沒錄你,錄了個數(shù)字人。圖片來源網(wǎng)絡隨著數(shù)字人技術的突破,越來越多的傳統(tǒng)企業(yè)和機構開始用上了“數(shù)字員工”。甚至很多中國人心心念念的“鐵飯碗”,也被這些數(shù)字人給捧上了。數(shù)字人捧上了“鐵飯碗”簡單翻看一下全國各地事業(yè)單位的“錄

    標簽:
    數(shù)字人
  • 來到IPO關口,地平線離“三分天下”還有多遠?

    黑芝麻智能敲鐘后,港交所門口又有一些智駕芯片企業(yè)引發(fā)關注。據(jù)悉,近日地平線已通過中國證監(jiān)會IPO備案,擬發(fā)行不超過11.5億股境外上市普通股并在香港聯(lián)合交易所上市,預計籌集約5億美元資金。從天眼查可以了解到,該公司成立于2015年,是一家乘用車高級輔助駕駛(ADAS)和高階自動駕駛(AD)解決方案供

  • 機器人大會引領產業(yè)動向,卓翼飛思繪制無人系統(tǒng)教科研新藍圖

    8月21日,萬眾矚目的2024世界機器人大會暨博覽會在北京亦創(chuàng)國際會展中心盛大開幕。這場為期5天,集“展覽”“論壇”“賽事”于一體的機器人盛會,反映了當下機器人領域的繁榮生態(tài)。據(jù)官方統(tǒng)計數(shù)據(jù),今年現(xiàn)場逛展觀眾高達25萬人次,比去年增加25%。機器人行業(yè)有多火?看看2024世界機器人大會火爆程度便可知