sponsored links

WiMi微美全息科學院在VR內容處理和全息影片處理上使用3D點雲技術

WIMI近年來一直在探索更高效的全息影象處理方法,實現更加真實的全息影像。全息、VR的精髓是從2D到3D的沉浸式使用者體驗。實現全息、3D立體式的空間展示,需要考慮從資料獲取到三維資料建模等一系列的問題。全息、AR、VR目前還有很多技術難點,利用3D感測器資料採集後,如何去承載和實現三維視覺,這對處理器的要求非常大;如何標準化構建三維的物體樣本庫,跟AI、深度學習結合起來做到智慧識別。

WIMI全息科學院楊軍超博士提出使用3D點雲技術應用於VR內容處理和全息影片處理上,完善三維視覺演算法技術。

3D點雲,其主要來源於3D感測器,包括各種3D掃描器,LiDARs,以及RGB-D相機。3D點雲是某個座標系下的點的資料集。點包含了豐富的資訊,包括三維座標 X,Y,Z、顏色、分類值、強度值、時間等等。3D點雲可以將現實世界原子化,透過高精度的點雲資料可以還原現實世界。點雲表示作為一種常用的表示格式,在三維空間中保留了原始的幾何資訊,不需要任何離散化。因此,它是許多場景理解相關應用(如自動駕駛和機器人)的首選表示。

圖1 3D點雲示意圖

3D點雲的表示方法

基於二維投影的方法。將三維點雲資料投影到二維影象平面。

基於三維體素的方法。對三維點雲進行二維投影降低了演算法處理的難度,但是三維到二維的投影必然帶來幾何結構資訊的損失,直接進行三維特徵的提取在一些場景下是非常有必要的。同時,對點雲進行體素化 (Voxelization),將其轉換為空間上規則排布的柵格,使得可以直接應用在這種表示上。

基於原始點的方法。無論是二維投影還是三維體素,均需要對原始點雲進行一定的轉換,而轉換必然帶來資料資訊的損失。

基於圖的方法。現實生活中存在大量的非結構化資料,如交通網路、社交網路等,這些資料的節點間存在聯絡,可以表示為圖。研究圖資料的學習是近年來學界的熱點。三維點雲資料可以看作圖資料的一種,圖網路的很多思想可以被借鑑於點雲資料的特徵學習中。

不同的表示對應著不同的處理方法。簡單的處理方式為將其投影為二維影象或者轉換為三維體素 (Voxel),從而將無序的空間點轉變為規則的資料排列;也可以使用原始點作為表示,不做任何變換,該方式的好處為最大可能保留所有原始資訊。此外,點雲作為空間無序點集,可以被看作普適意義上的圖資料。點雲還有另外一種表示,稱作網格 (Mesh),其也可以被看作是構建了局部連線關係的點,即為圖。將點雲看作圖資料,可以使用圖領域新興的圖卷積 (Graph Convolution) 技術進行處理。需要提及的是,原始點的表示和圖表示之間並無明確界限(事實上原始點雲和網格 (Mesh) 之間有一定區別,但若從語義理解方法的角度看,可暫時忽略此區別,將Mesh看作是增加了一種連線關係)

WiMi微美全息科學院在VR內容處理和全息影片處理上使用3D點雲技術

楊軍超博士,畢業於重慶郵電大學通訊與資訊工程學院資訊與通訊工程專業博士研究生,華盛頓大學電子工程學院聯合培養博士。承擔/參與省部級專案專案4項,主持重慶市研究生科研創新專案 基於使用者QoE驅動的VR影片傳輸的研究;參與國家自然科學基金面上專案 面向移動高畫質影片傳輸的廣義LDPC碼效能研究與最佳化設計;參與重慶市技術創新與應用示範專項產業類重點研發專案 基於深度卷積神經網路的手機液晶面板缺陷檢測方法研究和示範應用;參與重慶市基礎與前沿研究計劃專案 基於名字標籤交換的未來網際網路高速資料轉發機制研究以第一作者發表EI/SCI論文6篇,中文核心1篇,申請專利4項。

微美全息科學院成立於2020年8月,致力於全息AI視覺探索科技未知,以人類願景為驅動力,開展基礎科學和創新性技術研究。

微美全息近年在全息應用取得卓越的成就,正在推進全息技術在更多行業的廣泛應用,擴大行業領先地位。公司也將繼續持續擴充套件對優質全息計算機視覺的儲備,中近期內將尤其注重通訊和微整合晶片領域計算機視覺的開發和獲取。全息技術是人類科技發展的共同目標,全息技術是IT產業發展願景。

微美全息科學院計劃在以下範疇拓展對未來世界的科學研究:

一、全息計算科學:生物全息計算、量子全息計算、光子全息計算、中微子全息計算、磁浮全息計算

二、全息通訊科學:量子全息通訊、暗物質全息通訊、真空全息通訊、光子全息通訊、夸克全息通訊、磁浮全息通訊、腦機全息通訊

三、微整合科學:中微子微整合、生物微整合、光子微整合、量子微整合、磁浮微整合、衰變微整合、聚變微整合、裂變微整合

四、全息雲科學:量子全息雲、光子全息雲、大氣全息雲、太空全息雲

微美全息相信未來的世界是雲端的,未來的世界是虛擬的,未來的世界是有夢想就可以實現的。一切美好的東西都能夠透過全息技術真實的儲存下來,這一切都會變成永恆的現實。微美人為這個夢想而生,為這個夢想而奮鬥,為這個夢想創造去人類文明的輝煌,全息是人類共同的夢想,一切皆在路上。

分類: 親子
時間: 2021-10-20

相關文章

劉姥姥被難堪戲耍,賈母和王熙鳳各有一個舉動,溫暖了她的心

劉姥姥被難堪戲耍,賈母和王熙鳳各有一個舉動,溫暖了她的心
趣侃紅樓147:篾片臨門,王熙鳳定主意,母豬上桌,劉姥姥遭戲耍 話說賈母帶著劉姥姥來到瀟湘館,看到紗窗舊了,就吩咐王夫人給換了.按說王熙鳳管家,這等小事讓她做就是了,可賈母偏要王夫人做.聽話聽音,這背 ...

有種“熱”叫孩子愛踢被子,其實不止熱,娃有“苦衷”媽媽不知

有種“熱”叫孩子愛踢被子,其實不止熱,娃有“苦衷”媽媽不知
大家好呀,我是布穀媽~ 每當我們睡不好的時候,總會羨慕地說:"要是有一個嬰兒般的睡眠就好了!" 但如果你去問一個照顧嬰兒的媽媽,她一定會頂著黑眼圈告訴你:"嬰兒才睡不好呢 ...

當媽之後玻璃心
淅淅瀝瀝的秋雨下了一夜,又是一個不眠夜,望著身邊熟睡的寶貝,心裡自責不已. 繼七夕當天掉床之後,下午又把閨女從床上掉下來,從廁所出來我看到她在床邊,一個箭步衝上去也沒能抱住她,抱著安撫,她哼唧了幾聲, ...

抓住斷夜奶的合適時機,做好4個準備工作,輕鬆幫寶寶斷掉夜奶

抓住斷夜奶的合適時機,做好4個準備工作,輕鬆幫寶寶斷掉夜奶
導語:喂夜奶,對每一位哺乳媽媽來說應該都是件發愁的事.好不容易把寶寶哄睡了,剛想休息一下,結果又被寶寶的哭聲鬧醒了,時間久了真的很崩潰.長此以往,不僅新媽媽們身體吃不消,寶寶的生長髮育也會受到影響. ...

寶寶睡不踏實、“滿床滾”?可能是在向你傳遞訊號,父母別不知道

寶寶睡不踏實、“滿床滾”?可能是在向你傳遞訊號,父母別不知道
大家好,我是文文爸,你有滿床找過娃嗎?女兒剛斷奶時,我跟她媽媽每天晚上都要上演一場"尋娃記",一覺醒來,娃不是在地上,就是在床邊的某個角落,真不知道她是怎麼睡覺的? 尤其是一歲以前 ...

夜讀 | 愛與生活,不可辜負

夜讀 | 愛與生活,不可辜負
名家畫廊 | 梁樹年,齋號警退齋,拜畫家祁井西為師,後又拜張大千門下,取名家之長,融會貫通,從而形成自己獨特的風格. 生活,總是被一些細碎的溫柔填滿. 世界上最好的感覺是什麼? 有人回答說:最好的感覺 ...

這樣抱寶寶,當心孩子以後駝背、高低肩,圖解3種正確抱法可收藏

這樣抱寶寶,當心孩子以後駝背、高低肩,圖解3種正確抱法可收藏
面對剛出生不久的寶寶,真是怎麼抱都不夠,可問題來了:寶寶那麼小又那麼軟,怎麼抱?成為了一項技術活. 也許你會說,抱孩子,睡不好?看看網上那些新手爸媽,會抱娃的人還真不多.文文爸當初面對剛出生的女兒,就 ...

一歲多寶寶霰粒腫康復過程全紀錄

一歲多寶寶霰粒腫康復過程全紀錄
寶寶在19個月的時候發現了霰粒腫,我們四處求醫,西醫的回覆都是先滴眼藥水保守治療,如果沒用就要做全麻手術.後來眼藥水足足滴了2個周,但沒有任何用處.因為不想給這麼小的孩子做全麻手術,我嘗試了各種方法, ...

一個高齡二胎媽媽的懷孕生產經歷(I)
懷二胎之前,看周圍人高齡二胎的,不能說"幸災樂禍",但也絕對佩服人家的勇氣.膽量,覺得自己真的是遭不了這個罪.別的都好說,生完孩子,起不來下地的那個回憶我還是有的,那是根本使不上勁 ...

2-4歲秩序敏感期,雖“可怕”卻更“可貴”,原來我們都錯怪寶寶

2-4歲秩序敏感期,雖“可怕”卻更“可貴”,原來我們都錯怪寶寶
Hi,大家好,莞媽又來更文啦!今天無意中看到一位家長的帖子,是這樣說的: 在書中看到關於孩子敏感期的釋義後,為自己的無知感到愧疚!如果能重來一次,我一定會更耐心,再也不責怪孩子的任性!但可惜成長只有一 ...

寶寶一歲後,在餵養上家長一不小心就會犯錯,牢記兩戒三少二堅持

寶寶一歲後,在餵養上家長一不小心就會犯錯,牢記兩戒三少二堅持
孩子出生之後,會經歷很多不同的發育階段,比如新生兒時期的育兒方式與嬰兒時期就不同,寶寶六個月前和六個月後的飲食方式就不同等等.那麼,寶寶一歲之後,在餵養方式上有什麼改變呢? 佳佳已經滿週歲了,是一個非 ...

寶寶多大開始長牙?家長該如何護理?這份出牙時間表讓你不再焦慮

寶寶多大開始長牙?家長該如何護理?這份出牙時間表讓你不再焦慮
導語:自從有了孩子,孩子的一切生長髮育,對於父母來說,都是頭等的大事.比如什麼時候長牙?孩子長牙時該如何護理?文文爸特地整理了一份出牙時間表,迫不及待地分享給正焦慮的你. 01.孩子長牙有早有晚 前段 ...

關於寶寶長牙你還有多少誤區?護理不當孩子遭罪,家長別不以為意

關於寶寶長牙你還有多少誤區?護理不當孩子遭罪,家長別不以為意
Hi,大家好呀,我是莞家媽媽,每天學習和分享科學實用的育兒知識,解決帶娃路上的各種難題.此前寫過關於寶寶長牙的文章,後臺好多小夥伴留言,發現大家仍有很多問題,以及一些認識上的誤區,所以今天再來嘮一嘮這 ...

民間故事:木匠夜入客棧,小二上發臭飯菜,鍾馗畫像讓他逃過一劫

民間故事:木匠夜入客棧,小二上發臭飯菜,鍾馗畫像讓他逃過一劫
在明朝時有個年輕的木匠名叫王武,他們一家幾代人都是木匠出身. 王武十八歲那年,杭州府有幾個富商準備大興土木修建園林宅邸,王武聽到這個訊息後心動了,他想著到杭州府去幹上一年半載,總比在鄉間幹上幾年的銀錢 ...

容易受“內傷”的星座寶寶,表面浮雲淡薄,內心藏著過不去的坎

容易受“內傷”的星座寶寶,表面浮雲淡薄,內心藏著過不去的坎
每個人都喜歡讓人感到溫暖的人,尤其是性格開朗愛笑愛鬧的人非常歡迎,但陽光的背後隱藏的也許是別人無法觸及的黑暗. 每一個看似十分歡樂的人都有一份不可和他人言說的悲傷,給予別人陽光把悲傷都留給自己,這種情 ...

記好寶寶游泳的這四個時間點,讓你更輕鬆

記好寶寶游泳的這四個時間點,讓你更輕鬆
雖然大部分的家長都聽說過嬰兒游泳,也在醫院婦產科就讓寶寶參加了第一次游泳,但是仍然有很多家長對嬰幼兒游泳瞭解得不夠深,就比如說,寶寶一次游泳的時間是多久.多久游泳一次.什麼時候游泳最好.讓寶寶游泳到什 ...

有水果就能做!綿密絲滑又解暑,承包一個夏天的快樂

有水果就能做!綿密絲滑又解暑,承包一個夏天的快樂
你有給寶寶吃過冰淇淋嗎?你自己想吃冰淇淋嗎? 今天分享一個媽媽也超愛吃,寶寶又能吃得很健康的冰淇淋. 這次的做法很簡單,一攪一凍就搞定.食材也不挑,有水果就可以哦. 不過,我強烈建議大家試試芒果,它酸 ...

如何應對孩子哭鬧?小孩哭有三種原因!看看你的孩子屬於那種哭鬧

如何應對孩子哭鬧?小孩哭有三種原因!看看你的孩子屬於那種哭鬧
上幼兒園的小朋友是免不了哭的,男子漢也不例外,不過同樣是哭,卻有不同的理由,當然要有不同的應對方法. 哭至少有三類: 第一種哭是"生理哭" 這是由於生理上的不舒服導致的哭泣,如沒吃 ...

這個動作可不是“可有可無”,寶寶經常做,在智力上會特別優秀

這個動作可不是“可有可無”,寶寶經常做,在智力上會特別優秀
本文由護芽媽媽原創,歡迎個人轉發和分享 寶寶會不會爬,多大才開始爬,可是媽媽們十分關心的問題. 研究表明:大約有45%的寶寶是在8個月左右學會爬行的,會爬的寶寶智力發展得更快,也會更加優秀. 案例 昨 ...

八個多月的娃,究竟要不要斷夜奶?

八個多月的娃,究竟要不要斷夜奶?
娃八個多月,最近關於是否斷夜奶,真是相當糾結. 最近每天1點30左右醒過來,然後就是早上5點左右吧,因為家裡隊友經常工作加班,回來也遲,我也被動的養成了每天12點左右睡的習慣.娃倒是前期讓我養成了好習 ...