sponsored links

當你可以實時編輯你所看到的東西時 為什麼要看現實?

增強現實技術的採用正在緩慢但穩步地進行,而且很容易看到該技術的一個可能的未來:讓你實時編輯你所看到的東西的硬體,用虛擬覆蓋物取代你周圍的物體。更準確地說,這叫混合現實。保時捷的人工智慧團隊最近的研究顯示了這可能的運作方式。該團隊建立了一個被稱為TransforMR的人工智慧系統,該系統可以檢測汽車和人等物體,將其移除,然後實時用CGI替代物取代它們。

最終的結果很難說是完美的(CGI模型看起來像是從3D Movie Maker中借來的),但這個概念是引人注目的。不難想象,在未來的幾十年裡,這樣的應用會變得很普遍。

這項工作背後的團隊表示,儘管他們工作中的個別元素之前已經完成,但複合系統還是非常新穎的。TansforMR可以在普通的智慧手機和平板電腦上執行,但需要一個4G連線來將資料傳送到雲端。影象經過處理後,物體不只是被掩蓋,就像Snapchat的AR鏡頭或蘋果的Memoji一樣,而是完全被編輯掉。物體被檢測、分割,然後被"塗抹"(用人工智慧生成的背景取代),並以CGI模型代替原始模型。顯然這一系統有很多地方需要改進。在低質量的繪畫中,幀率只有15fps;滯後時間為50至100毫秒;CGI替換的質量也不是最好的。但是,該系統背後的團隊說,這些方面相對容易改進。

保時捷的機器學習研究員穆罕默德-卡里(Mohamed Kari)表示,主要的限制來自於大型影象的計算量非常大,所以對於繪畫,目前只能用非常小的影象來做,在512 x 512的影象上操作。但頻寬[使用]是可以忽略不計的。這意味著如果能做FaceTime,你就能做TransforMR。

當你可以實時編輯你所看到的東西時 為什麼要看現實?


Kari說,該系統的關鍵要素之一是它對姿勢檢測的使用。這意味著,例如,當系統檢測到一個人時,它會識別出身體的18個獨立關節。這意味著CGI替換可以實時固定在目標的運動上。看看TransforMR的操作片段,不難想象這種軟體被整合到AR眼鏡中。使用者可以為他們的一天選擇一個"主題",用科幻的替代品或來自大自然的物品來取代汽車、建築和人。但是,這將涉及一個巨大的硬體挑戰。目前的增強現實眼鏡只能在鏡片上投射出低解析度、半透明的覆蓋物。現在,我們還沒有技術來"編輯"使用者在這種硬體上看到的東西。(儘管這可以透過"穿透式"VR系統來實現,在該系統中,第一人稱攝像機將實時影片傳輸到完全遮擋住佩戴者視線的螢幕上。)

"我們在螢幕上重現完整的影象,所以我們可以刪除任何我們想刪除的東西,但對於增強現實眼鏡來說,刪除物體是困難的,因為它增加了光強度,以Hololens為例,你是透過玻璃看的,所以去除東西更困難。這個問題有待於研究。"

但為什麼保時捷首先要調查這種技術呢?據該公司的人工智慧架構師之一Tobias Grosse-Puppendahl說,這一切都是為了改善乘客和司機的體驗。未來版本的TransforMR軟體可以用來在人們被困在交通中時為他們提供娛樂。"我們的主要問題是,我們如何能夠以一種有趣和娛樂的方式來修改現實,以便作出反應?這就是我們想法的起源"。

保時捷的其他研究專案也遵循類似的主題。例如,該公司還建立了一個名為SoundRide的原型系統,它使用汽車的機器視覺來檢測風景的變化並提示適當的音樂。"也許,例如,你正開車穿過阿爾卑斯山,行駛在一條美麗的路線上,突然你有一個美妙的景色,也許音樂就會改變,我們正在思考如何透過技術使車內的體驗更加有趣和美麗"。而這意味著對人們本來會看到和聽到的東西進行修補。"

分類: 科技
時間: 2021-10-13

相關文章

律師“僱兇殺己”騙千萬保險牽出案中案 揭開美國這一百年家族的死亡與秘密

律師“僱兇殺己”騙千萬保險牽出案中案 揭開美國這一百年家族的死亡與秘密
一個強大的百年家族.一起致19歲女孩死亡的汽艇事故.幾起神秘的謀殺,當中涉及上千英畝豪宅.毒癮.欺詐.槍擊--這些犯罪元素像是被集體塞進了一部好萊塢大片,曲折跌宕的劇情讓人覺得可能是編造出來的.然而, ...

老羅一如往常的傲氣,談論蘋果的大爆炸功能

老羅一如往常的傲氣,談論蘋果的大爆炸功能
天下本無事,可總有些人躁動不安,不把江湖這潭水攪得翻天覆地,他是不會罷休的,商界如此,娛樂圈如此,手機界竟然也不例外. 昨日(9月24日),iPhone 13系列正式上市開賣,包括iPhone 13 ...

好書榜 | 貓咪的心思,人類真的猜得透嗎?

好書榜 | 貓咪的心思,人類真的猜得透嗎?
來源:讀特 深港書評為你帶來2021年0904期好書周榜. 據說,對於好小說有一個非常重要評判標準,那就是"人物形象生動".但,如果是一本關於貓的小說呢? 入選本期好書榜的虛構類短 ...

謝利·卡根:為什麼人不想死?——《死亡哲學》

謝利·卡根:為什麼人不想死?——《死亡哲學》
阿爾貝·加繆 經驗不是憑空造出來的,必須自己去經歷.--阿爾貝·加繆 人之所以愛智慧,源於人的有限性和必死性.時常受到死亡恐懼威脅的人類,製造出各種遊戲或"謊言",使自己忘記死亡, ...

克勤堂饒志陽:陶瓷是“藝”屈服於“工”的藝術

克勤堂饒志陽:陶瓷是“藝”屈服於“工”的藝術
元青花之美,在於奪人.比起後世的青花,它的不同之處在於那一抹藍色.元青花的藍色非常鮮明,像藍寶石一樣附著於白玉一般的瓷胎上,呈現出無法比擬的明豔之藍,彷彿有一種生命力被賦予器物,如出水芙蓉,美得令人震 ...

人為什麼會“見鬼”?科學解釋助你揭開謎團
世界上有不少人相信鬼的存在.其實,大多數"見鬼"經歷都是可以用科學來解釋的.你所害怕的"鬼",往往只是一種錯覺. [Photo/Pexels] 1. ELECT ...

人為什麼會“見鬼”?科學解釋助你揭開謎團 4 scientific explanations for ghosts

人為什麼會“見鬼”?科學解釋助你揭開謎團 4 scientific explanations for ghosts
來源:中國日報網 世界上有不少人相信鬼的存在.其實,大多數"見鬼"經歷都是可以用科學來解釋的.你所害怕的"鬼",往往只是一種錯覺. [Photo/Pexels] ...

廚房用了半年,發現這些地方“踩坑”!換掉4個東西,幸福感倍增

廚房用了半年,發現這些地方“踩坑”!換掉4個東西,幸福感倍增
房子裝修得好不好,很多時候並不是裝修時就能看出來的,因為那只是表面現象,或者你以為的"好".只有等到入住一段時間後,你才會發現那些設計或家居用品是否真的實用. 當初高高興興地搬進了 ...

那些看到就想要抄下來的句子(十六)
找一個積極向上的人,這種積極向上是一種生活態度,他們沒有情緒暴力,不封鎖自己,不會消沉到讓家裡低氣壓. 婚前做個排位小測是父母子女,夫妻關係排列的順序很重要,這沒有對錯,只有兩個人匹配不匹配,我是把夫 ...

DH日運2021.9.18
每日星座運勢2021年9月18日 白羊座 你現在可能專注於某件事情會如何發展.在某一時刻,你認為一切都會好起來的,這帶來了暫時的輕鬆感.但隨後你開始思考可能出錯的地方,你變得懷疑它是否會有你需要的結果 ...

新認識的戀人突然失蹤,四處尋找,卻得知此人已死7年.更驚悚的是

新認識的戀人突然失蹤,四處尋找,卻得知此人已死7年.更驚悚的是
安妮是位才華橫溢暢銷榜排名第一的銷售作家,一部作品的稿費高達400萬英鎊,事業可謂如日中天.她的現任丈夫是個編輯,見寫小說能這麼來錢也就跟著寫起的小說,但出版社覺得他寫出的內容實在不堪入目,便直接退了 ...

特級教師應彩雲:幼兒是這樣學習的
作為一項為社會大眾提供專業權威教育服務的公益活動,"特級教師開課啦"系列公益講座近五年來連續舉辦了近40場,向全社會展示了特級教師.特級校長的講臺風采,傳遞了先進教育理念. 從本期 ...

並不高冷!研究顯示:你的貓咪可能比你想象的更愛你

並不高冷!研究顯示:你的貓咪可能比你想象的更愛你
貓咪通常被認為是比較獨立的動物,大多數人認為貓很冷漠,過著相當孤獨的生活,好像在它們眼裡並沒有"主人"這個概念,更不會對人有什麼依戀性,但是,俄勒岡州立大學的一項研究發現,事實並非 ...

偶遇小米眼鏡探索版,3D視覺和AR大火!中國光博會深度觀察

偶遇小米眼鏡探索版,3D視覺和AR大火!中國光博會深度觀察
智東西(公眾號:zhidxcom) 作者 | 健恩 編輯 | 漠影 智東西9月18日報道,本週,第23屆中國國際光電博覽會(以下簡稱中國光博會)在深圳國際會展中心(寶安新館)開幕. 中國光博會是很受電 ...

為什麼馬斯克強烈推薦的特斯拉Yoke方向盤總被懟?

為什麼馬斯克強烈推薦的特斯拉Yoke方向盤總被懟?
特斯拉在推出非圓形方向盤Yoke後,備受媒體關注.在這其中,特斯拉的忠實粉絲則認為,Yoke方向盤造型前衛,握感運動,並且並不會遮擋方向盤後的儀表.而不同聲音表示,Yoke方向盤並不符合人們日常駕車的 ...

中國語言文學類專業2021年在山東省錄取高校分數線分析

中國語言文學類專業2021年在山東省錄取高校分數線分析
中國文化博大精深,而語言文字就是它的載體.如果你熱愛中國文學想要從事文字工作,一定不要錯過今天這期中國語言文學類的乾貨! 目 錄 一.專業介紹 二.就業分析 三.中國語言文學類在山東錄取分數分析 四. ...

一代數學天才華羅庚,為何去世之前跟妻子分居五年?

一代數學天才華羅庚,為何去世之前跟妻子分居五年?
1985年6月12日,在東京大學的演講臺上,一位75歲滿頭銀髮的科學家正在進行<數學的理論.應用與普及>的學術演講. 只見他先是娓娓道來,然後是激情澎湃.他一邊講,一邊把西裝脫了,把領帶也 ...

這些傷孩子的話,你說過嗎?

這些傷孩子的話,你說過嗎?
策劃執行 | 本刊編輯部 專家支援 | 吳在天(心理諮詢師) | 策劃人小語 | 很多時候,父母會習慣性地.不經大腦思考就脫口而出許多話.說的人或許無心,甚至是出於好心,但是對孩子來說,這些無意的話很 ...

10年嘔心書寫《西南邊》馮良:寫出大涼山的歷史變遷

10年嘔心書寫《西南邊》馮良:寫出大涼山的歷史變遷
長篇小說<西南邊>. 散文集<彝娘漢老子>. 作家馮良 趁在北京學習的機會,筆者約馮良聊天.知道我先要去中國美術館看展,她把碰面的地點定在附近的嘉德中心.馮良的先生翟躍飛是畫家 ...