sponsored links

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


智東西(公眾號:zhidxcom)

作者 | 心緣

編輯 | 漠影

用手機拍張眼部照片,就能秒知是否感染新冠。

這是復旦大學大資料學院人體感知實驗室與國內外多家機構聯合研發的COVID-19 EYE TEST新冠感染風險檢測技術

無需任何專業裝置,藉助一臺能拍照的智慧硬體拍攝一張眼部照片,測試者即可隨時隨地用該技術在3秒內判斷是否有新冠感染的風險。

這樣操作便捷、幾乎沒有成本、有助於降低居民出行風險且準確率高的創新研究,剛剛被2021國際展望大會(NEXT SUMMIT)生物醫藥與大健康論壇重要演講收錄。

值得一提的是,該技術已在中國永久免費開放。

COVID-19 EYE TEST技術是怎麼做到的?透過眼部檢測來診斷疾病的可靠性和臨床科研難度分別有多高?它能完全代替去醫院做新冠肺炎核酸檢測嗎?

近日,智東西與負責該專案的AIMOMICS首席科學家、復旦大學大資料學院青年研究員付彥偉博士,以及AIMOMICS首席資料工程師孫強博士進行深入交流,瞭解眼部檢測技術在新冠篩查方面的應用優勢、使用流程以及其未來可檢測疾病的範疇。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


付彥偉(圖左)與孫強(圖右)

一、看看眼睛就能診斷疾病,準確嗎?

“觀眼識病”在中西方醫學中皆由來已久。

中醫有目診相關理論學說,西方有眼表微迴圈理論,基於眼表和眼底視網膜進行疾病診斷的AI醫學影像技術也日益成熟。

其中,應用眼底相機檢測技術,通常需專業眼底相機來拍攝、使用特定演算法針對特定疾病識別,並經由大量人工標註修正,此類方法使用成本較高,臨床技術相對成熟。

相比之下,眼表檢測技術使用普通手機或相機即可拍攝,透過一種演算法框架,能做到多種疾病一次性識別,採用專家啟發標準、不依賴大量手工標註的弱監督自主學習進行標註。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


眼表疾病診斷系統

受這些啟發,AIMOMICS、復旦大資料學院、復旦大資料學院大資料感知實驗室與多方國際團隊合作,組建起包括機器學習、臨床醫學和商業領域專家的團隊,開展“全球跨地區跨人種新冠眼部檢測臨床實驗”。

該專案名為AIMOMICS EYE TEST PROGRAM,自2020年2月正式啟動,團隊基於COVID-19新冠疾病眼部便捷拍攝檢測的遠端風險篩查,在進行重點攻關研究與市場轉化。

自2020年新冠爆發開始,不斷有論文報告新冠疾病與眼部特徵的關聯,尤其在2020年9月之後,類似的論文數量迅速增加。

但沒有經過系統訓練的人類肉眼觀察,難以從複雜細微的眼部特徵中找出線性的邏輯關聯,只有透過系統的眼部病理特徵庫啟發和畫素級別的機器視覺分析,才能實現真正意義上眼部特徵識別和分析,並找出強關聯的臨床證據,EYE TEST專案採用的即是這一技術方向。

“我們團隊應該是全球第一個發表相關論文,並實現跨地區跨人種優異檢測結果的。”孫強博士說,他提到德國、中國、新加坡、美國、加拿大均開始有透過眼部特徵檢測疾病的相關技術報道,有些企業已經開始獲取商業訂單,但是還沒有看到他們有任何學術論文的發表。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


AIMOMICS EYE TEST PROGRAM應用場景(移動裝置、APP軟體、影片監控、實時機場安檢、疾病防控醫療器械、家庭自測遠端醫療保健)

目前,COVID-19 EYE TEST專案在全球多個地區臨床實驗中的敏感性與特異性平均指標均達到了85%以上,其中東亞人的平均特異性和敏感性更是最高達97%

“在日本,我們配合當地的核酸檢測企業做風險輔助篩查,只要我們篩查出高風險的,幾乎99%以上核酸檢測陽性。”孫強博士解釋道,這取決於一部分技術,或者成為特徵啟發主要源自對東方人的傳統目診醫學,其他人種需經一定臨床實驗並不斷調參才能達到與東亞人同樣的準確程度。

同時,不同疾病的病理分型、病毒載量、併發症等等,都會對應不同的眼部病理特徵,如果要實現檢測模型跨區域跨人種的普適性,就會呈幾何數量級別地增加實驗難度,但一路走來,該專案團隊最終還是克服了所有困難。

在大規模GPU高效能計算及機器視覺技術和深度學習工具的支援下,EYE TEST專案全球首次以跨地區跨人種臨床實驗方式提供了人體眼部病理特徵與新冠疾病相關的檢測證據和該檢測模型對跨地區跨人種的普適性證據,並在ARXIV預印本期刊全球首發“跨地區跨人種新冠眼部檢測臨床實驗”學術論文《Report on China-Spain Joint Clinical Testing for Rapid COVID-19 Risk Screening by Eye-region Manifestations》

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


上海、河北、西班牙和總測試資料集上的COVID-19與非COVID-19 ROC曲線對比

部分相關論文連結:

https://www.medrxiv.org/content/10.1101/2020.09.03.20184226v4

https://ephconference.eu/

https://www.medrxiv.org/content/10.1101/2021.06.23.21258626v1

https://arxiv.org/abs/2109.08807

二、助力國內疫情防控!向中國使用者免費開放

目前,EYE TEST專案團隊已經完成了眼部檢測開發平臺的搭建,為所有具有民用攝像頭的智慧硬體與配套軟體企業,陸續提供各型別疾病檢測的API或者SDK搭載服務。

其中新冠檢測的免費demo和非商業目的免費API(需開發者稽核)僅向中國境內(港澳臺除外)永久免費開放,且測試過程嚴格遵守境內外資料合規及隱私安全。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


使用者操作方法非常簡單,整個過程無需註冊任何個人資訊。進入新冠肺炎眼部檢測風險篩查免費測試內測版連結,頁面會出現“快速檢測”和“高階檢測”兩個選項。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


點選“快速檢測”後,測試者可以透過在直接拍照或選擇手機上的眼部照片,按照圖例對齊,3秒內即可獲取測試結果。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


“高階檢測”選項則要求測試者按照指示,以“前、左、右、上”的順序依次拍攝或選擇手機相簿中這4個不同角度的眼部照片,按圖例對齊後上傳獲取檢測結果。

如果在“快速檢測”中被診斷出“高風險”,建議增加檢測次數、更換不同光照環境,選擇“高階檢測”再次進行眼部拍攝,如果多次檢測結果仍為“高風險”,則建議及時諮詢專業醫療機構。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


內測連結:http://eyetest.aimomics.org/demo/#/index

要注意的是,拍攝應在光線充足的明亮環境下進行,避免紅色背景前拍攝,且測試者的眼部不能化妝、不能佩戴隱形眼鏡、不能被頭髮遮擋。

另外,相機解析度應不低於300萬畫素,眼部圖片解析度高於1900×500,並且不要加任何濾鏡。

拍攝後,頁面會出現提示,指引測試者手動對眼部照片進行縮放移動和裁剪,裁剪後的眼部照片不能出現背景。

後續該專案團隊還計劃將檢測方式升級為拍攝一段小影片,可以檢測多種疾病,且準確率更高。

三、僅供輔助篩查,不能代替核酸標準

需強調的是,由其新冠眼部檢測工具得出的評估內容,不能代替醫生面診和任何醫療工具所檢測的結果。

付彥偉博士告訴智東西,任何輔助快速篩查手段,都不能代替核酸作為新冠檢測的金標準,輔助快速篩查手段存在的意義,是為醫療機構認可的標準疾病診斷來提供更高效便捷的風險篩查和綜合干預輔助

此類手段更多便於提高面向大規模人群的疾病篩查的針對性與準確性,可發揮協助發現疑似高危物件群體、瞭解目標基礎人群的疾病防控狀況、降低大規模篩查的醫療與社會成本等價值。

跨地區、跨人種進行眼部檢測臨床實驗,是一件難度頗高的長期工作。團隊必須確保臨床科研的合規性,每個在不同地區、不同機構進行涉及人體臨床科研的實驗,都需要臨床註冊和批件。

“我們在全球各個地區使用不同語言、適應不同的地區規範、符合不同地區的法律要求,無論是在成本投入、跨界協同、資源整合、資料合規、各種協議簽署、爭搶時間視窗的角度上來看,僅僅完成這個批件獲得就是一個相當困難的事情。而這只是臨床實驗的一個開始。”付彥偉博士說。

而在實驗中的各種臨床資料獲取、採集、分析、處理,達到學術研究的基本要求,又是另一個歷經艱辛的故事。

因受到智慧財產權、聯合研究機構NDA保密協議等相關商業規則限制,EYE TEST專案的“全球跨地區跨人種新冠眼部檢測臨床實驗”只能選擇可公開,或聯合研究機構同意發表的內容進行發表。

同時,由於醫學類頂級期刊的投稿時間長達到4個月左右,且要求補充臨床資料和文章修回嚴格,專案團隊已在醫學雜誌頂刊的投稿還暫未發表。

不過團隊已經在不斷撰寫和投稿發表各種不同型別的眼部疾病檢測和相關醫學論文,其中多篇自2020年9月至今已在MEDRXIV預印本上發表,並被2021年第十四屆歐盟公共健康會議、NVIDIA 2020 GTC中國線上大會智慧醫療和生命科學分論壇、2021NEXT SUMMIT國際展望大會生物醫藥與大健康論壇重要演講收錄。

結語:糖尿病檢測已進入大規模內測

快速診斷是傳染病防控的必修課,近年來,AI在加速醫學影像分析和藥研等醫學健康領域正發揮著越來越重要的價值。而AI眼部檢測技術作為醫療機構的前置輔助篩查手段,能為大眾帶來最低成本的日常健康風險篩查便利。

在持續最佳化實驗的同時,AIMOMICS EYE TEST專案團隊與幾家國際網際網路企業、手機企業、核酸檢測企業的商業化地區內測已陸續完成,因受商業測試保密協議限制暫未公開。

此前該專案授權的歐洲合作企業已就新冠眼部檢測技術獲得了CE認證,其他醫療證照亦在申請中,並已經拿到數百萬歐元以上的天使投資,累計獲得數千萬人民幣的商業檢測訂單。

除了判別新冠肺炎外,據付彥偉博士透露,基於其眼部檢測技術的糖尿病檢測已經進入大規模內測,在內測臨床實驗資料集上準確率超過85%,團隊還在進行即時檢測血糖高低指標的實驗。

孫強博士也提到團隊計劃隨後陸續開放永久免費的“體溫、心率、血壓、情緒、糖尿病”demo以及非商業目的免費API。同時,團隊已與國內外多家醫療機構分別佈局了“病毒性流感、肺部疾病、肝部疾病、心臟疾病、心血管疾病、精神類疾病”的專項科研課題,將會很快掛牌全面啟動。

自拍眼睛就能測新冠!這項AI技術國內免費開放,3秒獲診斷結果


眼表檢測疾病規劃

“希望透過我們的EYE TEST API PLATFROM,為全球更多對眼部檢測有興趣的企業和開發者,提供一個更開發便捷的科研交流與商業實踐的平臺。”孫強博士說。

分類: 科技
時間: 2021-09-29

相關文章

尋找“零號病例”全球疫情時間線前移 新冠病毒多地多點起源證據更多顯現

尋找“零號病例”全球疫情時間線前移 新冠病毒多地多點起源證據更多顯現
2021年9月3日,2021中國國際貿易服務貿易交易會在北京舉行.首鋼園醫藥館國藥集團展臺的新冠病毒模型. 視覺中國供圖 繆毒株已蔓延到全球數十個國家.視覺中國供圖 尋找"零號病例" ...

新冠導致1.5億美元收入損失,大都會藝術博物館要拍賣超200件藏品副本

新冠導致1.5億美元收入損失,大都會藝術博物館要拍賣超200件藏品副本
文/Carlie Porterfield 美國最大.最負盛名的藝術博物館--大都會藝術博物館(Metropolitan Museum of Art)將拍賣旗下200多份照片和藝術印刷品的副本,以彌補去 ...

“貓冠狀”AND“新冠”,八竿子打不著
2020年伊始,一場突如其來的疫情 打亂了整個世界前行的步調, 也讓我們這些普通人對於一個名詞如雷貫耳 --新型冠狀病毒. 然而時至疫情已經大大減緩的今日, 仍有許多人聞"貓冠狀" ...

新冠疫情和晶片對車市影響將逐步改善

新冠疫情和晶片對車市影響將逐步改善
根據乘聯會資料,2021年8月乘用車市場零售達到145萬輛,同比2020年8月下降15%,而且相較2019年8月下降7%,增速偏弱. 今年8月零售環比7月下降3%,與歷年的正常月度環比正增速6-10% ...

“他們不查口罩,不測新冠,卻不準穿短褲”印度女孩因奇葩原因被禁入考場

“他們不查口罩,不測新冠,卻不準穿短褲”印度女孩因奇葩原因被禁入考場
據<印度快報>報道,一名19歲的印度女學生穿著短褲來參加考試,被老師禁止進入考場,她被迫在腿上裹了一層簾子. <印度快報>報道截圖 當地媒體報道稱,女學生塔穆莉和父親一起從她的 ...

美國動物確診新冠事件頻發 澳大利亞反封鎖示威引發衝突
(抗擊新冠肺炎)美國動物確診新冠事件頻發 澳大利亞反封鎖示威引發衝突 中新社北京9月19日電 綜合訊息:據美國約翰斯·霍普金斯大學最新統計資料顯示,截至北京時間19日8時21分,全球累計確診新冠病例2 ...

新冠疫苗接種,“捕獲”了一大批高血壓患者!這是最高的1例

新冠疫苗接種,“捕獲”了一大批高血壓患者!這是最高的1例
一週前,門診"捕獲"了自新冠疫苗接種以來.因為打疫苗來看高血壓的患者中血壓最高的一位. 多高的血壓? 211/131mmHg. 開始患者是這麼說的. 他說,最近兩天因為老父親測血壓 ...

LPL賽區穩拿冠軍?T1人員確診新冠,網友:中國不舉辦比賽是對的

LPL賽區穩拿冠軍?T1人員確診新冠,網友:中國不舉辦比賽是對的
隨著S12世界賽的臨近,許多隊伍已經整裝待發,這次之所以會取消中國的舉辦地點,很大程度是考慮到新冠疫情的影響,所以隊伍更應該注意內部的健康狀況.但最近T1卻闖了大禍,透過T1俱樂部的官方發文,他們隊內 ...

日本國民女神感染新冠,肺部出現陰影緊急住院,卻遭網民圍攻

日本國民女神感染新冠,肺部出現陰影緊急住院,卻遭網民圍攻
8月的最後一天,日本媒體報道了綾瀨遙感染新冠住院的訊息! 綾瀨遙入院治療時,她的肺部已經出現陰影,無法順暢呼吸... 不過目前病情已經得到控制,身體狀況在慢慢好轉. 事務所公佈了她這次感染髮病的經過: ...

新冠期間靠精明的交易增加20多億美元身家,休斯頓火箭隊老闆是如何做到的?

新冠期間靠精明的交易增加20多億美元身家,休斯頓火箭隊老闆是如何做到的?
文/Christopher Helman 當新冠疫情爆發時,蒂爾曼·費爾蒂塔(Tilman Fertitta)的餐館和賭場經營受到了嚴重打擊,他不得不解僱4萬名員工.但如今,由於市場的劇烈變化和他雄心 ...

新冠疫情期間,自駕游來到德國艾弗爾山區,一箇中世紀古鎮

新冠疫情期間,自駕游來到德國艾弗爾山區,一箇中世紀古鎮
在德國的艾費爾山區北部,坐落著一箇中世紀小城,Bad Münstereifel,中文翻譯為巴特明斯特艾費爾. 那天,從荷蘭出發往南,一路走來,順風.順雨.順心,只開了兩個半小時的車,德國小鎮Bad M ...

為啥有人打完新冠疫苗胳臂疼,有人卻啥事沒有?告訴你真相

為啥有人打完新冠疫苗胳臂疼,有人卻啥事沒有?告訴你真相
新冠疫苗的副作用,竟然能救命? 今年4月,美國的一名女子Mosely在接種新冠疫苗後,發現胳膊上的淋巴結腫大,胳膊疼,兩天過去後,情況未緩解,而且淋巴結按壓有觸痛感.這讓有乳腺癌家族史的她,馬上警覺起 ...

為什麼新冠疫情嚴重,股市卻還大漲?

為什麼新冠疫情嚴重,股市卻還大漲?
一邊是哀鴻遍野的新冠疫情肆虐,另一邊是紅紅火火的股市等資產價格大漲,這不禁讓人感覺有點混亂:到底哪邊跟現實更接近? 截至2021年9月9日,全世界累計超過2億人被新冠病毒感染,因新冠導致的死亡人數超過 ...

新冠疫情下待復甦的肯亞旅遊業

新冠疫情下待復甦的肯亞旅遊業
旅遊業是肯亞國民經濟的重要支柱產業,受新冠疫情影響,肯亞國際遊客數量大幅減少,旅遊業遭受重創.今年肯亞旅遊市場雖然出現復甦跡象,但與疫情暴發前相比依舊差距甚遠. 8月30日,遊客在肯亞馬賽馬拉國家保護 ...

為何新冠疫苗這麼快就研發成功,而艾滋病毒疫苗卻多年研發無果?

為何新冠疫苗這麼快就研發成功,而艾滋病毒疫苗卻多年研發無果?
目前,我們的新冠疫苗正在如火如荼,有條不紊地接種著,新冠疫苗在新冠病毒出現後不到1年的時間就研發成功並上市供應,顯示出了人類科技的強大,疫苗技術的成熟! 新冠疫苗的研發,得益於分子生物學技術的高度發達 ...

美國華盛頓:66萬面白色旗幟悼念新冠逝者

美國華盛頓:66萬面白色旗幟悼念新冠逝者
9月16日,在美國首都華盛頓,白色旗幟擺放在草坪上悼念新冠逝者. 當日起至10月初,超過66萬面白色旗幟擺放在華盛頓紀念碑附近悼念美國超過66萬名新冠逝者. 新華社記者劉傑攝 9月16日,在美國首都華 ...

「Science」近5億人生活在冠狀病毒可能溢位的地區,新冠只是冰山一角,還會有更多SARS樣病毒

「Science」近5億人生活在冠狀病毒可能溢位的地區,新冠只是冰山一角,還會有更多SARS樣病毒
本文為轉化醫學網原創,轉載請註明出處 作者:Daisy 導讀:近日,刊登在<Science>上的頭條發現,每年平均有40萬人可能感染與SARS相關的冠狀病毒,研究人員繪製了23種已知攜帶S ...

新冠疫情捲土重來,特效藥能成為下一道防線嗎?
新冠病毒的變異對藥物作用的影響 很可能會同疫苗一樣,很難有一個 治療方案能夠做到完全覆蓋 新冠疫情正在福建捲土重來,這再次給我們敲響了警鐘. 而就在幾天前,關於新冠特效藥的訊息接二連三,給應對疫情帶來 ...

新冠疫苗科學家自曝悲慘經歷:我瘋狂的童年,在邪教中長大

新冠疫苗科學家自曝悲慘經歷:我瘋狂的童年,在邪教中長大
提起科學家的童年,大部分人都會覺得一定是被"聰明""好學""成績優異"這樣的幸福讚美所圍繞.但是,對於澳大利亞的阿查·福克斯博士來說,並非如 ...