侵權投訴
訂閱
糾錯
加入自媒體

國內尚無新一代醫(yī)療AI產(chǎn)品通過CNDA審批,行業(yè)需要解決的6個核心問題是什么?

2018-04-27 10:55
動脈網(wǎng)
關注

3、用于審批的標準數(shù)據(jù)庫正在逐步建立

醫(yī)療人工智能產(chǎn)品沒有獲得審批的一部分原因是用于審批的標準數(shù)據(jù)庫還在建設中。

由于各個地區(qū)、醫(yī)院的數(shù)據(jù)標準并不同。一家公司在北京兩家大醫(yī)院做的臨床實驗即使完美,但是并不代表產(chǎn)品可以在某縣級醫(yī)院中使用,甚至由于過擬合的現(xiàn)象,導致在其他醫(yī)院無法使用。而如何驗證醫(yī)療AI產(chǎn)品的魯棒性(普遍適應性),建立標準測試數(shù)據(jù)庫是現(xiàn)階段監(jiān)管部門正在做的事情。

目前的標準測試數(shù)據(jù)庫建設是按照病種進行的。據(jù)中檢院官方微信發(fā)布的信息顯示,2018年3月26日,標準測試數(shù)據(jù)集(眼底部分)建設完成。肺結節(jié)的標準數(shù)據(jù)庫建設方案也已經(jīng)定稿,近期就可以建設完成。

動脈網(wǎng)與企業(yè)交流和統(tǒng)計了解到,目前行業(yè)內有9家公司參與了標準測試數(shù)據(jù)庫的建設。以肺影像為例,肺結節(jié)圖像數(shù)據(jù)采集將不少于5家醫(yī)院,每家企業(yè)2000張,圖像采集設備統(tǒng)一為GE,西門子等大廠商符合DICOM3.0協(xié)議標準圖像,必須取得倫理委員會許可使用。采取二輪背對背主治醫(yī)師標定方式。預計圖像數(shù)量超過1萬例。

某從事眼底糖網(wǎng)病研究,并參與中檢院眼底數(shù)據(jù)庫建設的醫(yī)療AI公司告訴動脈網(wǎng),他們很快將拿到中檢院出具的注冊檢驗結果。

參與標準測試數(shù)據(jù)庫建設的第二軍醫(yī)大學長征醫(yī)院影像醫(yī)學與核醫(yī)學科主任劉士遠介紹,標準測試數(shù)據(jù)庫建設為了保證公平性,使建立的數(shù)據(jù)庫能夠得到大多數(shù)企業(yè)和機構的認可,在建設過程中會遵循以下三個原則:

第一是廣泛性,數(shù)據(jù)要來自全國各地不同的醫(yī)院,不能只局限于北上廣深這些大城市的醫(yī)學數(shù)據(jù)。

第二是兼容性,以肺部圖像為例,目前建立標準測試數(shù)據(jù)庫的時候會考慮不同層厚的CT圖像,有5毫米圖像,也有1-2毫米圖像,甚至亞毫米圖像。

第三是醫(yī)學圖像的標記要標準化。劉士遠教授表示,搜集一定數(shù)量的圖像并不難,難的是為數(shù)據(jù)打標簽。從事標準測試數(shù)據(jù)庫標注的醫(yī)生都是從做過醫(yī)療AI研究的醫(yī)生中招募。招募以后按照標準的標注方案對醫(yī)生進行培訓,然后再去標注。最終形成沒有公司痕跡、沒有機器痕跡的標準檢測數(shù)據(jù)庫。

4、重新定義重大變更來解決快速迭代問題

醫(yī)療AI產(chǎn)品面臨一個情況,就是產(chǎn)品性能,算法模型,應用界面都會快速更新,這種情況下,傳統(tǒng)增項或者升級審批,顯然無法滿足行業(yè)的發(fā)展需要。

如果新的認證規(guī)則沒有出現(xiàn),按照傳統(tǒng)的審批流程,醫(yī)療影像AI產(chǎn)品迭代周期是3-5天,企業(yè)每周都要去政府機構報備,企業(yè)和政府都會受不了。這種情況下難免會出現(xiàn)“偷懶”現(xiàn)象,企業(yè)雖然在不斷的更新系統(tǒng),但是不按照正規(guī)程序報備,這是行業(yè)不愿意看到的現(xiàn)象。

華光創(chuàng)新(北京)技術服務有限公司副總經(jīng)理索娜告訴動脈網(wǎng),當前的審批技術指導原則給出了一個明確的版本命名的舉例。一般命名為S、Y、Z、B四個代碼,S指重大增強,Y指輕微增強,Z指糾正更新和構建,B指輕微的缺陷修補。如果是S、Y、Z發(fā)生變化,需要注冊的變更,如果是B發(fā)生變更,這是不需要修補的。企業(yè)可以依照這樣的規(guī)則,命名自己的表更,來適應法規(guī)的要求,從而不被頻繁的變更所累。

我們認為,這個問題的核心是重大變更的定義。我們沿用重大變更需要報備的傳統(tǒng),但是把重大變更做一下規(guī)范。

第一,數(shù)據(jù)庫的變更。如果產(chǎn)品的數(shù)據(jù)庫出現(xiàn)10%-20%(具體規(guī)范沒有出來以前這個數(shù)字尚不確定)的變更,那么研究結果出來以后,企業(yè)可以去相關部門報備,提出變更需求;

第二,算法的變更。如果算法框架變化,那就可以提出變更請求。目前很多企業(yè)的算法都是基于開源的算法進行優(yōu)化升級得到的,為了做好本地化也包含有一些前處理軟件等周邊系統(tǒng)。由于算法的變更很難量化,目前這一條還在商討之中。

5、人工智能的技術黑箱問題有待進一步商榷

經(jīng)常在一些場合聽到,深度學習技術存在黑箱的嫌疑,輸入與輸出結果之間原因無法解釋,而按照科學論證的觀念,存在技術黑箱的話在認證過程中會相對困難一些。

目前國內很多公司用的是國際上開源的技術,國內一些優(yōu)秀的人工智能公司是可以解釋其中的一些原理,一共用了多少層,每層在做什么。但是相當一部分公司還不具備這樣的能力,這也可以從側面看到同行之間的一些差距。

索娜表示,沒有建立審查指導原則的產(chǎn)品主要依靠主審人員個人的知識和監(jiān)管部門組成的專家委員會的經(jīng)驗知識對產(chǎn)品進行技術審評,主要審查產(chǎn)品安全性和可靠性。

我們認為,審批部門并不一定要特別在意這個問題,但是企業(yè)要做好回答的準備。對于傳統(tǒng)的軟件系統(tǒng),質監(jiān)部門也沒有要求必須把每一步都要講清楚,質檢部門優(yōu)先考慮的是安全和有效。質檢部門摸清技術原理是為了確定黑盒測試的方案,所以企業(yè)要知道如何回答相關問題。

6、除了標準數(shù)據(jù)庫外,還需要注意的幾個問題

是否可以考慮先上市后臨床

目前大多數(shù)醫(yī)療人工智能公司的發(fā)展都卡在了審批這個地方。醫(yī)療軟件注冊審批的流程大概是這樣的:

從這個流程圖,我們可以看到,在獲得藥監(jiān)局認證之前,要先獲得體系認證,體系認證需要3-6個月。三類醫(yī)療器械認證需要2-3年,在審批之前要等到標準數(shù)據(jù)庫的建立,數(shù)據(jù)庫的建立需要一定的周期。

以糖網(wǎng)為例,2017年12月24日,中檢院官方微信公眾號公布關于召開AI標準測試數(shù)據(jù)集(眼底部分)建設會議通知,2018年3月26日,中檢院官方微信公眾號公布,標準測試數(shù)據(jù)集(眼底部分)建設完成,一個病種共花費了3個月的時間。從中檢院的官微發(fā)布的信息推測,他們是按照病種進行來建立數(shù)據(jù)庫,與 FDA 在如何評估系統(tǒng)并確保其準確性和安全性方面的溝通,IDx就花了7年時間相比,審批部門的速度已經(jīng)非?炝耍ㄖ虚g還有一個春節(jié))。

但是每個公司涉及的病種一般在10個左右,算上臨床實驗的時間,審批的過程在3-4年的時間。這個過程是由于醫(yī)療和AI本身的嚴謹、安全性質決定的,這是審批機構和企業(yè)無法改變的現(xiàn)實?墒怯钟卸嗌倨髽I(yè)可以等待這么長時間呢?我們是否可以考慮一種新的市場準入方式?

為了企業(yè)和行業(yè)的持續(xù)發(fā)展,在保證安全性和穩(wěn)定性的前提下,是否可以學習藥企走先上市后臨床審批的方式,讓行業(yè)先發(fā)展起來。

<上一頁  1  2  3  下一頁>  
聲明: 本文系OFweek根據(jù)授權轉載自其它媒體或授權刊載,目的在于信息傳遞,并不代表本站贊同其觀點和對其真實性負責,如有新聞稿件和圖片作品的內容、版權以及其它問題的,請聯(lián)系我們。

發(fā)表評論

0條評論,0人參與

請輸入評論內容...

請輸入評論/評論長度6~500個字

您提交的評論過于頻繁,請輸入驗證碼繼續(xù)

暫無評論

暫無評論

醫(yī)療科技 獵頭職位 更多
文章糾錯
x
*文字標題:
*糾錯內容:
聯(lián)系郵箱:
*驗 證 碼:

粵公網(wǎng)安備 44030502002758號