3、用于審批的標(biāo)準(zhǔn)數(shù)據(jù)庫正在逐步建立

醫(yī)療人工智能產(chǎn)品沒有獲得審批的一部分原因是用于審批的標(biāo)準(zhǔn)數(shù)據(jù)庫還在建設(shè)中。

由于各個(gè)地區(qū)、醫(yī)院的數(shù)據(jù)標(biāo)準(zhǔn)并不同。一家公司在北京兩家大醫(yī)院做的臨床實(shí)驗(yàn)即使完美，但是并不代表產(chǎn)品可以在某縣級醫(yī)院中使用，甚至由于過擬合的現(xiàn)象，導(dǎo)致在其他醫(yī)院無法使用。而如何驗(yàn)證醫(yī)療AI產(chǎn)品的魯棒性（普遍適應(yīng)性），建立標(biāo)準(zhǔn)測試數(shù)據(jù)庫是現(xiàn)階段監(jiān)管部門正在做的事情。

目前的標(biāo)準(zhǔn)測試數(shù)據(jù)庫建設(shè)是按照病種進(jìn)行的。據(jù)中檢院官方微信發(fā)布的信息顯示，2018年3月26日，標(biāo)準(zhǔn)測試數(shù)據(jù)集（眼底部分）建設(shè)完成。肺結(jié)節(jié)的標(biāo)準(zhǔn)數(shù)據(jù)庫建設(shè)方案也已經(jīng)定稿，近期就可以建設(shè)完成。

動脈網(wǎng)與企業(yè)交流和統(tǒng)計(jì)了解到，目前行業(yè)內(nèi)有9家公司參與了標(biāo)準(zhǔn)測試數(shù)據(jù)庫的建設(shè)。以肺影像為例，肺結(jié)節(jié)圖像數(shù)據(jù)采集將不少于5家醫(yī)院，每家企業(yè)2000張，圖像采集設(shè)備統(tǒng)一為GE，西門子等大廠商符合DICOM3.0協(xié)議標(biāo)準(zhǔn)圖像，必須取得倫理委員會許可使用。采取二輪背對背主治醫(yī)師標(biāo)定方式。預(yù)計(jì)圖像數(shù)量超過1萬例。

某從事眼底糖網(wǎng)病研究，并參與中檢院眼底數(shù)據(jù)庫建設(shè)的醫(yī)療AI公司告訴動脈網(wǎng)，他們很快將拿到中檢院出具的注冊檢驗(yàn)結(jié)果。

參與標(biāo)準(zhǔn)測試數(shù)據(jù)庫建設(shè)的第二軍醫(yī)大學(xué)長征醫(yī)院影像醫(yī)學(xué)與核醫(yī)學(xué)科主任劉士遠(yuǎn)介紹，標(biāo)準(zhǔn)測試數(shù)據(jù)庫建設(shè)為了保證公平性，使建立的數(shù)據(jù)庫能夠得到大多數(shù)企業(yè)和機(jī)構(gòu)的認(rèn)可，在建設(shè)過程中會遵循以下三個(gè)原則：

第一是廣泛性，數(shù)據(jù)要來自全國各地不同的醫(yī)院，不能只局限于北上廣深這些大城市的醫(yī)學(xué)數(shù)據(jù)。

第二是兼容性，以肺部圖像為例，目前建立標(biāo)準(zhǔn)測試數(shù)據(jù)庫的時(shí)候會考慮不同層厚的CT圖像，有5毫米圖像，也有1-2毫米圖像，甚至亞毫米圖像。

第三是醫(yī)學(xué)圖像的標(biāo)記要標(biāo)準(zhǔn)化。劉士遠(yuǎn)教授表示，搜集一定數(shù)量的圖像并不難，難的是為數(shù)據(jù)打標(biāo)簽。從事標(biāo)準(zhǔn)測試數(shù)據(jù)庫標(biāo)注的醫(yī)生都是從做過醫(yī)療AI研究的醫(yī)生中招募。招募以后按照標(biāo)準(zhǔn)的標(biāo)注方案對醫(yī)生進(jìn)行培訓(xùn)，然后再去標(biāo)注。最終形成沒有公司痕跡、沒有機(jī)器痕跡的標(biāo)準(zhǔn)檢測數(shù)據(jù)庫。

4、重新定義重大變更來解決快速迭代問題

醫(yī)療AI產(chǎn)品面臨一個(gè)情況，就是產(chǎn)品性能，算法模型，應(yīng)用界面都會快速更新，這種情況下，傳統(tǒng)增項(xiàng)或者升級審批，顯然無法滿足行業(yè)的發(fā)展需要。

如果新的認(rèn)證規(guī)則沒有出現(xiàn)，按照傳統(tǒng)的審批流程，醫(yī)療影像AI產(chǎn)品迭代周期是3-5天，企業(yè)每周都要去政府機(jī)構(gòu)報(bào)備，企業(yè)和政府都會受不了。這種情況下難免會出現(xiàn)“偷懶”現(xiàn)象，企業(yè)雖然在不斷的更新系統(tǒng)，但是不按照正規(guī)程序報(bào)備，這是行業(yè)不愿意看到的現(xiàn)象。

華光創(chuàng)新（北京）技術(shù)服務(wù)有限公司副總經(jīng)理索娜告訴動脈網(wǎng)，當(dāng)前的審批技術(shù)指導(dǎo)原則給出了一個(gè)明確的版本命名的舉例。一般命名為S、Y、Z、B四個(gè)代碼，S指重大增強(qiáng)，Y指輕微增強(qiáng)，Z指糾正更新和構(gòu)建，B指輕微的缺陷修補(bǔ)。如果是S、Y、Z發(fā)生變化，需要注冊的變更，如果是B發(fā)生變更，這是不需要修補(bǔ)的。企業(yè)可以依照這樣的規(guī)則，命名自己的表更，來適應(yīng)法規(guī)的要求，從而不被頻繁的變更所累。

我們認(rèn)為，這個(gè)問題的核心是重大變更的定義。我們沿用重大變更需要報(bào)備的傳統(tǒng)，但是把重大變更做一下規(guī)范。

第一，數(shù)據(jù)庫的變更。如果產(chǎn)品的數(shù)據(jù)庫出現(xiàn)10%-20%（具體規(guī)范沒有出來以前這個(gè)數(shù)字尚不確定）的變更，那么研究結(jié)果出來以后，企業(yè)可以去相關(guān)部門報(bào)備，提出變更需求；

第二，算法的變更。如果算法框架變化，那就可以提出變更請求。目前很多企業(yè)的算法都是基于開源的算法進(jìn)行優(yōu)化升級得到的，為了做好本地化也包含有一些前處理軟件等周邊系統(tǒng)。由于算法的變更很難量化，目前這一條還在商討之中。

5、人工智能的技術(shù)黑箱問題有待進(jìn)一步商榷

經(jīng)常在一些場合聽到，深度學(xué)習(xí)技術(shù)存在黑箱的嫌疑，輸入與輸出結(jié)果之間原因無法解釋，而按照科學(xué)論證的觀念，存在技術(shù)黑箱的話在認(rèn)證過程中會相對困難一些。

目前國內(nèi)很多公司用的是國際上開源的技術(shù)，國內(nèi)一些優(yōu)秀的人工智能公司是可以解釋其中的一些原理，一共用了多少層，每層在做什么。但是相當(dāng)一部分公司還不具備這樣的能力，這也可以從側(cè)面看到同行之間的一些差距。

索娜表示，沒有建立審查指導(dǎo)原則的產(chǎn)品主要依靠主審人員個(gè)人的知識和監(jiān)管部門組成的專家委員會的經(jīng)驗(yàn)知識對產(chǎn)品進(jìn)行技術(shù)審評，主要審查產(chǎn)品安全性和可靠性。

我們認(rèn)為，審批部門并不一定要特別在意這個(gè)問題，但是企業(yè)要做好回答的準(zhǔn)備。對于傳統(tǒng)的軟件系統(tǒng)，質(zhì)監(jiān)部門也沒有要求必須把每一步都要講清楚，質(zhì)檢部門優(yōu)先考慮的是安全和有效。質(zhì)檢部門摸清技術(shù)原理是為了確定黑盒測試的方案，所以企業(yè)要知道如何回答相關(guān)問題。

6、除了標(biāo)準(zhǔn)數(shù)據(jù)庫外，還需要注意的幾個(gè)問題

是否可以考慮先上市后臨床

目前大多數(shù)醫(yī)療人工智能公司的發(fā)展都卡在了審批這個(gè)地方。醫(yī)療軟件注冊審批的流程大概是這樣的：

從這個(gè)流程圖，我們可以看到，在獲得藥監(jiān)局認(rèn)證之前，要先獲得體系認(rèn)證，體系認(rèn)證需要3-6個(gè)月。三類醫(yī)療器械認(rèn)證需要2-3年，在審批之前要等到標(biāo)準(zhǔn)數(shù)據(jù)庫的建立，數(shù)據(jù)庫的建立需要一定的周期。

以糖網(wǎng)為例，2017年12月24日，中檢院官方微信公眾號公布關(guān)于召開AI標(biāo)準(zhǔn)測試數(shù)據(jù)集（眼底部分）建設(shè)會議通知，2018年3月26日，中檢院官方微信公眾號公布，標(biāo)準(zhǔn)測試數(shù)據(jù)集（眼底部分）建設(shè)完成，一個(gè)病種共花費(fèi)了3個(gè)月的時(shí)間。從中檢院的官微發(fā)布的信息推測，他們是按照病種進(jìn)行來建立數(shù)據(jù)庫，與 FDA 在如何評估系統(tǒng)并確保其準(zhǔn)確性和安全性方面的溝通，IDx就花了7年時(shí)間相比，審批部門的速度已經(jīng)非�？炝耍ㄖ虚g還有一個(gè)春節(jié)）。

但是每個(gè)公司涉及的病種一般在10個(gè)左右，算上臨床實(shí)驗(yàn)的時(shí)間，審批的過程在3-4年的時(shí)間。這個(gè)過程是由于醫(yī)療和AI本身的嚴(yán)謹(jǐn)、安全性質(zhì)決定的，這是審批機(jī)構(gòu)和企業(yè)無法改變的現(xiàn)實(shí)�？墒怯钟卸嗌倨髽I(yè)可以等待這么長時(shí)間呢？我們是否可以考慮一種新的市場準(zhǔn)入方式？

為了企業(yè)和行業(yè)的持續(xù)發(fā)展，在保證安全性和穩(wěn)定性的前提下，是否可以學(xué)習(xí)藥企走先上市后臨床審批的方式，讓行業(yè)先發(fā)展起來。