新聞資訊 了解首宏動態(tài)、掌握行業(yè)資訊
國家藥品監(jiān)管部門從2015年起陸續(xù)出臺了《醫(yī)療器械軟件注冊技術(shù)審查指導(dǎo)原則》《醫(yī)療器械網(wǎng)絡(luò)安全注冊技術(shù)審查指導(dǎo)原則》《移動醫(yī)療器械注冊技術(shù)審查指導(dǎo)原則》《深度學(xué)習(xí)輔助決策醫(yī)療器械軟件審評要點》等審評指導(dǎo)原則,為我國醫(yī)療器械軟件上市許可提供了明確的指導(dǎo)路徑,原則中提出,驗證與確認為醫(yī)療器械注冊過程中的重要步驟。據(jù)調(diào)研,目前醫(yī)療器械軟件驗證環(huán)節(jié)主要依據(jù)是《GB/T 25000.51-2016 系統(tǒng)與軟件工程 系統(tǒng)與軟件質(zhì)量要求和評價(SQuaRE) 第51部分:就緒可用軟件產(chǎn)品(RUSP)的質(zhì)量要求和測試細則》(以下簡稱《細則》),對于審評要點中提到的安全、移動互聯(lián)網(wǎng)、云計算等新技術(shù)服務(wù)能力、AI性能指標等尚未形成完備的測試規(guī)程,亟須依據(jù)最新法規(guī)許可要求和新技術(shù)發(fā)展特點完善智能化醫(yī)療器械軟件評測體系。
加強質(zhì)量測試能力 在《細則》體系框架下創(chuàng)新測試方法,具體從軟件功能性、性能、兼容性、易用性、可靠性、信息安全性、維護性、可移植性八個維度開展測試。同時,在測評過程中將重點關(guān)注軟件性能效率(并發(fā)用戶數(shù)、響應(yīng)時間、吞吐量、資源占用率)和信息安全性(數(shù)據(jù)隱私、訪問控制、風(fēng)險管理、信息安全等)。
開展醫(yī)療云服務(wù)評測 隨著云計算的發(fā)展,云計算服務(wù)正逐漸成為新型基礎(chǔ)設(shè)施,中國信息通信研究院已經(jīng)在云計算領(lǐng)域積累了完備的測試能力,從2013年啟動可信云評測,目前已建立云計算基礎(chǔ)服務(wù)和產(chǎn)品評估、專項能力評估、可用性監(jiān)測以及云保險等在內(nèi)的綜合評估體系。在不同的應(yīng)用場景中,云服務(wù)的可用性、可靠性、質(zhì)量指標有很大差異。針對智能化醫(yī)療器械軟件,需要在云計算共性技術(shù)評估指標和評估方法的基礎(chǔ)上,結(jié)合具體的醫(yī)療應(yīng)用場景,創(chuàng)建智能化醫(yī)療軟件云服務(wù)能力評測體系。
構(gòu)建AI軟件性能指標 醫(yī)療AI軟件評測結(jié)果參考醫(yī)療器械軟件臨床試驗評價體系,有真陽性、假陽性、真陰性、假陰性四類結(jié)果(如表1所示):
真陽性[True positives(TP)]:標準數(shù)據(jù)集為陽性、AI產(chǎn)品識別結(jié)果也為陽性;
假陽性[False positives(FP)]:標準數(shù)據(jù)集為陰性、AI產(chǎn)品識別結(jié)果為陽性;
真陰性[True negatives(TN)]:標準數(shù)據(jù)集為陰性、AI產(chǎn)品識別結(jié)果也為陰性;
假陰性[False negatives(FN)]:標準數(shù)據(jù)集為陽性、AI產(chǎn)品識別結(jié)果為陰性。
基于上述預(yù)測結(jié)果,重點圍繞臨床試驗常用的性能指標(見表2),依據(jù)《深度學(xué)習(xí)輔助決策醫(yī)療器械軟件審評要點》提到的“假陽性/假陰性、重復(fù)性/再現(xiàn)性、魯棒性/健壯性”等性能指標,構(gòu)建智能化醫(yī)療器械軟件 AI測評體系。
研究評測應(yīng)用場景 智能化醫(yī)療軟件有很多的應(yīng)用場景,針對不同病種,軟件需要的訓(xùn)練數(shù)據(jù)以及最終的輸出結(jié)果有很大的差異,比如眼底糖網(wǎng)篩查是通過對眼底影像的讀取,輔助醫(yī)生發(fā)現(xiàn)糖網(wǎng)病變,進行早期干預(yù),那該類產(chǎn)品重點關(guān)注的是糖尿病性視網(wǎng)膜病變分類、病灶的檢出等。肺結(jié)節(jié)影像診斷主要功能是對肺部影像的讀取處理、肺結(jié)節(jié)的檢出、良惡性的判斷。如何評判糖網(wǎng)眼底篩查和肺結(jié)節(jié)影像診斷則需要采用不同的產(chǎn)品性能測試方案,我們將探索性地開發(fā)具體病種(肺結(jié)節(jié)診斷、眼底篩查、心臟MRI、冠動脈CTA、心電生理信號、CT骨折、腦MRI和CT肝?。┰\斷情境下AI醫(yī)學(xué)軟件產(chǎn)品效能,研究制定應(yīng)用場景產(chǎn)品性能評測體系。
首宏業(yè)務(wù)咨詢
官方公眾號
青島總部:山東省青島市市南區(qū)南京路 8 號府都大廈16 、20-22層
首宏醫(yī)療控股集團股份有限公司 地址:山東省青島市南區(qū)南京路8號府都大廈 16、20-22 層 聯(lián)系電話:400-699-8388
Copyright @ 2018 Safehigh ALL Right Reserved.
ICP備案:魯ICP備19047490號-1