s;eilmrs computerized analysis multi-modality breast

11
Japanese Society of Radiological Technology(JSRT) NII-Electronic Library Service JapaneseSociety of Radiological Technology{JSRT) S;EilMrs Computerized Analysis of Multi-Modality BreastImages for Diagnosis, Risk Assessment, Prognosis, and Response to Therapy MaryellenL. Giger, Ph,D. Department ofRadiology and Committee on Medical Physics The University of Chicago Chicago, Illinois, USA Abstraet The role of medical image analysis in the management of the breast cancer patient isincreasing, with methods being developed and evaluated fbruse in computer-aided diagnosis (CADx), as well as fbr prognostic markers, for predictive markers, and in the assessment of cancer risk. Dependingon the task, such "image-based biomarkers" may include morphological, textural, and kinetic characteristics. This lecture reviews the Giger lab's developments of various quantitative image analysis methods in multi-modality breast imaging (mammography, ultraseund, and MRI), including advances in CADx and prognostic markers as well as in data reduction techniques, use of unlabeled data,and intelligent interfaces. The interpretation and understanding ofthese characteristics oftumors is expected touttimately improve the management of the cancer pat]ent. CADx: Computer-Aided Diagnosis Beneficial interpretation of a breast imaging examination depends on the quality of the medical images as well as the ability ofthe radiologists who interpret those images. We have developed various CADx methods in breast imaging (mammographM ultrasound, and MRI), which are fbcused on the characterization of lesions and the estimation of the probability of malignancy for use inthediagnostic workup of suspect lesions, in order to aid radiologists intheir interpretation decision-making process, CADx systems indiagnostic workup usually involve having the computer delineate the margin of the Iesion from the surrounding parenchyma, extract characteristics (features) ofthe lesions, merge these computer- extracted features intoan estimate of the probability of malignancy, and as an option, retrieve automatically similar lesions from an online reference library (atlas). The aim ofCADx in diagnostic workup isto increase classification sensitivity and specificity as well as to reduce intra- and inter-observer variability CRe £ 1-8). Our breastCADx workstation yields image-based diagnostic markers that characterize lesions in the task of estimating the probability of rrialignancM as shown inFigure 1.The system isfu11y automated apart from the initial indication ofthe location of a potential abnorrnality by the user. [Note that the system is fbr CADx and not CADe,] Our pretotype CADx workstations jncludeautomatic, real-time processing and analysis of fu11- field digital mammograms (FFDMs), ultrasound brcast images, and MR images (DCE and T2) of the breast. Our analysis algorithms include automatic lesion segmentation, automatic extraction of morphological, textural, and kineticlesionfeatures, and automatic e]assification into an estimate of the probability of -10- NII-Electronic

Upload: others

Post on 13-Jan-2022

3 views

Category:

Documents


0 download

TRANSCRIPT

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety of Radiological Technology{JSRT)

S;EilMrs

Computerized Analysis of Multi-Modality Breast Images for

Diagnosis, Risk Assessment, Prognosis, and Response to Therapy

Maryellen L. Giger, Ph,D.

Department ofRadiology and Committee on Medical Physics

The University of Chicago

Chicago, Illinois, USA

Abstraet

The role of medical image analysis in the management of the breast cancer patient is increasing, with

methods being developed and evaluated fbr use in computer-aided diagnosis (CADx), as well as fbr

prognostic markers, for predictive markers, and in the assessment of cancer risk. Depending on the task,

such "image-based

biomarkers" may include morphological, textural, and kinetic characteristics. This lecture

reviews the Giger lab's developments of various quantitative image analysis methods in multi-modality

breast imaging (mammography, ultraseund, and MRI), including advances in CADx and prognostic markers

as well as in data reduction techniques, use of unlabeled data, and intelligent interfaces. The interpretation

and understanding ofthese characteristics oftumors is expected to uttimately improve the management of the

cancer pat]ent.

CADx: Computer-Aided Diagnosis

Beneficial interpretation of a breast imaging examination depends on the quality of the medical images as

well as the ability ofthe radiologists who interpret those images. We have developed various CADx methods

in breast imaging (mammographM ultrasound, and MRI), which are fbcused on the characterization of lesions

and the estimation of the probability of malignancy for use in the diagnostic workup of suspect lesions, in

order to aid radiologists in their interpretation decision-making process,

CADx systems in diagnostic workup usually involve having the computer delineate the margin of the Iesion

from the surrounding parenchyma, extract characteristics (features) ofthe lesions, merge these computer-

extracted features into an estimate of the probability of malignancy, and as an option, retrieve automatically

similar lesions from an online reference library (atlas). The aim ofCADx in diagnostic workup is to increase

classification sensitivity and specificity as well as to reduce intra- and inter-observer variability CRe£ 1-8).

Our breast CADx workstation yields image-based diagnostic markers that characterize lesions in the task of

estimating the probability of rrialignancM as shown in Figure 1. The system is fu11y automated apart from the

initial indication ofthe location of a potential abnorrnality by the user. [Note that the system is fbr CADx and

not CADe,] Our pretotype CADx workstations jnclude automatic, real-time processing and analysis of fu11-

field digital mammograms (FFDMs), ultrasound brcast images, and MR images (DCE and T2) of the breast.

Our analysis algorithms include automatic lesion segmentation, automatic extraction of morphological,

textural, and kinetic lesion features, and automatic e]assification into an estimate of the probability of

-10-NII-Electronic

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety ofRadiologicalTechnology{JSRT)

malignancy, The computer output is presented to the radiologist in several fbrms: numerical, representative

histograrns, a:idlor retrieval ofimages ofknown pathology that are similar to the case in question (Ref 9-46).

In addition, the estimate of probability of malignancy can be output in terms of a specific prevalence of

cancer, such as the prevalence of cancer observed at ones radiology practice or that based on ones `Cinternal

prevalence" (Re£ 45).

Figure 1 Screen output from our multimodality CADx workstation showing results fbr ultrasound in the

task of breast cancer diagnosis. The computer output is presented to the radio]ogist in different fbrrnats:

nurnerical, representative histograms, andlor retrieval of images of known pathology that are similar to the

case ln questlon.

In addition, the perfbrmance of CADx systems may be affected by variations due to differences in irnage

acquisition systems, patient differences, CADx system-based variability, and user- induced variability.

Thus, in the development of CADx fbr mammography, breast ultrasound, and breast MRI, it is important to

examine the robustness of the algorithms and methods in order to successfu11y translate to the clinical arena,

[fable 1 sunmiaries the various robustness studies that we have conducted fbr breast CADx.

Mwhthiftwtw-

tc.tw-twma1twwtasmatwvma.tw#imSkWwwtwww

A$Vwiefi&$ituctbeActsisi'mbix wh #gtw'di・"twes rksiwhimt$ictw.l

・.

-,ftt-CC M.mo twl v'i wa

pt. .dwS-in

twassImusgesslissls,

twwwsmass. .' clks$wi ttwltwre

Reeic,}' '"s#'

i・iwi ft wwisSsl"rd st IveitS}

ptSsstw;stwt Apmfitws & .e.,.・

ime"stslxff{ms

ftwhwwasse .tw. sgtw

£ l,tiStesk

'lge ceS

stwg .x?tws x.?}tw-s aatwst'g"

'

tw£ 3S

,.twg sig.

-11-

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety of Radiological Technology{JSRT)

The ultimate use of CADx is by radiologists within the clinical workup of suspect les{ons, and thus,

understanding how radiologists perfbrm without and with use of the CADx output is important to evaluate,

Therefbre, we have also conducted various observer studies using our intelligent CADx workstation for

mammography CADx (Ref, 17), ultrasound CADx (Ref 25), combined mammography and ultrasound

CADx (Refs. 43, 44), and MRi (Refl 39). These reader studies have shown improvement in radiologists7

perfbrmance levels when the computer diagnostic aid was used.

In addition, we investigated the CADx output variability and {ts relationship to repeatability (Refi 56),

Evaluation of classifier repeatability, in addition to overall perfbrmance level as determined by ROC analysis,

is also important for translation ofcomputer-aided diagnosis to clinical decision making.

Due to the 1arge number ofmathematical descriptors that can be use to characterize Iesion across modalities

(i.e., features), we are investigating data reduction methods (Ref 55), Data reduction techniques, which yield

inforrnation on the data structure of the feature space, can potentially serve as a complementary approach to

feature selection, In our study, we applied PCA (principal component analysis) as well as recently developed

nonlinear dimension reduction techniques to computer-extracted ]esion features across databases from

mammography, ultrasound, and MRI (Refl S5), Our preliminary results showed the potential fbr these DR

methods to match or exceed classification perfbrrnance ofcurrent breast CADx algorithms,

The development of successfu] CADx methods depends on the collection of large databases. While

estal)lishing a well-documented database requires carefu1 collection, review, armotation, and time, unlabeled

image data may be readily obtained. Thus, we have devised a dual-stage CADx method in which both

labeled and unlabeled image data are used to improve the overall perfbrmance of CADx (Ref 57), In ourmethod, both labeled and unlabeled data are utilized in the data reduction component whjle only the 1al)eled

data are used in the classification training cornponent, Our initial results showed that CADx methods trained

with labeled data but with lower than average perfbrmance showed the most increase in performance when

unlabeled data were included in the first stage, suggesting a regularization effect from the use of unlabeled

data,

While most of our quantitative image analysis methods are developed for specific imaging modalities, we

have investigated methods of for prcsenting and!or merging lesion characteristics from multi-modality

images (Refs. 42, 43, 46).

Computerized Breast Cancer Risk Assessment

Several studies have used either qualitative (B{-RADS) or quantitative estirnates of breast density in the

study of its association with breast cancer risl<. Results have showed that women with dense breasts have

an increased risk of developing ofbreast cancer relative to those women with fatty breasts. In addition to

mammographic breast density, the relationship between mammographic parenchymal patterns and the risk of

developing breast cancer js being studied.

Since the human visual system has difficulty in the discrimination ofhigher-order statistics information, such

-12-NII-Electronic

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety of Radiological Technology{JSRT)

as coarseness in the image texture, computerized texture analysis becomes an important method with which

to extract clinically meaningfu1 infbrmation from mammographic images,

We have analyzed the density and parenchymal patterns from mammograms and have fbund that women at

high risk fbr breast cancer tend to have dense breasts and that their breast parenchyrna on marmnography

is coarse and low in contrast (Ref 47-52). We have already developed and evaluated our analyses on 1arge

clinical datasets of both screen-film mammograms and fu11-field digjtal mammograms. In addition, our

evaluations have been perfbrmed on mammograms from women at high risk fbT breast cancer (both BRCA1 ,

BRCA2 and unilateral cancer patients) and those at low risk (obtained from screening programs). Also,

with a longitudinal dataset, we have demonstrated that our parenchymal texture analysis method perforrns

similar to percent dense in predicting breast risk. Most recently, we have identified associations between our

image-based phenotypes (density and parenchymal texture) and SNPs fbr the UGT2B gene clusters in order

to examine the genetic contribution of UGT2B genes fbr inter-individual variation in breast density and

mammographic parenchymal patterns (Ref 54),

Beyond FFDM, we have analyzed breast parenchyma on MRI images, by extracting the characteristic

kinetic curves within the dense regions. We fbund that women with dense breasts had more parenchymal

enhancement at their peak time point than those women with fatty breasts, and thus breast parenchymal

enhancement may be associated with breast density and may be potentially another characteristic fbr

assessing breast cancer risk (Ref 53).

Quantitatiye Breast ImageAnalysis Workstation for Prognosis and Response to Therapy

Our research in breast CADx has yielded various single and combined characteristics (i.e,, features) of

breast lesions, thus allowing fbr use of these computer analyses beyond diagnosis - j.e,, fbr prognosis

and assessing response to therapy. The quantitative analysis includes lesion segmentation - in 2D or 3D,

depending on the modality} which yields the size and extent ofthe lesion, which subsequently can be used in

monitoring the response to therapy. The extractions oflesion characteristics (such as textural, morphological,

andlor kinetic features) describe the lesion, and the combinations of these characteristics can be used in

several classification tasks using artificial intelligence, These classification tasks go beyond the distinction

between malignant and benign lesions (diagnosis) and include the (1) the distinction of ductal carcinoma

in situ lesions from invasive ductal carcinoma lesions (diagnosis, malignancy grades), (2) the distinction of

malignant lesions with lymph nodes positive fbr metastasis from those that have remained metastasis-free

(progtiosis) (Ref 37), and (3) the descriptjon oflesions according to their biomarkers and the change between

exam dates (response to therapy). These surrogate prognostic and predictive markers can be used to train our

Quantitative Breast Image Analysis Workstation to better characterize the lesions, which subsequently lead to

image-based phenotypes as prognostic and predictive markers.

The workstation in Figure 2 is a prototype workstatien fbr processing, analyzing, and visualizing contrast-

enhanced MR images of the breast. It was designed mainly fbr displaying beth original and subtracted

imageslcurves with a graphicat user interface (GUI), fbr demonstrating our algorithms in the analysis of

breast MR images, and fbr providing an eencient way fbr manipulating various types of data files and image

-13-

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety of Radiological Technology{JSRT)

databases. Our breast MR.I analysis method includes both DEC-MRI and T2 images. In the example in

Figure 2, after the lesion is segmented, the computer then perfbrms kinetic curve identification and feature

extraction. The computer-identified "most

enhaneing" curve and the curve obtained by averaging over the

entire lesion is displayed in the lower left part of the screen, The color-labeled lesions showing the most

enhancing regions are displayed. A histogram of the Bayesiam neural network estimated robahility of (in thiscase, probability of invasion) based on the selected features and an independent training database is also

displayed, Histograms of individual features can also be displayed. The cornputer-estimated probability of

"poor prognosis" for the current case is 1al)eled on the histogram plot with a triangular marker, and is based

on the presence or absence ofa pesitive (for cancer) 1ymph node.

Figure 2 Prognostic workstation for breast MRI (Ref 37)

Summary

Our interactive workstation for quantitative analysis of breast images has the potential to provide radiologists

with valuable additional information on which to base a diagnosis andlor assess a patient treatment plan. We

believe that ultimately the workstation can be integrated into routine clinical interpretation workflow.

Acknow]edgments

This work is supported in parts by NIH R33 113800, P50 CA125183, and P30 CA14599, DOE grant DE-

FGe2-08ER6478, NIH SIO RR021039, and DOD grant W81XWH-10-1-0216. M,L,G, is a stockholder in

R2 TechnologyfHologic and receives royalties from Hologic, GE Medical Systems, )vfi]DIAN Technologies,

Riverain Medical, Mitsubishi and Toshiba. It is the University of Chicago Confiict of Interest Policy that

investigators disclose publicly actual or potential significant financial interest that would reasonably appear

to be directly and significantly affected by the research activities.

-14-

NII-Electronic

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

Japanese  Sooiety  of  Radiologioal  Teohnology (JSRT }

【和訳】

診断 , リス ク評価 , 予後予測 , および治療効果判定の ための

      マ ル チモ ダリテ ィ乳腺画像の コ ンピュー タ解析

Marye ]len L . Giger, Ph ・D ・

シ カゴ 大学 放射線科 医用物 理 学委員,イリノイ州 , 米国

訳 : 白石 順二 (熊本大学大学 院 生命科学研 究部)

要約

乳 がん 患者 の 管理 にお ける医用画像解析 に必 要 とされ る役割 は,コ ンピ ュータ支援診断 (computer

−aided  diagnosis: CADx )を

利用するため に 開発,または評価されっ っ ある方法や,予後 に対するマーカー,予知するた め の マ

ーカー,そ して,がん に対

す るリス ク の 評 価 など,増加し っ っ あ ります.ここで .“両 像 に 基 づ い た 生 休マ

ーカー”

とい っ たもの に は ,対 象 となる 作業 に依

存して,形 態的 , 組 織的,または 動的特性 が含まれ ます.この 講演で は,Giger研究 室 で 開発されたマ ル チ モ ダリティ乳腺画像 (マ

ン モ グラフ ィ,超 音波,そ して MRI ) にお け る様 々 な定量的画 像解析法,それ らに も含 まれ る CAD  x の 進歩,予 後 を示 すマーカー,

そして,データ縮小 技 術,ラベ ル 化 され て い な い デー

タの 利用,インテ リジ ェ ン ト・イン ター

フ ェー

ス に つ い て 解説 します.腫瘍

の これ らの 特性 の 理 解 と解釈 は ,最終的 には が ん 患者 の 管理 を改 善す るこ とが期 待 され て い ます.

コ ン ピ ュー

タ支援診断 (CAD   x )

乳腺両像検査 の 読影か ら得 られ る利 益 は ,医用 画 像 の 品 質と,そ れ らの 画像 を読影する放射線科医の 能力 に依存します.私

達 は ,放射線科医の 意思判断決定 となる読影診断を支援す ることを 目的として,乳腺画像 (マ ン モ グラフィ,超 音波,そ して

MRI) に 関して,様々 な CAD  x の 方法を開発 して きました.そ して,そ れ らは 病 変 の 特性 や 疑 わし い 病変 の 精密 検査 (diagn。stic

workup )の 段階で 用い られる悪性度の 推定に 焦点を当て て きました.

一般 に,精密検査 にお ける CAD  x シ ス テム は,周辺 の 実質と病変部との 間 に,ある

一定の 余裕をもっ た境界線をコ ン ピ ュ

ータが

描 出す る,そ の 病変部の 特 性 (特徴) が抽 出 され る,コ ン ピ ュー

タに よっ て抽出 され た 特徴量 の 融合か ら悪 性 度 の 確率 が推定

され る,とい っ た機 能 を狩 ち,そ して ,任 意 の 機 能 として ,オ ン ライン で っ な が っ たライブラ リ (ア トラス ) か ら似 たような病 変 の 画

像を 自動 的 に検索します.精密検査 に お ける CAD  x シ ス テム の FI的は,鑑 別診断 の 感度 と特異度 を増加 させ ることで あり,また,

観察 著 間,また は観察 者 内 の 変 動 を減 少 させ ることに あります (文 献 1−8),

Figure 1 に示 す ように,私達 の 乳腺 CAD  x ワークス テ

ーシ ョ ン は,悪性度の 確率を推定する作業 に お い て ,病変を特性付 けるよ

うな,画 像 に 基 づ い た診 断 マーカーを出 力 します.この シ ス テ ム で は,ユ

ーザーに よ っ て 悪性 の 疑 い の ある病変の 位置が 初期 設

定され た後 の 作業 が完全 に 自動化 されて い ます.[注 :この シ ス テ ム は CAD  x (鑑別)で あっ て , CADc (検 出)で はありませ ん ]

私 達 の プ ロ トタイプ CADx ワークス テ

ーシ ョン に は ,フル フィ

ー一ル ド型ディジタル マ ン モ グラム (FFDM  s ),超音波乳 腺 両像 ,そ

して 乳腺の MR 画像 (DCE とT2>の 画像解析を,自動的か っ リア ル タイム で処理 す る機能 が含まれ てい ます .私 達の 解析 アル

ゴ リズ ム に は ,自動 の 病変領域セ グメン テー

シ ョン (分割), 自動 の 形 態 的,組 成 的,動 的 な病 変 の 特徴量 抽出,そ して ,悪

性度 の 確率 の 推定を行う自動 の 良悪性鑑 別 が含まれ て い ます.コ ン ピ ュータの 出 力 は い くつ か の 形態 で 放射線科医に 提示され

ま す : 数字に よる提 示 ,ヒス トグラム の 表 示 ,そ して fま た は病 理 結 果 が 既知 で,しか も悶題 とな っ て い る症例に 良く似て い る 画

像を検索し,表示 します (文 tu 9−46).さらに,悪性度の 確率 の 推定 は,特 別 なが ん の 有 病 率 (例 え ば放 射 線検 査 直 後 に 見

っ か るがん の 有病 率 や,個 々 の“内 部 の 有病率 (1rltemal prevalence )

”に基 づ く有病率など)とい う意味で 出 力 され ることも可

能 となっ て い ます (訳 者 注 : こ こ で の‘‘内部 の 有病 率

”とい う言葉は ,参 考文 献 45 で も使用 され て お らず,詳 細は 不 明 で す が ,

文 献 に 示 され た デー

タか ら,CAD を開 発 す る際 の 個 々 の 施 設 の デ ータベ ース に お ける有病痢,または 医 師が 自分の 勤 めてい る

15 一

N 工工一Eleotronio  Library  

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

Japanese  Sooiety  of  Radiologioal  Teohnology (JSRT }

施 設 の 特 色 に応 じて 自 己 の 中 に持 つ 有 病 率 を示 して い るの で は ない か と推 測 します ).〈 Figurc l :省略 〉

さらに,C 八Dx の 性能 は ,画 像収集 シ ス テ ム の 違い や,患者間の 個人 差,  CADx シ ステ ム に 起因す る変動要因,そ して ユ ・一一

ザー誘発 の 変化 に よる変動 によっ て 影響を受けます.そ れ ゆえ,マ ン モ グラフ ィ,乳腺超音波検査,そ して 乳 腺 MRI の ため の

CAD  x の 開発 に お い て は,臨床の 舞台 へ の 移行 を成功させ るた め に , アル ゴ リズム や 方法 の 堅 固性 を調 査す ることが 重 要 で す.

Table 1は,私 達 がこれ まで に 乳 腺の CAD  x に 関 して行 っ た堅 固 性 の 高 い 様 々 な研 究 を要約 したもの です .〈 Table  1 :省 略 〉

CAD  x の 最 終 的 な使 用 目的 は,疑 い の あ る病 変 部 に 対 す る 臨 床 診 断 に お い て ,放 射 線 科 医 によ っ て 使 用 され るこ とで す の で,

CAD  x の 出力 の ある場合 とない 場合 で 放 射線科医の 性 能 がどの ようにな るか を理 解す ることが評価 の た め に重 要で す.それ ゆえ,

私達 は また,自分たち達で 開発 したマ ン モ グラフ ィの た め の CADx (文献 17),超音波 の CADx (文献 25),マ ン モ グラフィと

超音波 を組 み 合わせ た CAD  x (文 献 43 ,44),  MRI (文献 39) の イン テ リジ ェ ン トCAD  x ワー

クス テー

シ ョ ン を用 い た 数々 の 観

察者実験 を実施 してきました.そ して,これ らの 観察者実験は,放射線科医 の 診断 能 力 の レ ベ ル が コ ン ピ ュー

タの 支援診断 によ

り向 上 したこ とを示 して きました,

さらに ,私達 は CAD  x の 出力 の 変動 とそれ の 再現性 との 関係 につ い て 研究 しました (文 献 56).  ROC 解析で 決 定 され た 全 体 と

し て の 性能 レベ ル の 評価 に 加 えて 行 っ た,良悪 性鑑 別 シ ス テ ム の 再現性 の 評価もまた,コ ン ピュータ支 援 診 断を 臨床 の 意 思 判

断決定の 場 に移行す るため に重要なことで した,

モ ダリテ ィごとに病 変部を特 性付け る数学的な記 述子 (例 えば,特徴量)が 膨大な数 に なるた め ,私達は データ縮小 方法に つ

い て研 究 してい ます (文献 55).特徴 量 空 間に お けるデータ構 造 に開する情報 をもた らすデー

タ縮小 法 は,特徴量選 択 の 補 足

的 なア プ ローチ として 役 立 つ 可 能 性 があり.kす .こ の 研 究で は,私 たちはマ ン モ グラフ ィ,超音波,そ して MR [か らの デ

ータベ ー

ス 聞を横断す る形 で コ ン ピ ュータで 抽 出 され た病 変 部の 特 徴 量 に 対 して,主 成 分 分 析 (principal component  analysis : PCA ) と

最近 開発 した 非線形 な次 元 縮 小 技 術 を適 用 しま した.私 達 が求 めた 予 備 研 究の 結果 は,こ れ らの デー

タ縮小 法は,良悪性鑑

別の 性能 にお い て ,現在 の 乳腺 CAD アル ゴ リズ ム で 得 られ た結果と同等もしくは それ を E回る可 能 性 が あることを示 して い ます.

成功す る CAD  x 法の 開発 は 大量 の デー

タベ ース の 収集に 依存します.非常 に 良く記 述 され たデータベ ース の 構 築 には,慎 重 な

収集,画像調 査,注 釈 付 け,そ れ と時 問 が 必 要 で す が ,ラベ ル 無しの (訳 者注 :情報 の 整 理 され て い な い )画 像 データで あれ ば,

用意 に 入 手することが で きます.そこで ,私 達は CADx の オーバ ーオー

ル の 性能を向上 させ るため にラベ ル 化 され た (整 理 され た)

もの とラベ ル 無 しの 画像 データベ ース の 両 方 を 2段 階で 用 い る CADx の 方法を考案 し ました (文献 57).こ の 方法 で は ,ラベ ル

付 け され たデ ータ だ け が 良悪 性 鑑 別 の トレ ーニ ン グ の 第 2 段 階 で 使 用 され ます が ,ラベ ル 付け され た もの とラ ベ ル 無 しの 両 方 の

データが デ

ータ縮小 の 第 1段 階で 用 い られ ます.私 達の 初期の 結果 で は,ラベ ル 付きの 画像デー

タで トレ ーニ ン グされ た CAD

x の 性能は 平均 の パ フォー

マ ン ス を F回 るもの の ,第 1 段 階 にラベ ル 無 しの 画 像データを含 め た 場合 に 最 大 の 増加 を示 す ことが

示 され,これは ラベ ル 無し の デ ータ使 用 による規則化効果 で はな い か と考えてい ます,

私 達 の 定 量 的な画 像解析法 の ほ とん どは 個々 の 画像モ ダ リテ ィ に特 化 して 開発 され て い るの で,マ ル チ モ ダリテ ィの 画像か ら得ら

れた病変部 の 特 性 を表 示,そ して 〆また は融合する方法に つ い て 研究を進 めて い ます (文献42,43,46),

コ ン ピ ュータに よ る 乳がん の リス ク評価

い くつ か の 研 究で は,定性的 (B卜 RADS ),また は 定 量 的 に 推 定 した乳 腺 密 度を乳 が ん の リス クに 関連付 け た研 究 の 申で 用 い て

い ます.そ れらの 結果 は ,密 度 の 高い 乳 腺 の 女 性 は,脂 肪 質な乳 腺 の 女性 に 比 べ ると乳 が ん となるリス クが 高 い こ とを示 し て い

ま す.マ ン モ グラ フィ 上 の 乳 腺 密 度 に 関 す る研 究 に加 え て ,マ ン モ グラフ ィ上 の 乳 房 実 質 の パ ター

ン と乳 が ん となるリス クの 関係

が研 究 され つ つ あ ります .人 の 視覚シ ス テ ム は,画 像組成 にお けるテ クス チ ャ の 粗 さとい っ た 高次 の 統 計的情報の 識別 が 困難 で

す の で,マ ン モ グ ラフ ィか ら臨床的 に 意味の ある 情報を抽出す るため の コ ン ピ ュー

タによる組 織 解 析 が 重 要 な 方法 となります.

16 一

N 工工一Eleotronio  Library  

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

Japanese  Sooiety  of  Radiologioal  Teohnology (JSRT }

私 達は マ ン モ グラフ ィ にお ける密度 と実質部 の パ ター

ン を解析 し,乳がん に対して 高リス クの 女性は 高密度な乳腺をもち,そ の 実

質 部 の マ ン モ グラフ ィ にお けるパ ターン は テクス チャ が粗 く,低 コ ン トラス トで あるこ とを見 つ けました (文 献 47−52).この 解析に つ

い て,す で に 私 達 は増感 紙一

フ ィル ム 系 とフル フ ィー

ル ド型ディ ジタル マ ンモ グラ7 イの 両 方 の 大規模な臨床デー

タベ ース で 開発

し,評価 しました.さらに,こ の 評価 は乳 がん に対 して 高リス クな女 性 (BRCA1 ,  BRCA2, 片側 が 乳 が ん の 患者) とそ れ らが 低

リス クな 女性 (健 診 で 得られ たもの ) か らの マ ン モ グラフ ィで も行 っ て い ます.また,長期的なデータセ ッ トに よっ て,こ の 実質部

の 組織解析 の 方 法 が 乳が ん の リス クを 予知 する密 度 割合と同 様 な働 きを示 す こ とが証 明 されま した.最 近 で は,乳 腺密度 とマ ン

モ グラ フィ上 の 実 質部 の パ ター

ン に お ける個体内 変 動 に 対 す る UGT2B 遺 伝 子 の 遺 伝学的な 寄 与 を調 べ るた め に,私 達 の 画 像

に基づ く表現型 (密度と実質部 の 組織) とUGT2B の 遺伝子群の SNP (一

塩基多型)の 間の 関連性を示しました (文 献 54>.

フ ル フ ィー

ル ド型ディジ タル マ ン モ グラフ ィだ けで は なく,私逑は MR 画 像 Eで の 乳 房実質部を,高密度な領域内に お ける動的

特 性 曲線を抽 出す るこ とで,解析して い ます .そ して,私 達 は乳 腺 が 高密度な女性 は 脂肪性の 乳 房 の 女性 に比 べ て,

ピーク時

にお ける実質部の 強調 度 が強 い こ とを見 っ け ました.それ ゆえ,実質部の 強調 度 は乳 腺密度 に関 連性 があ り,乳 がん の リス クの

評 価 が 可能な,また別 の 特性 にな る可 能 性 があ ります (文 献 53).

治療効果判定と予後予測の た め の定量的乳腺画像解析ワーク ス テーシ ョ ン

乳 腺 CAD  x に お ける私 達 の 研 究 は様 々 な個別 の もしくは 組 み 合 わ せ の 特性 (特徴 量 )を産 み 出して きました,そして ,これ らの

コ ン ピュ’一タ解析 は診断を超えた領域 (例 えば,予後予測や治療効果判定)におい て も利用されるようになりました.画像モ ダリ

テ ィ に応 じて 2次元 または 3次元 で 行わ れ,病変部 の サイズ や範囲を与える領域セ グメン テー

シ ョ ン をは じめとす る定量的解析 は,

その ままで 治療効果判定の た め の 経過観察 に利 用 す ることが 可 能で す.病変部 の 特 性 (形 態的,組 織的,そ して 動的な特 徴 量 〉

の 抽出は,病変部を記述し,これ らの 特徴量の 組 み 合わせ が人 工 知能を用い たい くっ か の 鑑別 作業に 用 い られ ることが 可 能で す.

これ ら の 鑑別 作業は 良性 と悪性 の 病変を 区別 する (診断 ) だ けで はな く,以 下 の ようなもの を含み ます ; (1) 非 浸 潤 性 乳 管 が

ん (DCIS )の 病変を浸潤性乳がん (IDC) の 病変と区別す る (診断、悪性度の 判定),(2) リン パ 節 へ の 転移 の認 められ る悪

性 の 病変 と転移 の な い 悪性 の 病変 とを識別 す る (予 後 予 測 ),そして, (3) 治 療 ご との 聞 の 病 変 部の 変 化 に対 応 した病変 部 の

生体マー

カー

を記述す る (治療効 果判定).こ れ らの 代 用 の 予 後 お よび 予 知 の た め の マーカー

は ,病 変 の よ り良い 特徴 づ けの

ため に,私達 の 定量的乳 腺画像解析ワークス テーシ ョン を学習させ るた め に利用することが 出来ますし,予後および 予知の ため

の マー

カーとなる,画 像 に基づ い た表 現 型 として 発 展 す る で しょ う.

Figur・e 2 に示 す ワー

クス テー

シ ョン は,乳 腺 の 造 影 MR 画像 を処 理,解析,そ して 表示 する プロ トタイプ の ワー

クス テー

シ ョ ン で す.

こ の ワークス テーシ ョン はオ リジ ナル と差 分 処 理 画 像/ 曲線 を GUI によっ て 表示すること,乳腺 MR 画像の 解析 にお け るアル ゴ リ

ズ ム を証 明 す るこ と,そ して ,様 々 なタイプ の データフ ァイル や 画 像 データベ ー

ス を効果的な手 段 で 表 示 す るこ と, を 主な 目的 と

して デザイン され てい ます .この 乳 腺 MRI 解析 法 で は,  DEC −MR 〔とT2 画像の 両方を取り扱っ て い ます.  Fig.2 に示 す例 で は,

病 変 部 がセ グメン テーシ ョン された後 で ,コ ン ピュータが動的曲線 の 表示 と特徴量抽 出 を行 っ てい ます .コ ン ピ ュータが 示 す

“もっ

とも強調され た 箇所”

の 曲線とす べ て の 病変部の 領域の 平均か ら得られ た 曲線 が画 面 の 左 下 の 部 分 に表 示 され てい ます .選 択

され た特微 量 と独 立 した データベ ース で 学習された Bayesianニ ューラル ネッ トワークによ っ て推 定 され た (この 症 例 の 場合 は)浸

潤 の 確 率 の ヒス トグラム もまた ,表示 され て い ま す.個 々 の 特 徴 量 の ヒス トグラム もまた表 示 され て い ます.この 症 例 に 対 して コ ン

ピュータが 推定 した

“予後不良

”の 確率 は,ヒス トグラム の プロ ッ トの 上方に 逆三 角形 の マ

ーカーで 示 されて い て,この 値は陽性 (ま

た は が ん の ) リン パ 節の 有無 に 基 づ い て い ま す.〈 Figure 2 :省 略 〉

集約

私 達 の 乳 腺 画 像 の 定 量 的解析 の ため の 対話型 ワー

クス テー

シ ョ ン は,診 断 の 基 礎 を 築き,そ して 患 者 の 治療計 画 を評 価す るた

め の 有 益 な付 加 情報を放射線科 医 に提供する可 能性 が あります .私 達 は,この ワークス テー

シ ョン が,最終的 には 日常の 臨床

の 読影 ワー

クフ ロー

の 中 にくみ こまれ るで あろうことを確信して い ま す.

謝辞  (省 略 )

/7 一

N 工工一Eleotronio  Library  

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety ofRadiological Technology{JSRT)

6Z3twt(asca)

Referenccs

1. Gigcr ML: Cornputer-Aided DetectionlComputer-Aided Diagnosis (Chaptcr 10). In: Advances in Medical Physics 2008,

(WblbarstAB, Mossman KL, Heudee WR, eds.), Medical Physjcs Publishing,Madison, Wisconsin, 2e08.

2. Giger ML, Chen W: CAD: An Image PerceptLon Perspective. In: The Handbook ofMedical Imagc Perception and Techniques,

(Samei E, Krupinski E, eds.) Cambridge University Press, 2009.

3,

4.

5.

6,

7.

8.9.

10.

11.

12.

13.

14.'ts.

16.

17.

18.

19.

2D.21.

22,

Giger ML, Chan H-P, Boone J: Anniversaty Paper: History and status ofCAD and quantitative image analysis: The role o'f

Medical Physics and AAPM. Medical Physics 35: 5799-5820, 2008.

Giger ML, Druklcer K: The Computer Vision andArtificial Intelligenee of CAD. In: Advances in Medical Physics 201O,

(Wolbarst AB, eds.) Medical Physics Pub]ishing, Madison, Wiscensin, 201O,

Giger ML: Computcr-aided diagnosis in medical imaging -- A new era in imagc interpTetation. Ncxt-GeneTation Healthcare.

Wbr]d Medical Association GeneralAssembly, Wbrld Markets Rcsearch Ccntre, pp 75-79, October, 2001.

Giger ML: Computcrized image analysis in breast cancer detection and diagnbsis. Seminars in Breast Disease 5/199-21e,

2002.Gigcr

ML: Update on thc potentia] role of CAD in radiologic interprctations: Arc we making progress? Academic Radiology,

2005.Giger

ML: Update on thc potential ofcomputer-aided diagnosis for brcast caneer. Future Oncology, 6: 1-4, 201O

Gigcr ML, Nts[borny CJ, Schmiclt RA/ Coinputerized characterization ofmainmographic masses: Analysis of spiculation.

Cancer Letters 77: 201-211. l994.

Huo Z, Giger ML, VYbomy CJ, Bick U, Lu P, Wblvertov DE, Schnidt RA: Analysis of spiculatien in the computcrized

classification ofmammographic masses" Medical Physics 22:1569-1579, 199S.

Huo Z, Giger ML, VYborny CJ, Wbiverton DE, Schmidt RA, Doi K: Automated computerized classification ofmalignant and

benign mass lcsions on digitizedmammegrams. Academic Radioiogy 5: 155-168, 1998,

]impinski MA, Giger ML/ Automated seeded lesion segmentation on digital mammograms. IEEE Trans on Medical Imaging,

17: 510-517, 1998.

Huo Z, Giger ML, Metz CE: Etfect ofdominamt features on neural network performance in the classification of

rnamrnegraphic lesiens. PMB 44: 2579-2595, 1999.

Kupinski MA, Giger ML: Feature selection with 1imited datasets. Medical Physics 26: 21 76-2182, 1999.

Huo Z, Giger ML, N5fborny CJ, Wblverten DE, Metz CE: Computerized classifieation of benign and malignant masses on

digitized mammograms] a rebustness study. Academic Radiology 7:1077-1084, 2eOO.

HLdo Z, Giger ML, Ntsfborny CJ: Cemputcrjzed analysis ofmultiple-rnammograpbic views: Potcntial uscfulness ofspecial

view rnamrnograms in computer-aideci diagnosis. IEEE [[teansactions en Medical Imaging 20: 1285-1292, 2001.

Huo Z, Giger ML, Ntsiborny CJ, Metz CE: Effectiveness ofCAD in the diagriosis ofbreast eancer: An obs ¢ rver study on an

independent database of mammograms Radiology 224:560-568, ZO02.

Yuan Y Giger ML, Li H, Suzuki K. Sennett C. A dual-stage method for lesien segrnentatien on djgita1 marnmograms, Medical

Physics 34: 4180-4193, 2007.

Li H, Giger ML, Ylian Yl Chen W, I{orsch K, Lan L, Jamieson A, Sennett CA, Jansen SA/ Evaluation ofComputerized

Diagriosis Scheme on a Large CIinical Full-Fjeld Digital Mammographic Dataset. Academic Radiology 15: 1437-1445, 2008.

YuanY GigerML, Li H, Sennett C: Correlative featurc analysis on FFDM, Medical Physics 35: 5490-5500, 2008.

Li H, Giger ML, iman Y; Lan L, Suzuki K, Jamieson A, Yarusso L, Nishikawa Rrvl, Scnnctt C: Comparison ofcomputerized

irnage analyses for digitized mammograrns and FFDM images. Proceedings IWDM LNCS, 4046: S69-57S, 20e6

Giger ML, At-Hallaq H, Huo A, Moran C, Wolverton DE, Chan CW) Zhong W: Cornputerized analysis oflesions in

ultrasound images of the breast. Acadcinic Radiology 6: 665-674, 1999.

-18-

NII-Electronic Mbrary

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety ofRadiological Technology{JSRT)

23. Horsch K, Giger ML, Venta LA, Nlyrbomy CJ: Automatic segmentation ofbreast lcsions on ultrasound. Medical Physics 28:

1652.1659, 2001.

24. Horsch K, Giger ML, Venta LA, VYborny CJ: Computerized diagriosis of breast lesions on uitrasound. Medical Physics 29/

157-164,2002,

2S. Horsch K, Giger ML, VYborny CJ, Huo Z, Venta LA: Performance ofCAD in the inteipretation efiesions on breast

sonography, Academic Radiology 1 1 : 272-28e, 2004,

26. Dn[kker K, Giger ML, vybomy CJ, Mendelson EB: Computerized dctection and classification ofcancer on breast ultrasound,

Academic Radiology ll: 526-535, 2004.

27. Drukker K, Giger ML, Metz CE: Robustness ofcomputerized lesion detection and classification sclteme across different

breast ultrasound platforrns. Radiology. 237: 834-840, 2005.

28, Dnikker K, Gruszauskas N, Sermett CA, Giger ML: Breast Ultrasound ComputeT-Aided Diagnosis: Perfbrmance on a Large

Clinical Diagnostic Populatien, Radiology 248: 392-397, 2e08.

29, GnJszauskas N, Druklcer K, Giger ML, Sennett CA, Pesce LL: Perforrnance ofbreast ultrasound eomputer-aided diagnosis:

Dcpendence on image selection, Academic Radiology 1 5: 1234-1245, 2008.

3O. Druklier K, Sennett CA, Giger ML: Automated method for irnproving systern pcrformance of computer-aided diagnosis in

breast ultrasound. IEEE Transactions in Medical Imaging (TMI) 28: 122-128, 2009.

31. Gruszauskas N] Druklcer K, Giger ML, Cbang R-E Sennett CA, Moen WK, Pesce LL. Broast US cornputer-aided diagnosis

system: Robustness across urban populations in South Koiua aiid the United Statcs. Radiology 253: 661- 671, 2009.

32. Gilhuljs KGA, Glgcr ML, Bick U: Automated analysis ofbreast lcsions in three dimensions using dynamic magnetic

resonance imaging, Medical Physics 2S:1647-1654, 1998.

33, Chen W, Giger ML, Lan L, Bick U: Computerized interpretation ofbreast MRI: investigation of cnhancement-variance

dynamics, Medical Physics 31: 1076-1082, 2004.

34. Chen Wl Giger ML, Bick U: A ftrzzy c-mearis (FCM) based approach for cornputerized segmentation ofbreast lesions in

dynamic ventrast-enhanced MR images. Academic Radiology 13: 63-72, 20e6.

35. Chen W, Giger ML, Biek U, Newstead G: Automanic identlfication and classification ofcharacteristic kinctic curves ofbrcast

lesions on DCE-MRI. Medica] Physics, 33: 2878-2887, 20e6.

36. Chen W, Giger ML, Li H, Bick U, Newstead: ivblumetric texture analysis ofbreast ]esions oll contrast-cnhanced magnetic

resonance images. Magnetic Resonance in Medicjnc, 58: 562-571, 2007.

37. Bhooshan N, Giger ML, Jansen S, Li H, Lan L, Ncwstead G: Image-based Prognostic Markers from Computerized

Characterization ofa Clinica] Breast MRI Database. Radiology 254: 6gO-690, 2e10,

38. Chen W, Metz CE, Gigcr ML, Druld(er K: Anovel hybrid lincarfnonlinear elassifier for two-class classification: Theoryl

algorithn, and applications, IEEE Trans Med Imag 29: 428-441, 201O.

39. Shimauchi A, Giger ML, Bhooshan N, Lan L, Chen Wl Lee J, Abe H, Newstcad G: Reader study for the cvaluation of

radiologists' interpretation ofclinical breast MRI using a CAD brcast MRI workstation, Radlology (in press, 201 1).

40, Chen W, Giger ML, Newstead GM, Bick U, Samaz SA, Li H, Lan L: ComputeTized assessment efbreast lesion mallgnancy

using DCE-MRT: Robustness study on two independent clinical datasets from two manufacturers. Acadcmic Radiology 17: 822-

829, 2010.

4l, Bhooshan N, Giger ML, Lan L, Li H, Marquez A, Shimauchi A, Newstead GM: Using T2- weighted MRI in theAutomated

Anaiysis ofBreast Lesions. Magnetic Resonance in Medicine (in press, 201 1).

42. Drukker K, Horsch K, Giger ML: Multimodality computerized diagriosis ofbreast lesions using mainmography and

sonegraphy. Academic Radiology 12: 970-979, 2005.

43. Hor$ch K, Giger ML, VYborny CJ, Lan L, Mendelson EB, Hendrick RE: Classification ofbreast lesions with multj-modality

computer-aided diagnosis: Observer study results on an independent clinical data set. Radiology 240: 357-368, 2006.

44. Horsch K, Giger ML, Metz CE/ ?otential effect ofdifferent radiologists reponing metheds on studies showing benefit of

-19-

Japanese Society of Radiological Technology(JSRT)

NII-Electronic Library Service

JapaneseSociety of Radiological Technology{JSRT)

CAD. Academic Radiology 15: 139-l52, 2008,

4S. Horsch K, Giger ML, Metz CE: Prevalence Scaling: Applications to an Intelligent Workstatioll for the Diagnosis ofBreast

Cancer Academic Radiology, Academic Radiology 1 5: 1446-1457, 2008,

46. thian Y, Giger ML, Li H, Bhooshan N, Sennett CA: Multi-modality computer-aided breast cancer diagnosis with FFDM and

DCE-MRLAcademie Radio]ogy 17: 1158-l167, 2010,

47, Hue Z, Gigcr ML, WOIverton DE, Zhong Wl Curnming S, Olopade OI: Computerized analysis ofmainmographic parenchyrnal

patterns for breast cancer risk assessment: Feature selection. Medical Physics 27: 4-12, 2000,

48. Huo Z, Giger ML, O]opade OI, Wblverton DE, Weber BL, Metz CE, Zhong Wl Curnmings S: Computerized analysis of

digitized marnmograms ofBRCA1A]RCA2 gene mutation caniers. Radiology 225,5 19-526, 2002

49. Li H, Giger ML, Huo Z, Olopade OI, Lan L, Weber BL, Bonta I: ComputerizedAnalysis of Mammographic Patterus for

Assessing Breast Cancer Risk: Effect ofROI Size and Location, Medical Physics 31: 549-555, 2004.

50. Li ll, Giger ML, Olopade O, Margolis A, Lan L, Chinander MR: Computerized texture analysis ofmarnmographic

parenchymal patterns ofdigitized marnniograms. Academic RadiolQgy 12: 863-873, 2005,

5] . Li H, Giger ML, Olopadc OI, Lan L.: Fractal Analysis ofMammographic Parenchymal Patterns in Breast Cancer Risk

Assessment, Academic Radiology 14: 513-521, 2007.

52. Li H, Giger ML, Olopade OI, Chinander MR: Power Spcctral Analysis ofMammographic Parenchymal Patterns ofDigitized

Mammograms, J ofDigital lmaging 2t: 145-152, 2008.

53. Li H, Giger ML, Yinan Y Janscn SA, Lan L, Bhooshan N, Newstead GM: Computerized breast parenchyrnal analysis on DCE-

MRI. Proc, SPIE Mcdica] ]maging Conferencc, 2009.

54. Li H , Giger ML, Sun C, Ponsukcharoen U, Huo D, Di Rienzo A, Olopade O, Lan L, Bhooshan N, Yinan Y: Preliminary

association study between irnage-based biemarkers and genomic biomarkers fbr breast cancer risk assessment. RSNA201O.

55. JamiesonA, Giger ML, Drukker K, Ll H, Yinan Y, Bhooshan N: Exploring non-]inear feature space dimension reduction and

data representation in breast CADx wjth Laplacian eigenmaps and t-SNE. Mcdical Physjcs 37: 339-35 1, 20lO.

56. Dnkker K, Pesce L, Giger ML: Repeatability in computer-aidcd diagnosis: Application to breast cancer diagnosis on

sonography. Medical Physics 37: 2659-2669, 201O.

57. Jamieson AR, Giger ML, Drukker K, Pesce L: Enhancement ofbreast CADx with unlabeled data. Medical Physics

37:4155-4172,2010

-20-