マスクを使用したブロック化されたイメージの効率的な処理
この例では、マスクを使用して関心領域 (ROI) を分離することによって、ブロック化されたイメージを効率的に処理する方法を説明します。
大きなイメージのソースのなかには、イメージのごく一部にのみ意味のあるデータが含まれているものがあります。意味のあるデータが含まれる ROI に処理を制限することにより、合計処理時間を改善できます。マスクを使用して ROI を定義します。マスクは、true ピクセルが ROI を表す論理イメージです。
ブロック化されたイメージのワークフローでは、マスクはイメージ データと同じ空間領域を表しますが、イメージと同じサイズである必要はありません。ワークフローの効率をさらに向上させるには、粗いイメージからマスクを、特にメモリに収まるものを作成します。その後、粗いマスクを使用して、より細かいイメージを処理します。
CAMELYON16 データ セットのイメージ tumor_091.tif の変更したバージョンを使用して、ブロック化されたイメージを作成します。元のイメージは、腫瘍組織が含まれるリンパ節の学習イメージです。元のイメージには 8 つの解像度レベルがあり、最も細かいレベルの解像度は 53760 x 61440 です。変更したイメージには、3 つの粗い解像度レベルのみが含まれています。変更したイメージの空間参照は、縦横比が一定に維持され、各レベルで特徴がレジストレーションされるように調整されています。
bim = blockedImage("tumor_091R.tif");imageshow関数を使用してブロック化されたイメージを表示します。
imageshow(bim);
マスクの作成
最も粗いレベルのイメージ サイズを決定します。最も粗いレベルは、ブロック化されたイメージの最後のレベルです。
coarseLevel = bim.NumLevels; coarseLevelSize = bim.Size(coarseLevel,:)
coarseLevelSize = 1×3
625 670 3
最も粗い解像度レベルのイメージを取得します。
imLowRes = gather(bim);
イメージの領域分割アプリを使用して、粗いイメージからマスクを生成できます。アプリはグレースケール入力イメージを想定しているため、粗いイメージから輝度チャネルを抽出しなければなりません。
imLowResL = rgb2lightness(imLowRes);
イメージの領域分割アプリを実行するには、コマンド ウィンドウで次のコマンドを入力します。
imageSegmenter(imLowResL)
マスクを定義したら、BW としてマスクをエクスポートするか、アプリがマスクを作成するのに使用したコードをエクスポートします。例のこの節では、アプリからエクスポートしたコードを使用します。次のコードを実行して、粗い入力イメージからマスクを作成して表示します。
%---------------------------------------------------- % Normalize input data to range in [0,1]. Xmin = min(imLowResL(:)); Xmax = max(imLowResL(:)); if isequal(Xmax,Xmin) imLowResL = 0*imLowResL; else imLowResL = (imLowResL - Xmin) ./ (Xmax - Xmin); end % Threshold image - global threshold BW = imbinarize(imLowResL); % Invert mask BW = imcomplement(BW); % Open mask with square width = 3; se = strel("square", width); BW = imopen(BW, se); %---------------------------------------------------- imageshow(BW)
入力マスクと同じ空間参照を使用して、このマスクからブロック化されたイメージを作成します。
bmask = blockedImage(BW,WorldEnd=bim.WorldEnd(3,1:2));
半透明の緑のオーバーレイとして、元のブロック化されたイメージの上にマスクを表示します。
imageshow(bim,OverlayData=bmask,OverlayDisplayRangeMode="data-range", ... OverlayAlphamap = [0 0.5],OverlayColormap=[0 1 0]);
包含しきい値の調整による関心領域のカバー
関数 apply は、ブロック化されたイメージを一度に 1 ブロックずつ処理します。名前と値の引数 InclusionThreshold をマスクと共に使用して、関数 apply が使用するブロックを指定できます。包含しきい値は、apply がブロックを処理するために true でなければならないマスク ピクセルの割合を指定します。イメージ内のより多くのブロックを処理するには、包含しきい値を減らします。マスク内に true ピクセルが少なくとも 1 つ含まれるすべてのブロックを処理することもできます。このオプションを使用するには、名前と値の引数 InclusionThreshold を 0 として指定します。必ずしもイメージ内のすべてのブロックが含まれるわけではないことに注意してください。
任意の値の InclusionThreshold を指定してマスクを使用すると、apply がフル イメージに含まれる一部のブロックのみを処理するため、合計実行時間が減少します。解像度が大きいほど、また処理パイプラインが複雑であるほど、マスクを使用するメリットが著しくなります。
フル イメージに対するフィルター処理の実行時間を測定します。
tic bout = apply(bim,@(bs)imnlmfilt(bs.Data,DegreeOfSmoothing=15)); tFullProcessing = toc;
ROI に含まれるブロックのみに対するフィルター処理の実行時間を測定します。
bls = selectBlockLocations(bim,Mask=bmask,InclusionThreshold=0); tic boutMasked = apply(bim, ... @(bs)imnlmfilt(bs.Data,DegreeOfSmoothing=15), ... BlockLocationSet=bls); tMaskedProcessing = toc; boutMasked = makeMultiLevel2D(boutMasked,Scales=[1 0.5 0.3 0.1]); hbim = imageshow(boutMasked); defaultBlockSize = bim.BlockSize(1,:); hbim.Parent.Title = "Processed Image Using Mask with Default BlockSize = [" + ... defaultBlockSize + "]";
フル イメージを処理する場合の実行時間を、ROI に含まれるブロックのみを処理する場合の実行時間と比較します。
disp("Speedup using mask: " + ... num2str(tFullProcessing/tMaskedProcessing) + "x");
Speedup using mask: 2.274x
ブロック サイズの調整による関心領域の輪郭の追従
ブロック サイズを減らすと、ROI をより厳密に囲むことができます。ブロック サイズによっては、apply が処理する ROI 外のピクセル数が少なくなるため、これにより実行時間が減少します。ただし、ブロック サイズが小さすぎると、大量のブロックを処理するためのオーバーヘッドが処理ピクセル数の減少を相殺するため、パフォーマンスが低下します。
ブロック サイズを指定するには、名前と値の引数 BlockSize を使用します。ブロック サイズを減らした場合の ROI 内の全ブロックに対するフィルター処理の実行時間を測定します。
blockSize = [512 512]; bls = selectBlockLocations(bim,Mask=bmask,InclusionThreshold=0,BlockSize=blockSize); tic boutMasked = apply(bim, ... @(bs)imnlmfilt(bs.Data,DegreeOfSmoothing=15), ... BlockLocationSet=bls); tSmallerBlockProcessing = toc; boutMasked = makeMultiLevel2D(boutMasked,Scales=[1 0.5 0.3 0.1]); hbim = imageshow(boutMasked); hbim.Parent.Title = "Processed Image Using Mask with BlockSize = [" + ... blockSize + "]";
小さいブロックで ROI 全体を処理する場合の実行時間を、元のブロックで ROI 全体を処理する場合の実行時間と比較します。
disp("Additional speedup using mask with decreased block size: " + ... num2str(tMaskedProcessing/tSmallerBlockProcessing) + "x");
Additional speedup using mask with decreased block size: 1.2767x
参考
blockedImage | bigimageshow | apply
