Prostate MR and Pathology Image Fusion through Image Correction and Multi-stage Registration

영상보정 및 다단계 정합을 통한 전립선 MR 영상과 병리 영상간 융합

  • 정주립 (서울여자대학교 컴퓨터학과) ;
  • 조현희 (서울여자대학교 컴퓨터학과) ;
  • 홍헬렌 (서울여자대학교 미디어학부)
  • Published : 2009.09.15

Abstract

In this paper, we propose a method for combining MR image with histopathology image of the prostate using image correction and multi-stage registration. Our method consists of four steps. First, the intensity of prostate bleeding area on T2-weighted MR image is substituted for that on T1-weighted MR image. And two or four tissue sections of the prostate in histopathology image are combined to produce a single prostate image by manual stitching. Second, rigid registration is performed to find the affine transformations that to optimize mutual information between MR and histopathology images. Third, the result of affine registration is deformed by the TPS warping. Finally, aligned images are visualized by the intensity intermixing. Experimental results show that the prostate tumor lesion can be properly located and clearly visualized within MR images for tissue characterization comparison and that the registration error between T2-weighted MR and histopathology image was 0.0815mm.

본 논문은 영상보정 및 다단계 정합을 통한 전립선의 MR 영상과 병리 영상 간의 융합방법을 제안한다. 제안 방법은 영상보정, 강체 정합, 비강체 정합, 영상융합의 네 단계로 이루어진다. 첫째, 영상보정 단계에서 T2 MR 강조 영상의 출혈 부위의 자기값을 T1 MR 강조 영상의 자기값으로 대체시키고, 2, 4장으로 분리된 병리 영상을 한장의 영상으로 만든 후 MR 영상과 동일한 해상도로 줄인다. 둘째, 전립선의 T2 MR 강조 영상과 병리 영상 간에 자기간의 상호정보를 최적화하는 강체변환을 구한다. 셋째, TPS 와핑을 이용하여 병리 영상의 전립선 부위가 T2 MR 강조 영상의 전립선 부위에 정합되는 비강체변환을 구한다. 넷째, MR 영상과 변환을 적용시킨 병리 영상을 융합한다. 실험 결과 영상보정 및 다단계 정합 후의 전립선의 T2 MR 강조 영상과 병리 영상의 간의 평균 거리 오차는 0.8815 mm였고, 두 영상의 융합을 통해 T2 MR 강조 영상에서 전립선 암의 위치를 정확하게 볼 수 있었다.

Keywords

References

  1. Baowei Fei, Andrew Wheaton, Zhenghong Lee, Jeffrey L. Duerk, David L. Wilson, "Automatic MR Volume Registration and its Evaluation for the Pelvis and Prostate," Physics in Medicine and Biology, vol.47, no.5, pp.823-838, 2002 https://doi.org/10.1088/0031-9155/47/5/309
  2. Baowei Fei, Jeffrey L. Duerk, David L. Wilson, “Automatic 3D Registration for Interventional MRI-Guided Treatment of Prostate Cancer,” Com-puter Aided Surgery, vol.7, pp.257-267, 2002 https://doi.org/10.1002/igs.10052
  3. Zhenghong Lee, D. Bruce Sodee, Martin Resnick, Gregory T. MacLennan, “Multimodal and Three-Dimensional Imaging of Prostate Cancer,” Compu-terized Medical Imaging and Graphics, vol.29, pp.477-486, 2005 https://doi.org/10.1016/j.compmedimag.2005.01.004
  4. Xingen Wu, Steven J. Dibiase, Rao Gullapalli, Cedric X. Yu, "Deformable Image Registration for the Use of Magnetic Resonance Spectroscopy in Prostate Treatment Planning," Int. J. Radiation Oncology Biol. Phys., vol.58, no.5, pp.1577-1583, 2004 https://doi.org/10.1016/j.ijrobp.2003.09.072
  5. Brian C. Porter, Larry Taylor, Ray Baggs, Anth-ony di Sant'Agnese, Gyongyi Nadasdy, Dave Pasternack, Deborah J. Rubens, Kevin J. Parker, "Histology and Ultrasound Fusion of Excised Prostate Tissue using Surface Registration," IEEE Ultrasonics symposium, vol.2, pp.1473-1476, 2001 https://doi.org/10.1109/ULTSYM.2001.991998
  6. C. C. Parker, A. Damyanovich, T. Haycocks, M. Haider, A. Bayley, C. N. Catton, “Magnetic Reso-nance Imaging in the Radiation Treatment Plann-ing of Localized Prostate Cancer using Intra-Prostatic Fiducial Markers for Computed Tomo-graphy Co-registration,” Radiotherapy and Oncology, vol.66, pp.217-224, 2003 https://doi.org/10.1016/S0167-8140(02)00407-3
  7. F. L. Bookstein, "Principal Warps: Thin-plate Splines and the Decomposition of Deformations,” IEEE Transactions on PAMI, vol.11, no.6, pp.567-585, 1989 https://doi.org/10.1109/34.24792