Skip to main content
Erschienen in:

21.11.2024 | Hauptreferate: Hauptprogramm der DGP

Reconstructing 3D histological structures using machine learning (artificial intelligence) algorithms

verfasst von: J. Báskay, M. Kivovics, D. Pénzes, E. Kontsek, A. Pesti, A. Kiss, M. Szócska, O. Németh, P. Pollner

Erschienen in: Die Pathologie | Sonderheft 1/2024

Einloggen, um Zugang zu erhalten

Abstract

Background

Histomorphometry is currently the gold standard for bone microarchitectural examinations. This relies on two-dimensional (2D) sections to deduce the spatial properties of structures. Micromorphometric parameters are calculated from these sections based on the assumption of a plate-like 3D microarchitecture, resulting in the loss of 3D structure due to the destructive nature of classical histological processing.

Materials and methods

To overcome the limitation of histomorphometry and reconstruct the 3D architecture of bone core biopsy samples from 2D histological sections, bone core biopsy samples were decalcified and embedded in paraffin. Subsequently, 5 µm thick serial sections were stained with hematoxylin and eosin and scanned using a 3DHISTECH PANNORAMIC 1000 Digital Slide Scanner (3DHISTECH, Budapest, Hungary). A modified U‑Net architecture was trained to categorize tissues on the sections. LoFTR feature matching combined with affine transformations was employed to create the histologic reconstruction. Micromorphometric parameters were calculated using Bruker’s CTAn software (v. 1.18.8.0, Bruker, Kontich, Belgium) for both histological and microCT datasets.

Results

Our method achieved an overall accuracy of 95.26% (95% confidence interval (CI): [94.15%, 96.37%]) with an F‑score of 0.9320 (95% CI: [0.9211, 0.9429]) averaged across all classes. Correlation coefficients between micromorphometric parameters measured on microCT imaging and histological reconstruction showed a strong linear relationship, with Spearman’s ρ‑values of 0.777, 0.717, 0.705, 0.666, and 0.687 for bone volume/tissue volume (BV/TV), bone surface/TV, trabecular pattern factor, trabecular thickness, and trabecular separation, respectively. Bland–Altman and mountain plots indicated good agreement between the methods for BV/TV measurements.

Conclusion

This method enables examination of tissue microarchitecture in 3D with an even higher resolution than microcomputed tomography (microCT), without losing information on cellularity. However, the limitation of this procedure is its destructive nature, which precludes subsequent mechanical testing of the sample or any further secondary measurements. Furthermore, the number of histological sections that can be created from a single sample is limited.
Literatur
1.
Zurück zum Zitat Suzuki K (2017) Overview of deep learning in medical imaging. Radiol Phys Technol 10:257–273CrossRefPubMed Suzuki K (2017) Overview of deep learning in medical imaging. Radiol Phys Technol 10:257–273CrossRefPubMed
3.
Zurück zum Zitat Zhou Z, Siddiquee MMR, Tajbakhsh N, Liang J (2018) UNet++: A Nested U‑Net Architecture for Medical Image Segmentation. Deep Learn Med Image Anal Multimodal Learn Clin Decis Support 11045:3–11CrossRef Zhou Z, Siddiquee MMR, Tajbakhsh N, Liang J (2018) UNet++: A Nested U‑Net Architecture for Medical Image Segmentation. Deep Learn Med Image Anal Multimodal Learn Clin Decis Support 11045:3–11CrossRef
4.
Zurück zum Zitat Zhang J, Liu Y, Wu Q, Wang Y, Liu Y, Xu X et al (2022) SWTRU: Star-shaped Window Transformer Reinforced U‑Net for medical image segmentation. Comput Biol Med 150:105954CrossRefPubMed Zhang J, Liu Y, Wu Q, Wang Y, Liu Y, Xu X et al (2022) SWTRU: Star-shaped Window Transformer Reinforced U‑Net for medical image segmentation. Comput Biol Med 150:105954CrossRefPubMed
5.
Zurück zum Zitat Kvasnicka HM, Thiele J, Amend T, Fischer R (1994) Three-dimensional reconstruction of histologic structures in human bone marrow from serial sections of trephine biopsies. Spatial appearance of sinusoidal vessels in primary (idiopathic) osteomyelofibrosis. Anal Quant Cytol Histol 16:159–166PubMed Kvasnicka HM, Thiele J, Amend T, Fischer R (1994) Three-dimensional reconstruction of histologic structures in human bone marrow from serial sections of trephine biopsies. Spatial appearance of sinusoidal vessels in primary (idiopathic) osteomyelofibrosis. Anal Quant Cytol Histol 16:159–166PubMed
6.
Zurück zum Zitat Nagara K, Roth HR, Nakamura S, Oda H, Moriya T, Oda M et al (2017) Micro-CT Guided 3D Reconstruction of Histological Images. In: Patch-Based Techniques in Medical Imaging. Springer, pp 93–101CrossRef Nagara K, Roth HR, Nakamura S, Oda H, Moriya T, Oda M et al (2017) Micro-CT Guided 3D Reconstruction of Histological Images. In: Patch-Based Techniques in Medical Imaging. Springer, pp 93–101CrossRef
7.
Zurück zum Zitat Nolte P, Dullin C, Svetlove A, Brettmacher M, Rußmann C, Schilling AF et al (2022) Current Approaches for Image Fusion of Histological Data with Computed Tomography and Magnetic Resonance Imaging. Radiol Res Pract 2022:6765895PubMedPubMedCentral Nolte P, Dullin C, Svetlove A, Brettmacher M, Rußmann C, Schilling AF et al (2022) Current Approaches for Image Fusion of Histological Data with Computed Tomography and Magnetic Resonance Imaging. Radiol Res Pract 2022:6765895PubMedPubMedCentral
8.
Zurück zum Zitat Lundin EL, Stauber M, Papageorgiou P, Ehrbar M, Ghayor C, Weber FE et al (2017) Automatic registration of 2D histological sections to 3D microCT volumes: Trabecular bone. Bone 105:173–183CrossRefPubMed Lundin EL, Stauber M, Papageorgiou P, Ehrbar M, Ghayor C, Weber FE et al (2017) Automatic registration of 2D histological sections to 3D microCT volumes: Trabecular bone. Bone 105:173–183CrossRefPubMed
10.
Zurück zum Zitat Bay H, Tuytelaars T, Van Gool L (2006) SURF: Speeded Up Robust Features. In: Computer Vision—ECCV 2006. Springer, Berlin Heidelberg, pp 404–417CrossRef Bay H, Tuytelaars T, Van Gool L (2006) SURF: Speeded Up Robust Features. In: Computer Vision—ECCV 2006. Springer, Berlin Heidelberg, pp 404–417CrossRef
11.
Zurück zum Zitat Rublee E, Rabaud V, Konolige K, Bradski G (2011) ORB: An efficient alternative to SIFT or SURF. In: 2011 International Conference on Computer Vision. IEEE, pp 2564–2571CrossRef Rublee E, Rabaud V, Konolige K, Bradski G (2011) ORB: An efficient alternative to SIFT or SURF. In: 2011 International Conference on Computer Vision. IEEE, pp 2564–2571CrossRef
12.
Zurück zum Zitat Morel J‑M, Yu G (2009) ASIFT: A New Framework for Fully Affine Invariant Image Comparison. SIAM J Imaging Sci 2:438–469CrossRef Morel J‑M, Yu G (2009) ASIFT: A New Framework for Fully Affine Invariant Image Comparison. SIAM J Imaging Sci 2:438–469CrossRef
15.
Zurück zum Zitat Bankhead P, Loughrey MB, Fernández JA, Dombrowski Y, McArt DG, Dunne PD et al (2017) QuPath: Open source software for digital pathology image analysis. Sci Rep 7:16878CrossRefPubMedPubMedCentral Bankhead P, Loughrey MB, Fernández JA, Dombrowski Y, McArt DG, Dunne PD et al (2017) QuPath: Open source software for digital pathology image analysis. Sci Rep 7:16878CrossRefPubMedPubMedCentral
16.
Zurück zum Zitat Ronneberger O, Fischer P, Brox T (2015) U‑Net: Convolutional Networks for Biomedical Image Segmentation. In: Medical Image Computing and Computer-Assisted Intervention—MICCAI 2015. Springer, pp 234–241 Ronneberger O, Fischer P, Brox T (2015) U‑Net: Convolutional Networks for Biomedical Image Segmentation. In: Medical Image Computing and Computer-Assisted Intervention—MICCAI 2015. Springer, pp 234–241
17.
Zurück zum Zitat Báskay J, Pénzes D, Kontsek E, Pesti A, Kiss A, Guimarães Carvalho BK et al (2024) Are Artificial Intelligence-Assisted Three-Dimensional Histological Reconstructions Reliable for the Assessment of Trabecular Microarchitecture? J Clin Med Res. https://doi.org/10.3390/jcm13041106CrossRef Báskay J, Pénzes D, Kontsek E, Pesti A, Kiss A, Guimarães Carvalho BK et al (2024) Are Artificial Intelligence-Assisted Three-Dimensional Histological Reconstructions Reliable for the Assessment of Trabecular Microarchitecture? J Clin Med Res. https://​doi.​org/​10.​3390/​jcm13041106CrossRef
Metadaten
Titel
Reconstructing 3D histological structures using machine learning (artificial intelligence) algorithms
verfasst von
J. Báskay
M. Kivovics
D. Pénzes
E. Kontsek
A. Pesti
A. Kiss
M. Szócska
O. Németh
P. Pollner
Publikationsdatum
21.11.2024
Verlag
Springer Medizin
Erschienen in
Die Pathologie / Ausgabe Sonderheft 1/2024
Print ISSN: 2731-7188
Elektronische ISSN: 2731-7196
DOI
https://doi.org/10.1007/s00292-024-01387-6

Kompaktes Leitlinien-Wissen Innere Medizin (Link öffnet in neuem Fenster)

Mit medbee Pocketcards schnell und sicher entscheiden.
Leitlinien-Wissen kostenlos und immer griffbereit auf ihrem Desktop, Handy oder Tablet.

Neu im Fachgebiet Innere Medizin

Lp(a) zur Risikoeinschätzung bei Thoraxschmerzen

Der Lp(a)-Wert kann dazu beitragen, bei stabilen Patienten mit neu aufgetretenen Thoraxschmerzen und ohne KHK-Diagnose die Wahrscheinlichkeit für das Vorliegen von Koronarstenosen abzuschätzen.

Finerenon bei eGFR-Verlust nicht gleich absetzen!

Der Mineralokortikoid-Rezeptor-Antagonist Finerenon verbessert die Prognose bei Herzinsuffizienz mit leicht reduzierter oder erhaltener Ejektionsfraktion. Ein Rückgang der eGFR zu Beginn der Therapie scheint diese Wirkung nicht wesentlich zu mindern.

Polypen bei nahen Verwandten – erhöhtes Darmkrebsrisiko

Werden bei erstgradigen Verwandten gutartige Darmpolypen identifiziert, ist das Risiko, selbst an einem Kolorektalkarzinom zu erkranken, deutlich erhöht – vor allem das für eine früh beginnende Erkrankung. Hier könnte sich eine frühe Koloskopie besonders lohnen.

Verbände und Cremes gegen Dekubitus: „Wir wissen nicht, was sie bringen!“

Die Datenlage zur Wirksamkeit von Verbänden oder topischen Mitteln zur Prävention von Druckgeschwüren sei schlecht, so die Verfasser einer aktuellen Cochrane-Studie. Letztlich bleibe es unsicher, ob solche Maßnahmen den Betroffenen nutzen oder schaden.

EKG Essentials: EKG befunden mit System (Link öffnet in neuem Fenster)

In diesem CME-Kurs können Sie Ihr Wissen zur EKG-Befundung anhand von zwölf Video-Tutorials auffrischen und 10 CME-Punkte sammeln.
Praxisnah, relevant und mit vielen Tipps & Tricks vom Profi.

Update Innere Medizin

Bestellen Sie unseren Fach-Newsletter und bleiben Sie gut informiert.