Skip to main content
Erschienen in: Gastric Cancer 4/2018

01.07.2018 | Original Article

Application of artificial intelligence using a convolutional neural network for detecting gastric cancer in endoscopic images

verfasst von: Toshiaki Hirasawa, Kazuharu Aoyama, Tetsuya Tanimoto, Soichiro Ishihara, Satoki Shichijo, Tsuyoshi Ozawa, Tatsuya Ohnishi, Mitsuhiro Fujishiro, Keigo Matsuo, Junko Fujisaki, Tomohiro Tada

Erschienen in: Gastric Cancer | Ausgabe 4/2018

Einloggen, um Zugang zu erhalten

Abstract

Background

Image recognition using artificial intelligence with deep learning through convolutional neural networks (CNNs) has dramatically improved and been increasingly applied to medical fields for diagnostic imaging. We developed a CNN that can automatically detect gastric cancer in endoscopic images.

Methods

A CNN-based diagnostic system was constructed based on Single Shot MultiBox Detector architecture and trained using 13,584 endoscopic images of gastric cancer. To evaluate the diagnostic accuracy, an independent test set of 2296 stomach images collected from 69 consecutive patients with 77 gastric cancer lesions was applied to the constructed CNN.

Results

The CNN required 47 s to analyze 2296 test images. The CNN correctly diagnosed 71 of 77 gastric cancer lesions with an overall sensitivity of 92.2%, and 161 non-cancerous lesions were detected as gastric cancer, resulting in a positive predictive value of 30.6%. Seventy of the 71 lesions (98.6%) with a diameter of 6 mm or more as well as all invasive cancers were correctly detected. All missed lesions were superficially depressed and differentiated-type intramucosal cancers that were difficult to distinguish from gastritis even for experienced endoscopists. Nearly half of the false-positive lesions were gastritis with changes in color tone or an irregular mucosal surface.

Conclusion

The constructed CNN system for detecting gastric cancer could process numerous stored endoscopic images in a very short time with a clinically relevant diagnostic ability. It may be well applicable to daily clinical practice to reduce the burden of endoscopists.
Literatur
2.
Zurück zum Zitat Sano T, Coit DG, Kim HH, Roviello F, Kassab P, Wittekind C, et al. Proposal of a new stage grouping of gastric cancer for TNM classification: international Gastric Cancer Association staging project. Gastric Cancer. 2017;20:217–25.CrossRefPubMed Sano T, Coit DG, Kim HH, Roviello F, Kassab P, Wittekind C, et al. Proposal of a new stage grouping of gastric cancer for TNM classification: international Gastric Cancer Association staging project. Gastric Cancer. 2017;20:217–25.CrossRefPubMed
3.
Zurück zum Zitat Katai H, Ishikawa T, Akazawa K, Isobe Y, Miyashiro I, Oda I, et al. Five-year survival analysis of surgically resected gastric cancer cases in Japan: a retrospective analysis of more than 100,000 patients from the nationwide registry of the Japanese Gastric Cancer Association (2001–2007). Gastric Cancer. 2017. https://doi.org/10.1007/s10120-017-0716-7 (Epub ahead of print).CrossRefPubMed Katai H, Ishikawa T, Akazawa K, Isobe Y, Miyashiro I, Oda I, et al. Five-year survival analysis of surgically resected gastric cancer cases in Japan: a retrospective analysis of more than 100,000 patients from the nationwide registry of the Japanese Gastric Cancer Association (2001–2007). Gastric Cancer. 2017. https://​doi.​org/​10.​1007/​s10120-017-0716-7 (Epub ahead of print).CrossRefPubMed
4.
Zurück zum Zitat Itoh H, Oohata Y, Nakamura K, Nagata T, Mibu R, Nakayama F. Complete ten-year postgastrectomy follow-up of early gastric cancer. Am J Surg. 1989;158:14–6.CrossRefPubMed Itoh H, Oohata Y, Nakamura K, Nagata T, Mibu R, Nakayama F. Complete ten-year postgastrectomy follow-up of early gastric cancer. Am J Surg. 1989;158:14–6.CrossRefPubMed
6.
Zurück zum Zitat Tsubono Y, Hisamichi S. Screening for gastric cancer in Japan. Gastric Cancer. 2000;3:9–18.CrossRefPubMed Tsubono Y, Hisamichi S. Screening for gastric cancer in Japan. Gastric Cancer. 2000;3:9–18.CrossRefPubMed
7.
Zurück zum Zitat Yeoh KG. How do we improve outcomes for gastric cancer? J Gastroenterol Hepatol. 2007;22:970–2.CrossRefPubMed Yeoh KG. How do we improve outcomes for gastric cancer? J Gastroenterol Hepatol. 2007;22:970–2.CrossRefPubMed
9.
Zurück zum Zitat Isomoto H, Shikuwa S, Yamaguchi N, Fukuda E, Ikeda K, Nishiyama H, et al. Endoscopic submucosal dissection for early gastric cancer: a large-scale feasibility study. Gut. 2009;58:331–6.CrossRefPubMed Isomoto H, Shikuwa S, Yamaguchi N, Fukuda E, Ikeda K, Nishiyama H, et al. Endoscopic submucosal dissection for early gastric cancer: a large-scale feasibility study. Gut. 2009;58:331–6.CrossRefPubMed
10.
Zurück zum Zitat Choi MK, Kim GH, Park DY, Song GA, Kim DU, Ryu DY, et al. Long-term outcomes of endoscopic submucosal dissection for early gastric cancer: a single-center experience. Surg Endosc. 2013;27:4250–8.CrossRefPubMed Choi MK, Kim GH, Park DY, Song GA, Kim DU, Ryu DY, et al. Long-term outcomes of endoscopic submucosal dissection for early gastric cancer: a single-center experience. Surg Endosc. 2013;27:4250–8.CrossRefPubMed
11.
Zurück zum Zitat Ahn JY, Jung HY. Long-term outcome of extended endoscopic submucosal dissection for early gastric cancer with differentiated histology. Clin Endosc. 2013;46:463–6.CrossRefPubMedPubMedCentral Ahn JY, Jung HY. Long-term outcome of extended endoscopic submucosal dissection for early gastric cancer with differentiated histology. Clin Endosc. 2013;46:463–6.CrossRefPubMedPubMedCentral
12.
Zurück zum Zitat Gotoda T, Iwasaki M, Kusano C, Seewald S, Oda I. Endoscopic resection of early gastric cancer treated by guideline and expanded National Cancer Centre criteria. Br J Surg. 2010;97:868–71.CrossRefPubMed Gotoda T, Iwasaki M, Kusano C, Seewald S, Oda I. Endoscopic resection of early gastric cancer treated by guideline and expanded National Cancer Centre criteria. Br J Surg. 2010;97:868–71.CrossRefPubMed
13.
14.
Zurück zum Zitat Hosokawa O, Hattori M, Douden K, Hayashi H, Ohta K, Kaizaki Y. Difference in accuracy between gastroscopy and colonoscopy for detection of cancer. Hepatogastroenterology. 2007;54:442–4.PubMed Hosokawa O, Hattori M, Douden K, Hayashi H, Ohta K, Kaizaki Y. Difference in accuracy between gastroscopy and colonoscopy for detection of cancer. Hepatogastroenterology. 2007;54:442–4.PubMed
15.
Zurück zum Zitat Hosokawa O, Tsuda S, Kidani E, Watanabe K, Tanigawa Y, Shirasaki S, et al. Diagnosis of gastric cancer up to three years after negative upper gastrointestinal endoscopy. Endoscopy. 1998;30:669–74.CrossRefPubMed Hosokawa O, Tsuda S, Kidani E, Watanabe K, Tanigawa Y, Shirasaki S, et al. Diagnosis of gastric cancer up to three years after negative upper gastrointestinal endoscopy. Endoscopy. 1998;30:669–74.CrossRefPubMed
16.
Zurück zum Zitat Amin A, Gilmour H, Graham L, Paterson-Brown S, Terrace J, Crofts TJ. Gastric adenocarcinoma missed at endoscopy. J R Coll Surg Edinb. 2002;47:681–4.PubMed Amin A, Gilmour H, Graham L, Paterson-Brown S, Terrace J, Crofts TJ. Gastric adenocarcinoma missed at endoscopy. J R Coll Surg Edinb. 2002;47:681–4.PubMed
17.
Zurück zum Zitat Yalamarthi S, Witherspoon P, McCole D, Auld CD. Missed diagnoses in patients with upper gastrointestinal cancers. Endoscopy. 2004;36:874–9.CrossRefPubMed Yalamarthi S, Witherspoon P, McCole D, Auld CD. Missed diagnoses in patients with upper gastrointestinal cancers. Endoscopy. 2004;36:874–9.CrossRefPubMed
18.
Zurück zum Zitat Voutilainen ME, Juhola MT. Evaluation of the diagnostic accuracy of gastroscopy to detect gastric tumours: clinicopathological features and prognosis of patients with gastric cancer missed on endoscopy. Eur J Gastroenterol Hepatol. 2005;17:1345–9.CrossRefPubMed Voutilainen ME, Juhola MT. Evaluation of the diagnostic accuracy of gastroscopy to detect gastric tumours: clinicopathological features and prognosis of patients with gastric cancer missed on endoscopy. Eur J Gastroenterol Hepatol. 2005;17:1345–9.CrossRefPubMed
19.
Zurück zum Zitat Zhang Q, Chen ZY, Chen CD, Liu T, Tang XW, Ren YT, et al. Training in early gastric cancer diagnosis improves the detection rate of early gastric cancer: an observational study in China. Medicine (Baltimore). 2015;94:e384.CrossRef Zhang Q, Chen ZY, Chen CD, Liu T, Tang XW, Ren YT, et al. Training in early gastric cancer diagnosis improves the detection rate of early gastric cancer: an observational study in China. Medicine (Baltimore). 2015;94:e384.CrossRef
20.
Zurück zum Zitat Yamazato T, Oyama T, Yoshida T, Baba Y, Yamanouchi K, Ishii Y, et al. Two years’ intensive training in endoscopic diagnosis facilitates detection of early gastric cancer. Intern Med. 2012;51:1461–5.CrossRefPubMed Yamazato T, Oyama T, Yoshida T, Baba Y, Yamanouchi K, Ishii Y, et al. Two years’ intensive training in endoscopic diagnosis facilitates detection of early gastric cancer. Intern Med. 2012;51:1461–5.CrossRefPubMed
21.
Zurück zum Zitat Yoshida S, Yamaguchi H, Tajiri H, Saito D, Hijikata A, Yoshimori M, et al. Diagnosis of early gastric cancer seen as less malignant endoscopically. Jpn J Clin Oncol. 1984;14:225–41.PubMed Yoshida S, Yamaguchi H, Tajiri H, Saito D, Hijikata A, Yoshimori M, et al. Diagnosis of early gastric cancer seen as less malignant endoscopically. Jpn J Clin Oncol. 1984;14:225–41.PubMed
22.
Zurück zum Zitat Esteva A, Kuprel B, Novoa RA, Ko J, Swetter SM, Blau HM, et al. Dermatologist-level classification of skin cancer with deep neural networks. Nature. 2017;542:115–8.CrossRefPubMed Esteva A, Kuprel B, Novoa RA, Ko J, Swetter SM, Blau HM, et al. Dermatologist-level classification of skin cancer with deep neural networks. Nature. 2017;542:115–8.CrossRefPubMed
23.
Zurück zum Zitat Bibault JE, Giraud P, Burgun A. Big Data and machine learning in radiation oncology: state of the art and future prospects. Cancer Lett. 2016;382:110–7.CrossRefPubMed Bibault JE, Giraud P, Burgun A. Big Data and machine learning in radiation oncology: state of the art and future prospects. Cancer Lett. 2016;382:110–7.CrossRefPubMed
24.
Zurück zum Zitat Gulshan V, Peng L, Coram M, Stumpe MC, Wu D, Narayanaswamy A, et al. Development and validation of a deep learning algorithm for detection of diabetic retinopathy in retinal fundus photographs. JAMA. 2016;316:2402–10.CrossRefPubMed Gulshan V, Peng L, Coram M, Stumpe MC, Wu D, Narayanaswamy A, et al. Development and validation of a deep learning algorithm for detection of diabetic retinopathy in retinal fundus photographs. JAMA. 2016;316:2402–10.CrossRefPubMed
25.
Zurück zum Zitat Misawa M, Kudo SE, Mori Y, Takeda K, Maeda Y, Kataoka S, et al. Accuracy of computer-aided diagnosis based on narrow-band imaging endocytoscopy for diagnosing colorectal lesions: comparison with experts. Int J Comput Assist Radiol Surg. 2017;12:757–66.CrossRefPubMed Misawa M, Kudo SE, Mori Y, Takeda K, Maeda Y, Kataoka S, et al. Accuracy of computer-aided diagnosis based on narrow-band imaging endocytoscopy for diagnosing colorectal lesions: comparison with experts. Int J Comput Assist Radiol Surg. 2017;12:757–66.CrossRefPubMed
28.
Zurück zum Zitat Szegedy C, Liu W, Jia Y, Sermanet P, Reed S, Anguelov D, et al.: Going deeper with convolutions. In: Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2015:1–9. Szegedy C, Liu W, Jia Y, Sermanet P, Reed S, Anguelov D, et al.: Going deeper with convolutions. In: Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2015:1–9.
29.
Zurück zum Zitat Deng, J. Dong W, Socher R, Li L, Li K, Fei-Fei L. Imagenet: A large-scale hierarchical image database. In: EEE Conference on Computer Vision and Pattern Recognition. 2009:248–55. Deng, J. Dong W, Socher R, Li L, Li K, Fei-Fei L. Imagenet: A large-scale hierarchical image database. In: EEE Conference on Computer Vision and Pattern Recognition. 2009:248–55.
30.
32.
Zurück zum Zitat Yao K, Doyama H, Gotoda T, Ishikawa H, Nagahama T, Yokoi C, et al. Diagnostic performance and limitations of magnifying narrow-band imaging in screening endoscopy of early gastric cancer: a prospective multicenter feasibility study. Gastric Cancer. 2014;17:669–79.CrossRefPubMed Yao K, Doyama H, Gotoda T, Ishikawa H, Nagahama T, Yokoi C, et al. Diagnostic performance and limitations of magnifying narrow-band imaging in screening endoscopy of early gastric cancer: a prospective multicenter feasibility study. Gastric Cancer. 2014;17:669–79.CrossRefPubMed
33.
Zurück zum Zitat Gotoda T, Uedo N, Yoshinaga S, Tanuma T, Morita Y, Doyama H, et al. Basic principles and practice of gastric cancer screening using high-definition white-light gastroscopy: eyes can only see what the brain knows. Dig Endosc. 2016;28(Suppl 1):2–15.CrossRefPubMed Gotoda T, Uedo N, Yoshinaga S, Tanuma T, Morita Y, Doyama H, et al. Basic principles and practice of gastric cancer screening using high-definition white-light gastroscopy: eyes can only see what the brain knows. Dig Endosc. 2016;28(Suppl 1):2–15.CrossRefPubMed
34.
Zurück zum Zitat Japanese Gastric Cancer Association. Japanese classification of gastric carcinoma. Gastric Cancer. 2011;14:101–12 (3rd English edition).CrossRef Japanese Gastric Cancer Association. Japanese classification of gastric carcinoma. Gastric Cancer. 2011;14:101–12 (3rd English edition).CrossRef
35.
Zurück zum Zitat Kimura K, Takemoto T. An endoscopic recognition of the atrophic border and its significance in chronic gastritis. Endoscopy. 1969;1:87–97.CrossRef Kimura K, Takemoto T. An endoscopic recognition of the atrophic border and its significance in chronic gastritis. Endoscopy. 1969;1:87–97.CrossRef
Metadaten
Titel
Application of artificial intelligence using a convolutional neural network for detecting gastric cancer in endoscopic images
verfasst von
Toshiaki Hirasawa
Kazuharu Aoyama
Tetsuya Tanimoto
Soichiro Ishihara
Satoki Shichijo
Tsuyoshi Ozawa
Tatsuya Ohnishi
Mitsuhiro Fujishiro
Keigo Matsuo
Junko Fujisaki
Tomohiro Tada
Publikationsdatum
01.07.2018
Verlag
Springer Japan
Erschienen in
Gastric Cancer / Ausgabe 4/2018
Print ISSN: 1436-3291
Elektronische ISSN: 1436-3305
DOI
https://doi.org/10.1007/s10120-018-0793-2

Weitere Artikel der Ausgabe 4/2018

Gastric Cancer 4/2018 Zur Ausgabe

Wie erfolgreich ist eine Re-Ablation nach Rezidiv?

23.04.2024 Ablationstherapie Nachrichten

Nach der Katheterablation von Vorhofflimmern kommt es bei etwa einem Drittel der Patienten zu Rezidiven, meist binnen eines Jahres. Wie sich spätere Rückfälle auf die Erfolgschancen einer erneuten Ablation auswirken, haben Schweizer Kardiologen erforscht.

Hinter dieser Appendizitis steckte ein Erreger

23.04.2024 Appendizitis Nachrichten

Schmerzen im Unterbauch, aber sonst nicht viel, was auf eine Appendizitis hindeutete: Ein junger Mann hatte Glück, dass trotzdem eine Laparoskopie mit Appendektomie durchgeführt und der Wurmfortsatz histologisch untersucht wurde.

Mehr Schaden als Nutzen durch präoperatives Aussetzen von GLP-1-Agonisten?

23.04.2024 Operationsvorbereitung Nachrichten

Derzeit wird empfohlen, eine Therapie mit GLP-1-Rezeptoragonisten präoperativ zu unterbrechen. Eine neue Studie nährt jedoch Zweifel an der Notwendigkeit der Maßnahme.

Ureterstriktur: Innovative OP-Technik bewährt sich

19.04.2024 EAU 2024 Kongressbericht

Die Ureterstriktur ist eine relativ seltene Komplikation, trotzdem bedarf sie einer differenzierten Versorgung. In komplexen Fällen wird dies durch die roboterassistierte OP-Technik gewährleistet. Erste Resultate ermutigen.

Update Chirurgie

Bestellen Sie unseren Fach-Newsletter und bleiben Sie gut informiert.

S3-Leitlinie „Diagnostik und Therapie des Karpaltunnelsyndroms“

Karpaltunnelsyndrom BDC Leitlinien Webinare
CME: 2 Punkte

Das Karpaltunnelsyndrom ist die häufigste Kompressionsneuropathie peripherer Nerven. Obwohl die Anamnese mit dem nächtlichen Einschlafen der Hand (Brachialgia parästhetica nocturna) sehr typisch ist, ist eine klinisch-neurologische Untersuchung und Elektroneurografie in manchen Fällen auch eine Neurosonografie erforderlich. Im Anfangsstadium sind konservative Maßnahmen (Handgelenksschiene, Ergotherapie) empfehlenswert. Bei nicht Ansprechen der konservativen Therapie oder Auftreten von neurologischen Ausfällen ist eine Dekompression des N. medianus am Karpaltunnel indiziert.

Prof. Dr. med. Gregor Antoniadis
Berufsverband der Deutschen Chirurgie e.V.

S2e-Leitlinie „Distale Radiusfraktur“

Radiusfraktur BDC Leitlinien Webinare
CME: 2 Punkte

Das Webinar beschäftigt sich mit Fragen und Antworten zu Diagnostik und Klassifikation sowie Möglichkeiten des Ausschlusses von Zusatzverletzungen. Die Referenten erläutern, welche Frakturen konservativ behandelt werden können und wie. Das Webinar beantwortet die Frage nach aktuellen operativen Therapiekonzepten: Welcher Zugang, welches Osteosynthesematerial? Auf was muss bei der Nachbehandlung der distalen Radiusfraktur geachtet werden?

PD Dr. med. Oliver Pieske
Dr. med. Benjamin Meyknecht
Berufsverband der Deutschen Chirurgie e.V.

S1-Leitlinie „Empfehlungen zur Therapie der akuten Appendizitis bei Erwachsenen“

Appendizitis BDC Leitlinien Webinare
CME: 2 Punkte

Inhalte des Webinars zur S1-Leitlinie „Empfehlungen zur Therapie der akuten Appendizitis bei Erwachsenen“ sind die Darstellung des Projektes und des Erstellungswegs zur S1-Leitlinie, die Erläuterung der klinischen Relevanz der Klassifikation EAES 2015, die wissenschaftliche Begründung der wichtigsten Empfehlungen und die Darstellung stadiengerechter Therapieoptionen.

Dr. med. Mihailo Andric
Berufsverband der Deutschen Chirurgie e.V.