nach oben

Techniques in Coloproctology

Erschienen in:

15.07.2023 | Editorial

How large language models including generative pre-trained transformer (GPT) 3 and 4 will impact medicine and surgery

verfasst von: S. B. Atallah, N. R. Banda, A. Banda, N. A. Roeck

Erschienen in: Techniques in Coloproctology | Ausgabe 8/2023

Einloggen, um Zugang zu erhalten

Excerpt

Recently, a promising autoregressive large language model (LLM), Generative Pre-trained Transformer (GPT)-3 trained with 175 billion parameters via cloud computing [1] has been made available to the public online (released by OpenAI on November 30, 2022; https://chat.openai.com/). Its size makes it one of the largest deep learning models ever created [2‐5]. ChatGPT’s global uptake has been exponential: 40 days post launch, GPT-3, had 10 million daily users, surpassing social media giant Instagram in daily users [6] and becoming an overnight “cultural sensation” [7]. GPT-4 was released on March 14, 2023, and it is capable of performing better than humans on high-level professional school exams, and it is perceived as a general purpose artificial intelligence (AI) that is suitable for multiple economic sectors, including healthcare. …

Atallah AB, Atallah S (2021) Cloud computing for robotics and surgery. Digital Surg. https://doi.org/10.1007/978-3-030-49100-0_4CrossRef

Korngiebel DM, Mooney SD (2021) Considering the possibilities and pitfalls of Generative Pre-trained Transformer 3 (GPT-3) in healthcare delivery. NPJ Digital Med 4(1):93CrossRef

Sallam M (2023) ChatGPT utility in healthcare education, research, and practice: Systematic review on the promising perspectives and valid concerns. InHealthcare 11(6):887CrossRef

Li J, Dada A, Kleesiek J, Egger J (2023) ChatGPT in Healthcare: a taxonomy and systematic review. medRxiv. https://doi.org/10.1101/2023.03.30.23287899

George AS, George AH (2023) A review of ChatGPT AI’s impact on several business sectors. Partners Univers Int Innov J 1(1):9–23

Liquid Ocelot. https://medium.com/inkwater-atlas/chatgpt-surpasses-instagram-with-10-million-daily-users-in-just-40-days-580944badd9e. Accessed 28 May 2023

Thorp HH (2023) ChatGPT is fun, but not an author. Science 379(6630):313–313CrossRefPubMed

Bowman SR (2023) Eight things to know about large language models. arXiv preprint arXiv:2304.00612

Shlegeris B, Roger F, Chan L (2022) Language models seem to be much better than humans at next-token prediction. Alignm Forum. https://www.alignmentforum.org/posts/htrZrxduciZ5QaCjw/language-models-seem-to-be-much-better-than-humans-at-next

10.

Stiennon N, Ouyang L, Wu J et al (2020) Learning to summarize with human feedback. Adv Neural Inf Process Syst 33:3008–3021

11.

Hirschberg J, Manning CD (2015) Advances in natural language processing. Science 349(6245):261–266CrossRefPubMed

12.

Vaswani A, Shazeer N, Parmar N et al (2017) Attention is all you need. Adv Neural Inform Process Syst 30. https://proceedings.neurips.cc/paper/2017/file/3f5ee243547dee91fbd053c1c4a845aa-Paper.pdf

13.

Atallah S (2021) Artificial intelligence and computer vision. Digital Surg. https://doi.org/10.1007/978-3-030-49100-0_31CrossRef

14.

Hoffmann J, Borgeaud S, Mensch A et al (2022) Training compute-optimal large language models. arXiv preprint arXiv:2203.15556

15.

Radford A, Narasimhan K, Salimans T et al (2018) Improving language understanding by generative pre-training. OpenAI blog. https://openai.com/research/language-unsupervised

16.

Budzianowski, Paweł, Ivan Vulić (2019) Hello, it's GPT-2--how can I help you? Towards the use of pretrained language models for task-oriented dialogue systems. arXiv preprint arXiv:1907.05774

17.

Ham D, Lee JG, Jang Y, Kim KE (2020) End-to-end neural pipeline for goal-oriented dialogue systems using GPT-2. InProceedings of the 58th annual meeting of the association for computational linguistics (pp. 583–592)

18.

Sevilla J, Heim L, Ho A, Besiroglu T, Hobbhahn M, Villalobos P (2022) Compute trends across three eras of machine learning. In 2022 International Joint Conference on Neural Networks (IJCNN), pp. 1–8. IEEE

19.

S. Hoffmann J, Borgeaud S, Mensch A et al (2022) An empirical analysis of compute-optimal large language model training. In: Oh AH, Agarwal A, Belgrave D, Cho K (eds) Advances in Neural Information Processing Systems, 2022. https://openreview.net/forum?id=iBBcRUlOAPR

20.

Kaplan S, McCandlish J, Henighan T et al (2020) Scaling laws for neural language models. arXiv preprint 2001.08361

21.

Wei J, Wang X, Schuurmans D et al (2022) Chain of thought prompting elicits reasoning in large language models. arXiv preprint arXiv:2201.11903

22.

Dwivedi YK, Kshetri N, Hughes L et al (2023) “So what if ChatGPT wrote it?” Multidisciplinary perspectives on opportunities, challenges and implications of generative conversational AI for research, practice and policy. Int J Inf Manage 1(71):102642CrossRef

23.

Patel SB, Lam K (2023) ChatGPT: the future of discharge summaries? Lancet Digital Health 5(3):e107–e108CrossRefPubMed

24.

Woolhandler S, Himmelstein DU (2014) Administrative work consumes one-sixth of US physicians’ working hours and lowers their career satisfaction. Int J Health Serv 44(4):635–642CrossRefPubMed

25.

Patel RS, Bachu R, Adikey A, Malik M, Shah M (2018) Factors related to physician burnout and its consequences: a review. Behav Sci 8(11):98CrossRefPubMedPubMedCentral

26.

Kahn SA, Bousvaros A (2023) Topic of the month: How to write an effective letter of medical necessity. J Pediatr Gastroenterol Nutr 3:10–97

27.

Ali SR, Dobbs TD, Hutchings HA, Whitaker IS (2023) Using ChatGPT to write patient clinic letters. The Lancet Digital Health 5(4):e179–e181CrossRefPubMed

28.

Janssen BV, Kazemier G, Besselink MG (2023) The use of ChatGPT and other large language models in surgical science. BJS open. https://doi.org/10.1093/bjsopen/zrad032CrossRefPubMedPubMedCentral

29.

Tel A, Parodi PC, Robiony M, Zanotti B, Zingaretti N (2023) Could ChatGPT improve knowledge in surgery? Ann Surg Oncol 18:1–2

30.

Hassan AM, Nelson JA, Coert JH, Mehrara BJ, Selber JC (2023) Exploring the potential of artificial intelligence in surgery: insights from a conversation with ChatGPT. Ann Surg Oncol 5:1–4

31.

Paterick TE, Patel N, Tajik AJ, Chandrasekaran K (2017) Improving health outcomes through patient education and partnerships with patients. Proc Baylor Univ Med Cent 30(1):112–11

32.

Brake DR (2017) The invisible hand of the unaccountable algorithm: how Google, Facebook and other tech companies are changing journalism. Digital Technol J Int Compar Perspect 25–46

33.

Lee K, Hoti K, Hughes JD, Emmerton LM (2015) Consumer use of “Dr Google”: a survey on health information-seeking behaviors and navigational needs. J Med Internet Res 17(12):e288CrossRefPubMedPubMedCentral

34.

Faraj Z, Selamet M, Morales C et al (2021) Facially expressive humanoid robotic face. HardwareX 1(9):e00117CrossRef

35.

Daws R (2020) Medical chatbot using OpenAI’s GPT-3 told a fake patient to kill themselves. Available at https://artificialintelligencenews.com/2020/10/28/medical-chatbot-openai-gpt3-patient-kill-themselves/

36.

Asimov I (1941) Three laws of robotics. Asimov I. Runaround. 2. ISBN: 978-0-385-42304-5

37.

Zoll PM (1952) Resuscitation of the heart in ventricular standstill by external electric stimulation. N Engl J Med 247(20):768–771CrossRefPubMed

38.

Caffrey SL, Willoughby PJ, Pepe PE, Becker LB (2002) Public use of automated external defibrillators. N Engl J Med 347(16):1242–1247CrossRefPubMed

39.

Ji Z, Lee N, Frieske R et al (2023) Survey of hallucination in natural language generation. ACM Comput Surveys 55(12):1–38CrossRef

40.

Stein-Perlman Z, Weinstein-Raun B, Grace K (2022) Expert survey on progress in AI. AI Impacts blog, 2020. https://aiimpacts.org/2022-expert-survey-on-progress-in-ai/

Titel: How large language models including generative pre-trained transformer (GPT) 3 and 4 will impact medicine and surgery
verfasst von: S. B. Atallah
N. R. Banda
A. Banda
N. A. Roeck
Publikationsdatum: 15.07.2023
Verlag: Springer International Publishing
Erschienen in: Techniques in Coloproctology / Ausgabe 8/2023
Print ISSN: 1123-6337
Elektronische ISSN: 1128-045X
DOI: https://doi.org/10.1007/s10151-023-02837-8

Neu im Fachgebiet Chirurgie

Vorsicht, erhöhte Blutungsgefahr nach PCI!

10.05.2024 Koronare Herzerkrankung Nachrichten

Nach PCI besteht ein erhöhtes Blutungsrisiko, wenn die Behandelten eine verminderte linksventrikuläre Ejektionsfraktion aufweisen. Das Risiko ist umso höher, je stärker die Pumpfunktion eingeschränkt ist.

Darf man die Behandlung eines Neonazis ablehnen?

08.05.2024 Gesellschaft Nachrichten

In einer Leseranfrage in der Zeitschrift Journal of the American Academy of Dermatology möchte ein anonymer Dermatologe bzw. eine anonyme Dermatologin wissen, ob er oder sie einen Patienten behandeln muss, der eine rassistische Tätowierung trägt.

Deutlich weniger Infektionen: Wundprotektoren schützen!

08.05.2024 Postoperative Wundinfektion Nachrichten

Der Einsatz von Wundprotektoren bei offenen Eingriffen am unteren Gastrointestinaltrakt schützt vor Infektionen im Op.-Gebiet – und dient darüber hinaus der besseren Sicht. Das bestätigt mit großer Robustheit eine randomisierte Studie im Fachblatt JAMA Surgery.

Chirurginnen und Chirurgen sind stark suizidgefährdet

07.05.2024 Suizid Nachrichten

Der belastende Arbeitsalltag wirkt sich negativ auf die psychische Gesundheit der Angehörigen ärztlicher Berufsgruppen aus. Chirurginnen und Chirurgen bilden da keine Ausnahme, im Gegenteil.

Update Chirurgie

Bestellen Sie unseren Fach-Newsletter und bleiben Sie gut informiert.

Newsletter bestellen

Aktuelle BDC Leitlinien-Webinare

S3-Leitlinie „Diagnostik und Therapie des Karpaltunnelsyndroms“

Karpaltunnelsyndrom BDC Leitlinien Webinare

CME: 2 Punkte

Das Karpaltunnelsyndrom ist die häufigste Kompressionsneuropathie peripherer Nerven. Obwohl die Anamnese mit dem nächtlichen Einschlafen der Hand (Brachialgia parästhetica nocturna) sehr typisch ist, ist eine klinisch-neurologische Untersuchung und Elektroneurografie in manchen Fällen auch eine Neurosonografie erforderlich. Im Anfangsstadium sind konservative Maßnahmen (Handgelenksschiene, Ergotherapie) empfehlenswert. Bei nicht Ansprechen der konservativen Therapie oder Auftreten von neurologischen Ausfällen ist eine Dekompression des N. medianus am Karpaltunnel indiziert.

Prof. Dr. med. Gregor Antoniadis

S2e-Leitlinie „Distale Radiusfraktur“

Radiusfraktur BDC Leitlinien Webinare

CME: 2 Punkte

Das Webinar beschäftigt sich mit Fragen und Antworten zu Diagnostik und Klassifikation sowie Möglichkeiten des Ausschlusses von Zusatzverletzungen. Die Referenten erläutern, welche Frakturen konservativ behandelt werden können und wie. Das Webinar beantwortet die Frage nach aktuellen operativen Therapiekonzepten: Welcher Zugang, welches Osteosynthesematerial? Auf was muss bei der Nachbehandlung der distalen Radiusfraktur geachtet werden?

PD Dr. med. Oliver Pieske

Dr. med. Benjamin Meyknecht

S1-Leitlinie „Empfehlungen zur Therapie der akuten Appendizitis bei Erwachsenen“

Appendizitis BDC Leitlinien Webinare

CME: 2 Punkte

Inhalte des Webinars zur S1-Leitlinie „Empfehlungen zur Therapie der akuten Appendizitis bei Erwachsenen“ sind die Darstellung des Projektes und des Erstellungswegs zur S1-Leitlinie, die Erläuterung der klinischen Relevanz der Klassifikation EAES 2015, die wissenschaftliche Begründung der wichtigsten Empfehlungen und die Darstellung stadiengerechter Therapieoptionen.

Dr. med. Mihailo Andric

Klimawandel und Gesundheit: Was Sie in der Hausarztpraxis wissen müssen und tun können

Springer Medizin

How large language models including generative pre-trained transformer (GPT) 3 and 4 will impact medicine and surgery

Excerpt

Neu im Fachgebiet Chirurgie

Vorsicht, erhöhte Blutungsgefahr nach PCI!

Darf man die Behandlung eines Neonazis ablehnen?

Deutlich weniger Infektionen: Wundprotektoren schützen!

Chirurginnen und Chirurgen sind stark suizidgefährdet

Update Chirurgie

Aktuelle BDC Leitlinien-Webinare

S3-Leitlinie „Diagnostik und Therapie des Karpaltunnelsyndroms“

S2e-Leitlinie „Distale Radiusfraktur“

S1-Leitlinie „Empfehlungen zur Therapie der akuten Appendizitis bei Erwachsenen“

Klimawandel und Gesundheit: Was Sie in der Hausarztpraxis wissen müssen und tun können

Springer Medizin

Excerpt

Bitte loggen Sie sich ein, um Zugang zu diesem Inhalt zu erhalten

Weitere Artikel der Ausgabe 8/2023

Feasibility and safety of lateral pelvic lymph node dissection for elderly patients with middle-low rectal cancer: results of a large multicenter lateral node collaborative group study in China

The impact of the institutional abdominoperineal resections volume on short-term outcomes and expenses: a nationwide study

Three-port laparoscopic anterior resection for sigmoid cancer with transanal natural orifice specimen extraction (NOSE) and single-stapling colorectal anastomosis

Complete obstruction after colorectal anastomosis

An evaluation of a novel bowel preparation regimen and its effect on the utility of colon capsule endoscopy: a prospective cohort study with historical controls

Transanal endoscopic microsurgery technique: an acceptable approach for retrorectal tumors

Update Chirurgie