{"status":"ok","message-type":"work","message-version":"1.0.0","message":{"indexed":{"date-parts":[[2025,8,29]],"date-time":"2025-08-29T09:56:06Z","timestamp":1756461366682},"reference-count":19,"publisher":"Walter de Gruyter GmbH","issue":"4","content-domain":{"domain":[],"crossmark-restriction":false},"short-container-title":[],"published-print":{"date-parts":[[2024,8,6]]},"abstract":"<jats:title>Zusammenfassung<\/jats:title>\n               <jats:p>Der vorliegende Aufsatz untersucht die Problematik von Halluzinationen in vier wissenschaftlichen Aufs\u00e4tzen aus verschiedenen Bereichen der Betriebswirtschaftslehre, die von ChatGPT-4 verfasst wurden. Konkret soll gepr\u00fcft werden, ob die von ChatGPT generierten Quellennachweise existieren und, wenn dies der Fall ist, ob sie korrekt sind. Ein erstes \u00fcberraschendes Ergebnis ist, dass fast 40\u00a0Prozent der 174 in den Artikeln referenzierten Quellen, deren bibliografische Angaben nach den einzelnen Hauptkapiteln ausgegeben wurden, nicht im f\u00fcr jeden Aufsatz eigens generierten Literaturverzeichnis ausgewiesen waren. Eine \u00dcberpr\u00fcfung aller bibliografischen Angaben ergab, dass in den einzelnen Artikeln zwischen 18 und 100\u00a0Prozent der Quellen in Google Scholar nicht gefunden werden konnten. Die H\u00e4lfte der gefundenen ChatGPT-Quellen war in unterschiedlichem Ausma\u00df fehlerhaft (falscher Dokumenttyp, falscher Zeitschriftenname, falsche Seitenangabe). Im Durchschnitt war nur ein Viertel der bibliografischen Quellenangaben vollst\u00e4ndig korrekt. Im Web of Science konnte nur ein Viertel der Quellenangaben nachgewiesen werden, diese waren aber gr\u00f6\u00dftenteils korrekt. Obige Ergebnisse zeigen, dass ChatGPT-4 f\u00fcr das Verfassen von wissenschaftlichen Arbeiten\u00a0\u2013 nicht nur aufgrund von ethischen und rechtlichen Bedenken\u00a0\u2013 nicht empfohlen werden kann, da ein gro\u00dfer Teil der (zum Zeitpunkt des Verfassens dieser Arbeit g\u00fcltigen Version) von ChatGPT generierten Referenzen nicht existiert oder teilweise fehlerhaft ist. Es ist weiter davon auszugehen, dass auch die erzeugten Texte teilweise erfunden sind oder von nicht referenzierten Quellen (Plagiate) stammen. Von ChatGPT erzeugte Texte m\u00fcssen daher einer umfassenden \u00dcberpr\u00fcfung unterzogen werden, die vor allem auf inhaltlicher Ebene nicht immer einfach sein d\u00fcrfte. Die Autoren schlie\u00dfen sich daher der Empfehlung von Gimpel et al. (2023) an, dass ChatGPT beim Schreiben prim\u00e4r nur erg\u00e4nzend (z.\u200aB. Rechtschreibkontrolle, Erstellung von Zusammenfassungen, Unterst\u00fctzung bei der Ideengenerierung) verwendet werden sollte.<\/jats:p>","DOI":"10.1515\/iwp-2024-2016","type":"journal-article","created":{"date-parts":[[2024,8,8]],"date-time":"2024-08-08T10:21:52Z","timestamp":1723112512000},"page":"157-166","source":"Crossref","is-referenced-by-count":1,"title":["ChatGPT und halluzinierte Referenzen in Artikeln aus ausgew\u00e4hlten Bereichen der Betriebswirtschaftslehre"],"prefix":"10.1515","volume":"75","author":[{"suffix":"\u2020","given":"Christian","family":"Schl\u00f6gl","sequence":"first","affiliation":[{"name":"Universit\u00e4t Graz Institut f\u00fcr Operations und Information Systems Universit\u00e4tsstra\u00dfe 15 Graz \u00d6sterreich"}],"role":[{"role":"author","vocabulary":"crossref"}]}],"member":"374","published-online":{"date-parts":[[2024,8,9]]},"reference":[{"key":"2024080810214680650_j_iwp-2024-2016_ref_001","doi-asserted-by":"crossref","unstructured":"Athaluri Sai Anirudh, Manthena Sandeep Varma, Kesapragada V S R Krishna Manoj, Yarlagadda Vineel, Dave Tirth & Duddumpud Rama Tulasi Siri (2023). Exploring the Boundaries of Reality: Investigating the Phenomenon of Artificial Intelligence Hallucination in Scientific Writing Through ChatGPT References. Cureus 15 (4), e37432, DOI: 10.7759\/cureus.37432.","DOI":"10.7759\/cureus.37432"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_002","doi-asserted-by":"crossref","unstructured":"Bhattacharyya Mehul, Miller Valerie M, Bhattacharyya Debjan & Miller Larry E. (2023). High Rates of Fabricated and Inaccurate References in ChatGPT-Generated Medical Content. Cureus 15(5): e39238. DOI: 10.7759\/cureus.39238.","DOI":"10.7759\/cureus.39238"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_003","doi-asserted-by":"crossref","unstructured":"Buchanan Joy, Hill Stephen & Shapoval Olga (2024). ChatGPT Hallucinates Non-existent Citations: Evidence from Economics. The American Economist, 69 (1), 80 \u2013 87. DOI: 10.1177\/05694345231218454.","DOI":"10.1177\/05694345231218454"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_004","unstructured":"Clarivate (2022). Web of Science Core Collection: Explanation of peer reviewed journals. Version vom 12.05.2022, abgerufen am 10. 4. 2024 von https:\/\/support.clarivate.com\/ScientificandAcademicResearch\/s\/article\/Web-of-Science-Core-Collection-Explanation-of-peer-reviewed-journals?language=en_US."},{"key":"2024080810214680650_j_iwp-2024-2016_ref_005","unstructured":"Clarivate (2024). Web of Science-Recherche, durchgef\u00fchrt am 2. 5. 2024, https:\/\/www.webofscience.com\/wos\/woscc\/analyze-results\/675ef6a4-cc60-45de-9efb-f32e738125bd-e4f6a5c1."},{"key":"2024080810214680650_j_iwp-2024-2016_ref_006","doi-asserted-by":"crossref","unstructured":"Day Terence (2023). A Preliminary Investigation of Fake Peer-Reviewed Citations and References Generated by ChatGPT. The Professional Geographer, 75 (6), 1024\u20131027, DOI: 10.1080\/00330124.2023.2190373.","DOI":"10.1080\/00330124.2023.2190373"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_007","doi-asserted-by":"crossref","unstructured":"Dergaa Ismail, Chamari Karim, Zmijewski Piotr & Saad Helmi Ben (2023). From human writing to artificial intelligence generated text: examining the prospects and potential threats of ChatGPT in academic writing. Biology of Sport, 41 (2), 615 \u2013 622. DOI: 10.5114\/biolsport.2023.125623.","DOI":"10.5114\/biolsport.2023.125623"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_008","doi-asserted-by":"crossref","unstructured":"Emsley Robin (2023). ChatGPT: these are not hallucinations \u2013 they\u2019re fabrications and falsifications. Schizophrenia 9 (1), 1 \u2013 2, DOI: 10.1038\/s41537-023-00379-4.","DOI":"10.1038\/s41537-023-00379-4"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_009","unstructured":"Gimpel Henner, Hall Kristina, Decker Stefan, Eymann Torsten, L\u00e4mmermann Luis, M\u00e4dche Alexander, R\u00f6glinger Maximilian, Ruiner Caroline, Schoch Manfred, Schoop Mareike, Urbach Nils & Vandirk Steffen (2023). Unlocking the Power of Generative AI Models and Systems such as GPT-4 and ChatGPT for Higher Education: A Guide for Students and Lecturers. University of Hohenheim, 2023."},{"key":"2024080810214680650_j_iwp-2024-2016_ref_010","doi-asserted-by":"crossref","unstructured":"Goddard Jerome (2023). Hallucinations in ChatGPT: A Cautionary Tale for Biomedical Researchers \u2013 Commentary. The American Journal of Medicine, 136 (11), 1059 \u2013 1060, DOI: 10.1016\/j.amjmed.2023.06.012.","DOI":"10.1016\/j.amjmed.2023.06.012"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_011","doi-asserted-by":"crossref","unstructured":"Gusenbauer, Michael (2019). Google Scholar to overshadow them all? Comparing the sizes of 12 academic search engines and bibliographic databases. Scientometrics, 118, 177 \u2013 214, DOI: 10.1007\/s11192-018-2958-5.","DOI":"10.1007\/s11192-018-2958-5"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_012","unstructured":"Hu Krystal (2023). ChatGPT sets record for fastest-growing user base \u2013 analyst note. February 2, 2023, abgerufen am 9. 4. 2024 von https:\/\/www.reuters.com\/technology\/chatgpt-sets-record-fastest-growing-user-base-analyst-note-2023-02-01\/."},{"key":"2024080810214680650_j_iwp-2024-2016_ref_013","doi-asserted-by":"crossref","unstructured":"Kullmann Sylvia & Hiebl Johannes (2024). Artificial Intelligence (AI) Research Assistants in der Praxis. Information: Wissenschaft & Praxis, 75 (1), 32 \u2013 33, DOI: 10.1515\/iwp-2023-2045.","DOI":"10.1515\/iwp-2023-2045"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_014","doi-asserted-by":"crossref","unstructured":"Nazir Anam & Wang Ze (2023). A comprehensive survey of ChatGPT: Advancements, applications, prospects and challenges. Meta-Radiology, (1), 1 \u2013 12, DOI: 10.1016\/j.metrad.2023.100022.","DOI":"10.1016\/j.metrad.2023.100022"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_015","unstructured":"OpenAI (2023). GPT-4 Technical Report. Submitted on 15 Mar 2023 (v1), last revised 4 Mar 2024 (this version, v6), abgerufen am 10. 4. 2024 von https:\/\/doi.org\/10.48550\/arXiv.2303.08774."},{"key":"2024080810214680650_j_iwp-2024-2016_ref_016","doi-asserted-by":"crossref","unstructured":"Sharun Khan, Banu S. Amitha, Pawde Abhijit M., Kumar Rohit, Pharma Shopnil Aksah M., Dhama Kuldeep & Pal Amar (2024). ChatGPT and artificial hallucinations in stem cell research: assessing the accuracy of generated references \u2013 a preliminary study. Annals of Medicine & Surgery, 85, 5275 \u2013 5278, DOI: 10.1097\/MS9.0000000000001228.","DOI":"10.1097\/MS9.0000000000001228"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_017","unstructured":"Universit\u00e4t Graz (2023). Orientierungsrahmen zum Umgang mit textgenerierenden KI-Systemen an der Universit\u00e4t Graz (Stand 1. September 2023), abgerufen am 2. 5. 2024 von https:\/\/static.uni-graz.at\/fileadmin\/projekte\/Schreibzentrum\/Neuigkeiten\/KI-Orientierungsrahmen_230901.pdf."},{"key":"2024080810214680650_j_iwp-2024-2016_ref_018","doi-asserted-by":"crossref","unstructured":"Wagner Matthias W. & Ertl-Wagner Birgit B. (2023). Accuracy of Information and References Using ChatGPT-3 for Retrieval of Clinical Radiological Information. Canadian Association of Radiologists Journal, 75 (1), 69 \u2013 73, DOI: 10.1177\/08465371231171125.","DOI":"10.1177\/08465371231171125"},{"key":"2024080810214680650_j_iwp-2024-2016_ref_019","doi-asserted-by":"crossref","unstructured":"Walters William H. & Wilder Esther Isabelle (2023). Fabrication and errors in the bibliographic citations generated by ChatGPT. Nature Scientific Reports, 13, 14045, DOI: 10.1038\/s41598-023-41032-5.","DOI":"10.1038\/s41598-023-41032-5"}],"container-title":["Information \u2013 Wissenschaft &amp; Praxis"],"original-title":[],"language":"en","link":[{"URL":"https:\/\/www.degruyter.com\/document\/doi\/10.1515\/iwp-2024-2016\/xml","content-type":"application\/xml","content-version":"vor","intended-application":"text-mining"},{"URL":"https:\/\/www.degruyter.com\/document\/doi\/10.1515\/iwp-2024-2016\/pdf","content-type":"unspecified","content-version":"vor","intended-application":"similarity-checking"}],"deposited":{"date-parts":[[2024,8,8]],"date-time":"2024-08-08T10:23:36Z","timestamp":1723112616000},"score":1,"resource":{"primary":{"URL":"https:\/\/www.degruyter.com\/document\/doi\/10.1515\/iwp-2024-2016\/html"}},"subtitle":[],"short-title":[],"issued":{"date-parts":[[2024,7,31]]},"references-count":19,"journal-issue":{"issue":"4","published-online":{"date-parts":[[2024,8,9]]},"published-print":{"date-parts":[[2024,8,6]]}},"alternative-id":["10.1515\/iwp-2024-2016"],"URL":"https:\/\/doi.org\/10.1515\/iwp-2024-2016","relation":{},"ISSN":["1434-4653","1619-4292"],"issn-type":[{"value":"1434-4653","type":"print"},{"value":"1619-4292","type":"electronic"}],"subject":[],"published":{"date-parts":[[2024,7,31]]}}}