Automatizovaný překlad do češtiny: analýza translátu generovaného pomocí velkých jazykových modelů s důrazem na vliv optimalizace promptů

Abstract

Tato diplomová práce předkládá analýzu kvality překladů do českého jazyka vyhotovených systémy umělé inteligence, konkrétně velkými jazykovými modely Gemini, ChatGPT a Claude. Jedním z cílů výzkumu je zhodnotit vliv výchozího jazyka (angličtiny nebo němčiny) i jazyka samotného zadání (promptu) na kvalitu cílového textu. Analýza rovněž zohledňuje vliv textového žánru (odborný oproti literárnímu textu) a usiluje o porovnání toho, do jaké míry dokážou jednotlivé modely reagovat na specifické nároky těchto odlišných textů. Teoretická část práce definuje mimo jiné koncept generativní umělé inteligence (genAI), popisuje specifika vybraných modelů a podrobně se zabývá disciplínou prompt engineeringu. Vedle uvedení do tohoto technologického kontextu prezentuje práce i různé metodiky kritiky překladu a analyzuje zvolený výchozí materiál s ohledem na specifika, která je v překladu nezbytné zohlednit. Výzkum se opírá o kvantitativní metodologii a analýzu poměrně rozsáhlého textového korpusu zahrnujícího různé textové žánry i výchozí jazyky. K vyhodnocení míry chybovosti na základě počtu pravopisných, typografických a gramatických nedostatků byla zvolena metoda automatické kontroly pravopisu a gramatiky v prostředí programu Microsoft Word, jež byla doplněna o specializovaný software pro automatizované...

This master's thesis presents a translation quality analysis based on translations into Czech generated by AI systems, namely large language models Gemini, ChatGPT and Claude. One of the objectives of the study is to evaluate the influence of the source language (English or German) and the language of the prompt itself on the quality of the target text. In addition, we analyse the impact of various text genres (literary or academic) and seek to compare the extent to which individual models can respond to the specific demands of these distinct texts. The theoretical section of the thesis defines the concept of generative AI, describes the specific characteristics of the selected models, and examines the field of prompt engineering. Alongside the technological context, this thesis also addresses the topic of translation criticism and explores the selected source texts, focusing on key attributes that must be taken into account in the translation process. A quantitative methodology is applied, based on a rather extensive language corpus comprising various text genres and source languages. In order to measure the overall error rate based on the number of spelling mistakes, grammatical and typographical errors, we used the automatic spell- and grammar-check features in Microsoft Word, supplemented by...