تحلیلی بر عملکرد مدل‌های زبانی بزرگ در تبدیل خودکار گفتاری‌نویسی به نوشتار معیار براساس دستور خط مصوب فارسی

نوع مقاله : علمی-پژوهشی

نویسندگان
1 پژوهشکده زبان‌شناسی، پژوهشگاه علوم انسانی و مطالعات فرهنگی
2 پژوهشکده زبانشناسی، پژوهشگاه علوم انسانی و مطالعات فرهنگی
3 دانشکده کامپیوتر، دانشگاه صنعتی امیرکبیر
10.30465/lsi.2026.52503.1820
چکیده
رشد ارتباطات دیجیتال، مانند شبکه‌های اجتماعی و پیام‌رسان‌ها، موجب گسترش شکل‌های متنوعی از نوشتار در زبان فارسی، ازجمله گفتاری‌نویسی و شکسته‌نویسی، شده‌است. تبدیل این گونه‌های نوشتاری به نوشتار معیار، به‌ویژه براساس دستور خط مصوب فرهنگستان زبان و ادب فارسی، نیازمند بهره‌گیری از ابزارهای پیشرفته پردازش زبان طبیعی است. در پژوهش حاضر، عملکرد پنج مدل زبانی بزرگ شامل ChatGPT، Gemini، Perplexity، Claudeو DeepSeek در تبدیل خودکار گفتاری‌نویسی فارسی به نوشتار معیار براساس دستور خط مصوب ارزیابی شده‌است. داده‌های پژوهش از اصلاح و ترکیب دو پیکرۀ حاصل از فضای مجازی حاصل شده و به‌صورت تصادفی یک زیرپیکره شامل ۱۰۲۵ جمله که حاوی ۱۱۹۳۹ واژه است تهیه شده‌است. تحلیل خروجی مدل‌ها بر مبنای برچسب‌های طلایی معیار و با تمرکز بر تغییرات مثبت (مانند درج نیم‌فاصله، کسرۀ اضافه، همزه و اصلاح شکسته‌نویسی) و تغییرات منفی (مانند حذف واژه‌بست، جایگزینی واژه و تغییر سبک و جابه‌جایی واژه‌ها) انجام شده‌است. نتایج نشان می‌دهد مدل Claude با بیشترین تطابق با برچسب طلایی (51/39٪) در سطح واژه و جمله عملکرد بهتر و Perplexity ضعیف‌ترین عملکرد را از این منظر داشته‌است. این پژوهش نشان می‌دهد که مدل‌های زبانی بزرگ، علی‌رغم توانایی بالا، همچنان با چالش‌هایی در معیارسازی نوشتار فارسی، به‌ویژه در رعایت دقیق دستور خط، مواجه‌است.
کلیدواژه‌ها

عنوان مقاله English

Analyzing the Performance of Large Language Models in the Automatic Conversion of Colloquial Persian to Standard Writing based on the Confirmed Persian Orthography Grammar

نویسندگان English

Masood Ghayoomi 1
Fatemeh Mohammadi 2
Ali Jahan 3
1 Faculty of Linguistics, Institute for Humanities and Cultural Studies
2 Faculty of Linguistics, Institute for Humanities and Cultural Studies
3 Department of Computer Engineering, Amirkabir University of Technology
چکیده English

The rise of digital communication tools, such as social networks and messaging platforms, has led to an expansion of diverse writing styles in Persian, including colloquial and non-standard (broken) forms. Converting such texts into standard Persian writing, especially based on the latest orthographic guidelines of the Academy of Persian Language and Literature, requires advanced natural language processing tools. This study compares the performance of five large language models, namely ChatGPT, Gemini, Perplexity, Claude, and DeepSeek, by automatically converting colloquial Persian into standard written form. The dataset utilized in this study was compiled and corrected from two major corpora. A sub-corpus has been created through random sampling and resulted in 1,025 sentences and 11,939 tokens. Outputs from the models were compared to gold-standard annotations, focusing on both positive correction (e.g., correct use of half-spaces, Ezafe, hamza, and standardizing informal forms) and negative errors (e.g., word replacement, deletion of clitics, and stylistic shifts). Findings indicate that the language model in Claude achieved the highest alignment with the gold-standard (51.39%) at word and sentence level, while Perplexity performed the worst. The results highlight that, despite their strengths, large language models still face challenges in accurately standardizing Persian text in line with formal orthographic conventions.

کلیدواژه‌ها English

Colloquial Persian
non-standard (broken) writing
standardization
large language models
Persian orthography

مقالات آماده انتشار، پذیرفته شده
انتشار آنلاین از 18 مرداد 1405