تقرير التقييم · نوفمبر 2026
قِيس على صوت المكالمات الهاتفية، لا على العروض التوضيحية.
ثلاث مجموعات اختبار تركية عامة، و500 عنوان منطوق، و1,273 جملة للتركيب الصوتي، مع تقييم كل الأنظمة بالطريقة نفسها. كلما انخفض معدل خطأ الكلمات كان أفضل.
3.42%
WER على الكلام المقروء
مجموعة اختبار FLEURS التركية، 743 مقطعًا. الأدنى في المقارنة.
الشكل 2
1.68%
WER على العناوين المنطوقة
500 عنوان، 8 كيلوهرتز، مع تلميحات الأماكن.
الجدول 3
19.5×
أسرع من الزمن الحقيقي
ملفات عبر واجهة API لمنطقة تركيا، الوضع السريع.
الجدول 3
3.38%
معدل خطأ الكلمات في تحويل النص إلى كلام
1,273 جملة من المجموعة المفتوحة mihuai/turkish-tts-eval.
الشكل 3
FLEURS tr_tr test · 743 مقطعًا
mihu-umay-v1
openai/whisper-large-v3
turkmedstt/whisper-large-v3-turkish-general
balbal-v2-manas
openai/whisper-large-v3-turbo
mihuai/turkish-stt-66m-v2
balbal-v2
Qwen/Qwen3-ASR-1.7B
PatientDesk/Duyu-small
الشكل 2. معدل خطأ الكلمات بالنسبة المئوية، والأقل أفضل، اللغة التركية، قاعدة تقييم متوسطة (تُقبل صيغ الأرقام والتنسيقات المختلفة). يحتل mihu-umay-v1 المركز الأول من أصل 9 على الكلام المقروء. الأعمدة التي تتجاوز المحور مقطوعة ومعلَّمة بـ →.
وضوح الكلام المركَّب
mihuai/turkish-tts-evalالشكل 3. يقرأ كل نظام الجمل نفسها البالغ عددها 1,273 جملة من جمل مراكز الاتصال في مجموعة البيانات المفتوحة mihuai/turkish-tts-eval؛ ويفرّغ نظام تعرّف مستقل الصوت نصيًا. معدل خطأ الكلمات بالنسبة المئوية، وكلما انخفض كان الكلام أسهل فهمًا. سبعة أنظمة تركية لتحويل النص إلى كلام؛ وكل الرسوم والجداول موجودة في صفحة المقاييس المرجعية.
الجدول 2. طبيعية الصوت المركَّب نفسه. درجات جودة متوقَّعة، والأعلى أفضل؛ الأفضل في كل عمود بالخط العريض.
| النظام | UTMOSv2 | SCOREQ | DNSMOS Pro |
|---|---|---|---|
| mihu-ses-v1 | 3.31 | 4.10 | 3.64 |
| Antalia-2 Mini | 2.78 | 3.36 | 3.63 |
| Trendyol-TTS | 2.88 | 4.25 | 3.91 |
| EMA Lightning 1.1.2 | 2.68 | 3.54 | 3.25 |
| Anka TTS 0.1.6 | 2.66 | 3.55 | 3.93 |
| FreyaTTS-small | 2.45 | 2.57 | 3.18 |
يحقق mihu-ses-v1 أعلى درجة UTMOSv2 إجمالًا وفي جميع فئات الجمل الـ 13 في المجموعة. المتنبئات الثلاثة لا تتفق فيما بينها، ولا تغني عن اختبار استماع بشري.
مجموعتا اختبار تركيتان لتحويل النص إلى كلام
مركز الاتصال مقابل الكلام اليومي
مجموعتنا المرجعية لكلام مراكز الاتصال، مبنية على محادثات حقيقية مع العملاء: مبالغ، وأرقام حسابات وهويات، وعناوين، وعناوين بريد إلكتروني ومواقع ويب، وأسماء مهجّأة، وتنسيقات مختلطة. صعبة عن قصد.
مجموعة محادثة يومية: جمل قصيرة من 3 إلى 13 كلمة عن الحياة اليومية، وأسئلة وتعجبات، مع قليل من الأرقام أو الرموز. أسهل، لذا تسجّل كل الأنظمة معدلات أخطاء أقل هنا.
معدل خطأ الكلمات على freya-tr-eval، %
التقييم نفسه كما في الشكل 3. في مجموعة المحادثة تتقارب الأنظمة الرائدة بفارق جزء من نقطة مئوية؛ أما مجموعة مراكز الاتصال فهي التي تُظهر الفروق بين الأنظمة.
الشكل 4. تقيس مجموعة مراكز الاتصال ما يحتاج مركز الاتصال إلى قراءته بشكل صحيح؛ وتقيس المجموعة اليومية الكلام الحواري العادي. كلما انخفض معدل خطأ الكلمات كان أفضل.
الجدول 3. أرقام الخدمة الحية، منطقة تركيا، 3 نوفمبر 2026.
| القياس | الإعداد | النتيجة |
|---|---|---|
| سرعة تفريغ الملفات، 743 مقطعًا | الوضع السريع | 19.5× الزمن الحقيقي |
| سرعة تفريغ الملفات، 743 مقطعًا | الوضع العادي | 8.5× الزمن الحقيقي |
| نتائج فاشلة أو مفقودة أو فارغة | 743 مقطعًا | 0 |
| معدل خطأ الكلمات في العناوين، 500 عنوان، 8 كيلوهرتز | دون ← مع تلميحات الأماكن | 2.22 % ← 1.68 % |
| جمل العناوين الصحيحة بالكامل، 8 كيلوهرتز | دون ← مع تلميحات الأماكن | 92.6 % ← 97.2 % |
| الحي مسموع بشكل صحيح، 8 كيلوهرتز | دون ← مع تلميحات الأماكن | 95.6 % ← 98.2 % |
المنهجية. قاعدة تقييم متوسطة في كل القياسات. الهاتف: مجموعة اختبار هاتفية تركية عامة، استُخدمت للاختبار فقط. الإعلام: تُحتسب فقط مقاطع MediaSpeech الـ 502 المحجوبة عن تدريب mihu. السرعة مقيسة من طرف إلى طرف عبر واجهة API العامة، بما في ذلك الشبكة. صوت العناوين اصطناعي.
هل تريد أن يظهر نظامك في هذه الجداول؟
أرسل إلينا وصولًا إلى واجهة API أو النموذج، وسنشغّله على مجموعات الاختبار نفسها وبالتقييم نفسه، ونعرض عليك النتائج أولًا، ثم ننشرها هنا أيًّا كانت.