عد رموز دقيق في الوقت الفعلي
بناءً على أدوات التقسيم الرسمية للنماذج (مثل tiktoken)، تقوم حاسبة الرموز المميزة للذكاء الاصطناعي الخاصة بنا بتقسيم دقيق على مستوى الأحرف. على عكس التقديرات التقريبية التي تقسم ببساطة عدد الأحرف، فإنها تعيد إنتاج التسلسل الدقيق للرموز الذي تراه النموذج.

