Viewer Tokenscript

مصمم لمهندسي Tokenscript ومراجعي الأمن، يحلل هذا الأداة مصادر Tokenscript لاستخراج تعريفات الرموز، القوانين والمرجعيات. يقوم بالتقطيع اللغوي lexical tokenize، وتحليل نحو Tokenscript وبناء تمثيل داخلي متاح للرموز وعلاقاتها. الناتج يتضمن خريطة الرموز، أخطاء البناء مع المواقع، ومقاييس الأداء مناسبة للأتمتة. مبدئيًا، يقسم النص الخام إلى رموز، يتحقق من القيود البنيوية ويعلّق التعريفات بأنواع واعتماديات. يتيح فحصًا سريعًا للنصوص الصغيرة وتفحصًا عميقًا للوحدات الأكبر. يميز بين الرموز الإلزامية والتوسعات الاختيارية ويشير إلى التركيبات الغامضة أو التعريفات المتضاربة. حالات الاستخدام تشمل فحوص ما قبل الالتزام، التحقق من CI وتقارير التدقيق لتطبيقات قائمة على الرموز. القيمة الفعلية تأتي من مخرجات منسقة وقابلة للآلة يمكن دمجها في خطوط أدوات، مع تحليل لهجة dialect-aware للأنماط Tokenscript الشائعة. الميزات الأساسية تشمل إدخال script_text، التحقق من البناء، خريطة الرموز وتصدير JSON جاهز. وضعيات التحليل العميق توفر سياقًا أغنى مثل مخططات المرجع وعمق التعشيش. يستهدف الأداة المطورين والمراجعين ومتكاملي المنصات الذين يحتاجون إلى تحقق نحوي حتمي وتحديد أخطاء واضح دون تشغيل وقت التشغيل. يؤكد على قابلية التكرار، والتعامل مع نصوص كبيرة عبر تقسيم المعالجة، والامتثال لـ UTF-8 لضمان الاتساق بين اللغات. يمكن استخدامه بشكل مستقل أو كجزء من سلسلة تحقق أوسع لتحسين الدقة والصيانة للتطبيقات المعتمدة على الرموز.