Viewer Tokenscript

Dirigido a ingenieros de Tokenscript y revisores de seguridad, esta herramienta analiza fuentes Tokenscript para extraer definiciones de tokens, reglas y referencias. Realiza tokenización léxica, analiza la gramática Tokenscript y construye una representación interna accesible de tokens y sus relaciones. La salida incluye un mapa de tokens, errores de sintaxis con ubicaciones y métricas de rendimiento adecuadas para automatización. Conceptualmente, separa el texto en tokens, valida restricciones estructurales y anota definiciones con tipos y dependencias. Permite comprobaciones rápidas para scripts pequeños y inspecciones profundas para módulos grandes. La herramienta diferencia entre tokens obligatorios y extensiones opcionales y puede señalar construcciones ambiguas o definiciones en conflicto. Casos de uso: comprobaciones previas al commit, validaciones CI e informes de auditoría para aplicaciones basadas en tokens. El valor se origina en salidas estructuradas y legibles por máquina que se integran en pipelines de herramientas, además de parsing dialect-aware para variantes Tokenscript comunes. Funciones clave: entrada script_text, validación de sintaxis, mapeo de tokens y JSON exportable; modos de análisis profundo ofrecen contexto adicional como grafos de referencia y profundidad de anidamiento. El objetivo es desarrolladores, auditores e integradores de plataformas que requieren validación gramatical determinista y localización clara de errores sin ejecución en tiempo real. Enfatiza la reproducibilidad, manejo de scripts grandes mediante procesamiento por bloques y conformidad UTF-8 para consistencia entre localizaciones. Útil por separado o como parte de una cadena de validación más amplia para mejorar exactitud y mantenibilidad de aplicaciones basadas en tokens.