TFRecord Viewer

هذه الأداة تفكّك ملفات TFRecord الثنائية عن طريق تحليل كل سجل كـ TensorFlow Example وعرض أسماء الميزات، أنواعها وقيم العينة. تستهدف المهندسين في ML، علماء البيانات ومهندسي البيانات الذين يحتاجون رؤية سريعة وموثوقة للبيانات المسلسلة المستخدمة في التدريب أو التقييم أو نشر نموذج. تدعم تحققًا سريعًا من وجود الميزات وفحوصات قيمة أساسية.
مفاهيمياً، تقرأ الأداة السجلات بالتتابع، تفك تشفير الميزات وتبني تمثيلاً للمخطط. تتعرف على أنواع الميزات الشائعة (int64، float، bytes) ويمكنها استنتاج الأنواع عندما لا يوجد مخطط. تُظهر معاينة لكل سجل أيّ الانحرافات، الميزات الناقصة والقيم الشاذة، مما يتيح بوابات جودة مبكرة قبل المعالجة الثقيلة.
تأتي القيمة المضافة من تصدير النتائج المفككة وملخصات المخطط إلى JSON أو CSV، مما يسهل التحقق القابل لإعادة الإنتاج واختبارات خط الأنابيب. يساعد في اكتشاف التحيز، أو تسمية الميزات غير المتسقة، أو أنواع البيانات غير المتوقعة عبر مجموعات كبيرة من البيانات، مما يقلل وقت التصحيح ويدعم تنظيف القيَم القياسية المستهدفة.
الميزات الأساسية تشمل إدخال قائم على الملفات، التحقق الاختياري من المخطط، فك ترميز لكل سجل، مخطط مجمع، معاينات عيّنات وخيارات التصدير. يدعم عدة ملفات، اختيار السجلات ومعالجة دفعات مع حدود ذاكرة. هذه المجموعة مناسبة لمرحلة التحقق في تدفقات ML وللمراجعات المتعلقة بمصدر البيانات.
تتضمن القيود احتمال وجود غموض في المخطط لميزات مركبة معقدة وقدرات أداء عند العمل مع ملفات TFRecord كبيرة جداً. تركز الأداة على العرض للقراءة فقط ولا تغير البيانات. تفترض تنسيق TFRecord وممارسات ترميز TensorFlow وتصدر تحذيرات عند تعذر فك ترميز السجلات.