Data Build Tool BigQuery

כלי זה מאפשר לצוותי נתונים לתכנן, לאמת ולייעל מודלי טרנספורמציה ב-BigQuery באמצעות זרימות עבודה בסגנון dbt. הוא ממיין טרנספורמציות על בסיס SQL, מגדיר תלות בין מודלים למקורות ולוכד בדיקות וקונפיגורציות פריסת Deployment. על ידי התמקדות_SPECIFICATION_, אימות ויצירת ארטיפקטים במקום ביצוע בזמן ריצה, הוא מסייע לצוותים לתכנן שינויים, לעקוב אחר מקורות הנתונים ולהפחית שגיאות. המשתמשים כוללים מהנדסי אנליטיקה, צוותי פלטפורמת נתונים ומפתחים BI, שזקוקים לצינורות חוזרים ובעלי תיעוד. הוא תומך בדיאלקטים הרגילים של BigQuery ומייצר ארטיפקטים מוכנים לפריסה המתאימים ל-CI/CD.
הלוגיקה המרכזית כוללת פתרון תלות, קומפילציה של מודלים, בדיקות סכמות וקונפיגורציות ממורכזות לסביבה. קלטים נדרשים כוללים הגדרות מודלים (שם, SQL, materialization), מקורות ובדיקות; תכונות מתקדמות אופציונליות כוללות אסטרטגיות אינקרמנטיות, מקרוס מותאמות EXPORT של lineage. הפלטים כוללים מודלים מובנים, תוצאות בדיקות וקונפיגורציות Deployment. הכלי מאמת קלטים: שמות שאינם ריקים, SQL תקין והגרפים תלות מלאים. הוא בודק קישורים סתומים, מקורות חסרים ותלויות מעגליות. הפלט מובנה ויציב, ומאפשר Builds שניתן לשכפל ושינויים שניתן לאתר בין סביבתיות.
בתהליך התכנון, האימות וההכנה לפריסת, מסייע לכלים לצוותים לספק מהר יותר עם פחות שגיאות ובעלות provenance ברורה לנתונים. הייחודיות טמונה בהיבט זרם עבודה בסגנון dbt המתואם ל-BigQuery, עם תיקוף טיפוסים חזק למודלים ולבדיקות ויצירה של artefacts שמותאמים לכלי פריסה ו-CI/CD.