Session

Ingénierie décisionnelle sur les lacs de données avec dbt

Au cours des dernières années, un nouveau rôle est apparu dans l'équipe décisionnelle moderne: l'ingénieur analytique. Sur les plates-formes qui cherchent à transposer dans le cloud les workflows intuitifs du data warehouse - alimentées par des moteurs tels que Dremio, Spark ou Presto - les outils d'ingénierie analytique, incluant dbt, sont un choix naturel.
En écrivant en SQL toute la logique de transformation, les règles métier critiques sont accessibles au plus grand nombre; En générant dynamiquement le SQL avec Jinja, le stockant dans un gestionnaire de version, l'augmentant de tests et de documentation automatisés et en générant des métadonnées précieuses, le workflow décisionnel acquiert alors la rigueur des principes du génie logiciel.

Fabrice Etanchaud

Lead dev, Maif-vie

Niort, France

View Speaker Profile