scheming : Ajout de "Mon Récap"

[rsebille]

Carte Notion : https://www.notion.so/gip-inclusion/dbt-ajouter-une-nouvelle-bdd-e77757275abc4b9b924ea759b04df453?pvs=4

J'ai tester le seed et un modèle tout bête et ça semble faire ce qu'on souhaite mais hésite à jouer avec la PR en poussant un peu le truc si tu as des cas d'utilisation concret, qu'on se lance pas dans un truc si en fait c'est pas bon à la fin :D.

Pourquoi ?

dbt sais gérer plusieurs base de donnée (avec les profils) mais elles doivent être présentes sur le même serveur (host, user, password, etc), les add-on DB de Clever font grosso modo 1 DB = 1 add-on/serveur donc impossible d'utiliser les profils.

Une piste alternative était d'utiliser un namespace mais cela complexifierais la gestion des droits au niveau de Metabase car il faudrait les donner pour chaque table une à une, ce qui va devenir très vite casse-pied et donc ne pas être fait.

L'utilisation des schema répond a priori à toute nos contraintes :

• Ils sont par DB, nous pouvons donc en créer autant que nous souhaitons dans les add-on Clever.
• Metabase permet de filtrer par schema lors de l'ajout d'une "Databases", ce qui nous permet ensuite de juste donner le droit sur cette "Database" à l'équipe qui va bien.
• Permet aussi de pouvoir faire des croisements de donnée entre ces silos logique pour les data.

Checks

• J'ai lancé le modèle ou seed sur un dump local (si pertinent)
• J'ai documenté ce modèle voire certains de ses champs (usage métier, tableau de bord, etc)

[rsebille]

@YannickPassa Aucune urgence mais petit ping si jamais c'est passé aux oubliettes ;)

[YannickPassa]

Trop bien ! Donc on est d'accord que ça va tout me pousser dans un schéma mon recap sur la bdd du c2 c ça ?
Et est ce que tu peux me laisser merge le tout ? Je vais devoir refaire le TB monrecap donc j'aimerais pousser ça quand j'ai le temps d'y faire :)

[rsebille]

Trop bien ! Donc on est d'accord que ça va tout me pousser dans un schéma mon recap sur la bdd du c2 c ça ?

Oui, c'est ce que fera le DAG dorénavant.
Et coté DBT, c'est le +schema dans la conf qui permet d'aller lire dans celui-ci plutôt que public en fonction du dossier, information à garder en tête pour les prochains ajout ;).

Et est ce que tu peux me laisser merge le tout ? Je vais devoir refaire le TB monrecap donc j'aimerais pousser ça quand j'ai le temps d'y faire :)

Yep, hésites pas à tester un modèle en local avant car j'ai fait que du synthétique donc ça se trouve ça passe pas l'épreuve du feu ;).