Validation Pipeline pour l'IR (et budget)

Objectifs: Valider les résultats de la Pipeline Survey Manager 2022

Travail en commun de @sandcha , @benoit-cty et @sasha

Validation du total

Objectif: vérifier que l'on obtient bien les bons totaux

• Quelle marge d'erreur est acceptable avant recalage ? (On vise 10%) Attention à la différence entre le brut et le net
• Faire une comparaison automatique en utilisant la librairie d'agrégats? (déjà fait à 85%)

Validation de la forme des distributions

Objectif: vérifier que la distribution des variables (à commencer par le RFR) est cohérente avec la réalité (en l'occurence le dernier millésime de POTE). Pour cela on veut:

• Plotter les vrais centiles de notre base sur ceux de POTE 2020 : en somme totale par centile, mais aussi en moyenne par centile
• Calculer les écarts par centile et le min, le max, et la moyenne des écarts (une donnée que l'on puisse comparer d'une année sur l'autre)
• Avoir des données sur le premier quantile (i.e. le nombre de gens à zéro)

Validation d'une réforme ?

S'il on a des données sur des réformes, on peut tenter de les simuler et observer l'écart éventuel que l'on aurait dans notre simulateur budget

MÉTRIQUES FINALES

Objectif: Pouvoir comparer d'une année à l'autre

• Erreur totale = écart à l'agrégat
• Erreur moyenne = moyenne des erreurs de chaque quantile
• Erreur max = erreur maximale pour les quantiles
• Erreur min = erreur minimale pour les quantiles