L'esecuzione elastica dei workflow: i job pesanti scalano sui nodi, separati da chi li progetta.
Negli Hub, l'esecuzione è separata dalla progettazione: gli executor sono i motori che macinano i workflow — dimensionabili, dedicabili per team o carico, scalabili sui nodi Kubernetes. Il modello dati da 30 milioni di righe gira sul suo executor grosso; il report leggero non fa la coda dietro di lui.
I workflow misurati (RAM, durata): le taglie di executor tarate sui fatti.
Il month-end del controlling non aspetta il data scientist: le code con le precedenze.
I pesanti di notte, gli interattivi di giorno: il calendario che sfrutta il ferro.
I nodi K8s osservati: la crescita degli executor pianificata coi trend.
Gli executor eseguono i workflow sul Hub: girano su Kubernetes con execution context dimensionati (CPU/RAM per team o per caso d'uso), scalano orizzontalmente per la coda, si dedicano ai carichi (l'ETL notturno pesante non tocca le data app interattive), il colocation coi dati taglia i trasferimenti; il dimensionamento è mestiere: pochi executor grassi o molti magri, dipende dai flussi — la coda si monitora e si tara.
Le trasformazioni pesanti, senza vittime collaterali.
La potenza extra quando il calendario stringe.
Ogni squadra il suo motore, la piattaforma in pace.