Quantificazione del ROI dell'ingegneria del caos

Attualmente, pochissime risorse pubblicate forniscono metodologie complete o dati reali per quantificare il ritorno sull'investimento (ROI) a lungo termine per l'ingegneria del caos.

Nel paper The Business Case for Chaos Engineering, Netflix offre una valida equazione per il calcolo del ROI dell'ingegneria del caos. Questa equazione fornisce un punto di partenza per le organizzazioni che intraprendono il loro percorso di ingegneria del caos.

L'equazione richiede una stima accurata dei costi di quanto segue:

I danni causati dal caos si riferiscono all'impatto negativo o alla perturbazione causati dall'introduzione deliberata di guasti o condizioni turbolente in un sistema nell'ambito di esperimenti di ingegneria del caos. L'equazione richiede la stima dei costi delle interruzioni evitabili e non evitabili, dei costi di implementazione dei programmi di ingegneria del caos e dei danni causati dal caos.

Determinare con certezza quali problemi avrebbero potuto essere evitati con un programma di ingegneria del caos è un compito difficile. Richiede un'analisi ipotetica che preveda l'analisi delle cause profonde dei problemi e la speculazione su come gli esperimenti di ingegneria del caos avrebbero potuto contribuire a identificarli. Questa analisi è impegnativa perché i sistemi moderni sono estremamente complessi, con numerose interdipendenze e interazioni tra vari componenti, servizi e librerie di terze parti. Inoltre, i guasti nei sistemi sono spesso non deterministici e le condizioni che causano i guasti possono essere difficili da comprendere appieno con il senno di poi.

Sebbene l'approccio suggerito da Netflix presenti alcune limitazioni, rappresenta una buona base per le organizzazioni che iniziano a esplorare l'ingegneria del caos. L'equazione può aiutarvi a stimare i costi e i potenziali benefici, aiutandovi a prendere decisioni sull'implementazione di un programma di questo tipo. Tuttavia, man mano che le organizzazioni progrediscono ulteriormente nel loro percorso di ingegneria del caos, è importante ampliare la valutazione del ROI per incorporare una prospettiva più olistica.

Questo approccio olistico non solo coglierà i vantaggi diretti della riduzione delle interruzioni e dei costi di progettazione, ma evidenzierà anche gli effetti trasformativi a lungo termine sulla resilienza complessiva dell'organizzazione. Racchiude i vantaggi combinati e gli effetti organizzativi più ampi dell'ingegneria del caos per fornire una rappresentazione più accurata del vero valore e dell'impatto dell'ingegneria del caos.

Un approccio olistico alla quantificazione del ROI

Una valutazione olistica del ROI deve tenere conto non solo delle misure quantitative ma anche dei fattori qualitativi. L'approccio olistico richiede dati reali provenienti da organizzazioni che praticano l'ingegneria del caos su larga scala per periodi di tempo più lunghi. Puoi utilizzare i dati a partire dai progetti e dagli obiettivi di base attraverso qualsiasi dato sul ROI con approccio equazionale che hai raccolto.

Le misure quantitative si concentrano su quantità o frequenze. Le misurazioni sono oggettive e possono essere analizzate statisticamente. Gli esempi includono sondaggi, esperimenti e analisi dei dati. Le misure quantitative possono includere quanto segue:

Il monitoraggio delle misure quantitative può dimostrare i vantaggi operativi diretti dell'ingegneria del caos.

Le misure qualitative sono descrittive e si concentrano sulla comprensione di esperienze e opinioni. Spesso sono soggettive e non possono essere facilmente misurate numericamente. Per quanto riguarda l'ingegneria del caos, le misure qualitative tengono conto degli impatti organizzativi più ampi. Le misure qualitative possono includere quanto segue:

Considerando sia gli impatti finanziari quantitativi che i vantaggi organizzativi qualitativi, è possibile prendere decisioni più informate sui continui investimenti nell'ingegneria del caos, promuovendo al contempo una cultura della resilienza.

Per ulteriori informazioni su queste misure e sul relativo quadro di classificazione degli incidenti, vedere l'Appendice B e l'Appendice C.