Autodesk realizza una soluzione di analisi unificata per i log su AWS per ottenere nuove informazioni dettagliate

Per migliorare le sue capacità di analisi dei registri e rilevare le cause scatenanti degli errori, Autodesk ha deciso di sviluppare una soluzione unificata basata sul cloud per l’analisi dei dati di registro sfruttando Amazon Web Services (AWS). "Avevamo già utilizzato i servizi AWS per diverse funzioni interne qui ad Autodesk e volevamo espandere il nostro utilizzo sviluppando un sistema di registrazione unificato", afferma Li.

Amazon Data Firehose funge da livello di trasporto dei dati per i log e il Servizio gestito da Amazon per Apache Flink viene utilizzato per ottenere parametri di monitoraggio in tempo reale quali tempo di risposta e picchi nei tassi di errore. Una volta immessi i dati di log in questa pipeline, questi vengono inviati ad Amazon CloudWatch per ottenere ulteriori parametri che vengono visualizzati in pannelli di controllo standardizzati in tutta l’azienda. Questi parametri includono un sommario generale sul traffico, con tempi di risposta, errori e richieste totali; parametri delle API, quali percentuali dei tempi di risposta, numero di richieste effettuate con successo e numero di richieste non riuscite; CPU, rete e dischi per ciascuna CPU; e i parametri di Amazon CloudWatch per i servizi AWS.

Allo stesso tempo, Amazon Data Firehose fornisce i dati di log al servizio OpenSearch di Amazon, un servizio gestito che semplifica l'esecuzione di analisi interattive dei log, il monitoraggio delle applicazioni in tempo reale, la ricerca web e altro ancora. "Il [Servizio OpenSearch di Amazon] consente lo svolgimento di attività di analisi dei dati e aiuta a trovare e risolvere i problemi delle applicazioni più velocemente", afferma Li. Amazon Athena permette di effettuare query analitiche più approfondite e interattive e AWS X-Ray offre strumenti per l'analisi dei dati di tracciamento. Inoltre, lo strumento di visualizzazione open source di Kibana, integrato con Amazon OpenSearch Service, offre pannelli di controllo per monitorare i dati in tempo reale.

La soluzione di registrazione unificata basata su Amazon OpenSearch Service offre una migliore visibilità nei registri di dati più rapidamente. "[Amazon OpenSearch Service] consente un modo più coerente per raccogliere e misurare i dati di registrazione in tempo reale", afferma Li. “Questo servizio offre analisi di dati approfondite che ci permettono di delineare meglio le correlazioni tra gli eventi di registro, così da poter risolvere i problemi dell’applicazione più rapidamente”. Per esempio, i team di Autodesk hanno creato dashboard che identificano tendenze e pattern per le anomalie, così da poter correlare rapidamente le tracce dettagliate dei log a ciascun evento ed eseguire analisi più accurate.

Nello specifico, Autodesk è ora in grado di eseguire indagini più approfondite utilizzando i dati degli strumenti per rilevare e risolvere errori e migliorare il tempo medio generale di ripristino. L’azienda può rilevare anomalie nell’utilizzo delle API come tassi di errore e picchi nei tempi di risposta. Le notifiche di Amazon CloudWatch riducono ulteriormente il tempo medio necessario per rilevare gli errori e far intervenire i team di risposta.

L’azienda sta anche cercando di ottenere informazioni ancora più dettagliate tramite i dati ottenuti dalle analisi per migliorare i suoi software e il suo servizio clienti. “Infine, stiamo migliorando i nostri prodotti software e stiamo offrendo un servizio migliore ai nostri clienti, grazie alla visibilità in tempo reale che otteniamo sui dati di log”, afferma Li.

Lavorando con AWS, Autodesk sta costruendo capacità di analisi di registro altamente scalabili che riducono il costo generale della soluzione.

Scaricando il peso della gestione della sua architettura e dei cluster di Elasticsearch ad AWS, Autodesk è stata in grado di costruire facilmente una soluzione di log unificata. “Sebbene il nostro team IT sia composto solo da poche persone, possiamo sviluppare e mantenere una soluzione potente di registrazione lasciando che sia AWS a prendersi cura della tecnologia necessaria”, ci rivela Li. “Come risultato, non dobbiamo più impiegare le nostre risorse per gestire l’infrastruttura sottostante e possiamo scalare la soluzione su richiesta per supportare il crescente volume di dati di log”.

Autodesk dispone ora di una soluzione che fornisce una visualizzazione unificata dei dati di registro quali prestazioni e tempi di inattività dell’applicazione.

“Non disponiamo più di silo di dati per via dei diversi team che utilizzano le soluzioni di log”, afferma Li. “Tutti possono accedere allo stesso pannello di controllo con la soluzione AWS, il che significa che tutti possono ottenere insight aggiornati sullo stato generale della piattaforma. E, utilizzando i pannelli di controllo di Kibana, abbiamo creato un vocabolario comune che tutti noi possiamo utilizzare per diagnosticare problemi. Nel complesso, in quanto azienda, possiamo assumere un approccio più unificato per rilevare e risolvere problemi”.