Molti di voi conoscono già i vantaggi offerti dalla pila ELK e il motivo per cui viene utilizzata da così tanti team. Ha un'importanza critica nella diagnosi e nella risoluzione di bug e problemi di produzione, ma risulta ancora più utile per le informazioni dettagliate sui clienti. Inoltre, ottenere parametri sull'integrità e l'utilizzo dei sistemi fornisce al tuo team un solido vantaggio competitivo. Mentre altre aziende si sforzano di individuare i propri punti deboli, il tuo team può esaminare i dati, adattarli e distribuire solo quelli utili al sistema.
I pensieri dei manager sono spesso occupati dalla fornitura di una soluzione di registrazione valida per i propri tecnici e team DevOps. Tuttavia, i manager sanno anche che fornire tale soluzione ha un costo. Oltre al costo dell'infrastruttura, è necessario affrontare aggiornamenti, patch e implementazioni. Tutto questo richiede inoltre tempo, sforzi e competenze.
Come fornire una soluzione di registrazione elegante che sia anche facile da gestire e supportare? Esiste un modo per sfruttare tutti i vantaggi della pila ELK senza grattacapi?
Perché la registrazione è così importante?
Con la crescita dei dati automatici, la registrazione diventa sempre più importante. È fondamentale per la diagnosi e la risoluzione dei problemi e l'ottenimento di prestazioni ottimali delle applicazioni. Inoltre, numerosi strumenti ti permettono di ottenere parametri critici per il business e dati provenienti dai registri. La registrazione non è più finalizzata all'individuazione dei problemi, ma include il monitoraggio dei sistemi.
Non ci sono dubbi: la registrazione è fondamentale. Ora, parliamo di come è possibile implementarla. Un metodo popolare al giorno d'oggi è la pila ELK. Puoi scegliere di implementare e gestire tu stesso la pila ELK con le versioni con licenza Apache 2.0 di Elasticsearch e Kibana (fino alla versione 7.10.2) o di gestire autonomamente un'alternativa open source alla pila ELK con OpenSearch, OpenSearch Dashboards e Logstash
Perché scegliere la pila ELK?
Ricordiamo brevemente che ELK è uno stack che costituisce parte integrante di Elasticsearch, Logstash e Kibana. Ricapitoliamo rapidamente ognuno di questi strumenti.
Elasticsearch: un motore di ricerca e analisi utilizzato per le ricerche di testo full-text e l'analisi di registri e parametri.
Logstash: uno strumento open-source in grado di importare e trasformare registri ed eventi.
Kibana: uno strumento di visualizzazione ed esplorazione dei dati per la revisione di registri ed eventi.
Quando sono utilizzati insieme, i componenti della pila ELK offrono la possibilità di aggregare registri da tutti i tuoi sistemi. Non si limitano ad analizzarli per verificare l'assenza di problemi, ma monitorano l'utilizzo del sistema e individuano opportunità di miglioramento. La funzionalità di analisi e visualizzazione dei dati fornita da ELK è insuperabile.
Perché dovresti utilizzare un servizio gestito per ELK? Hai un team valido. Non vuoi rimanere bloccato in un singolo provider di hosting e desideri la flessibilità necessaria per configurare tutti gli elementi per il tuo caso d'uso particolare. Perché allora non gestisci ELK da te?
La risposta si riassume in poche parole: è difficile.
Dov'è la difficoltà nella gestione della propria pila ELK?
Esaminiamo alcuni dei motivi per cui gestire la pila ELK può essere un'operazione che è preferibile non gestire da soli.
L'installazione è raramente semplice
Quando si pensa all'integrazione dei sistemi, non dimenticare che l'installazione non è sempre un passaggio agevole. Qual è la configurazione migliore? In quale punto si gestiscono i dati riservati? Quanti componenti hardware sono necessari?
Una ricerca rapida in Internet consente di reperire numerosi articoli sull'installazione di ELK. Una semplice occhiata ti renderà evidente che si tratta di un'operazione molto più complessa di un'elementare implementazione. I prerequisiti sono infatti molteplici, sia che utilizzi l'installazione di base, dotata di una configurazione pronta all'uso per tutti gli elementi, sia che impieghi del tempo a ricercare tutte le opzioni di configurazione. Quali sono i limiti di importazione dei dati? Qual è il tuo piano di conservazione? Perché è importante?
Ora immagina di ripetere la configurazione più volte, per ciascun ambiente disponibile.
Anche se utilizzi lo scripting automatico per tutti gli elementi, sarà necessario spendere del tempo prezioso per ottenere una configurazione completa e un sistema che funzioni senza intoppi. È tutto tempo che sottrarrai all'offerta di valore per i tuoi clienti. Con i servizi gestiti come Amazon OpenSearch Service, l'implementazione di una pila ELK è un'operazione semplice e ripetibile.
Ed è raramente rapida
La maggior parte delle aziende cerca di commercializzare rapidamente i propri prodotti. Questa operazione risulta tuttavia impossibile quando si è costretti a trascorrere settimane o persino mesi per portare la pila e l'infrastruttura allo stato di pre-produzione.
Quale processo hai attualmente in vigore per trasferire le applicazioni all'ambiente di produzione? Quali operazioni di test, verifica e rifinitura adotti per verificarne l'idoneità? Se l'hardware di cui disponi deve essere configurato in maniera ottimale per operazioni intensive di scrittura, l'ottimizzazione viene eseguita prima dell'entrata in produzione? Qual è il piano per gli aggiornamenti?
Se gestisci la tua pila ELK in modo autonomo, queste operazioni verranno eseguite con un'infrastruttura e con applicazioni con cui non hai familiarità. Servizi come Amazon OpenSearch Service possono aiutarti a ridurre in modo significativo i costi dell'infrastruttura, dell'implementazione e della manutenzione periodica.
La resilienza richiede molto tempo
Quando gestisci la pila ELK, inizi presto a preoccuparti del problema della resilienza. Che cosa devi fare quando uno dei nodi Elasticsearch si interrompe oppure quando le prestazioni di Kibana lo rendono inutilizzabile?
Inoltre, potresti avere problemi anche se hai configurato correttamente l'infrastruttura nei passaggi precedenti. Logstash ed Elasticsearch utilizzano una grande quantità di memoria. Se hai provato a risparmiare tempo e denaro installandoli sullo stesso componente hardware di capacità ridotta, finiranno per sovrapporsi. E non abbiano nemmeno discusso di un piano di aggiornamento delle versioni o del monitoraggio e dell'installazione di patch per le questioni di sicurezza!
AWS può aiutarti ad affrontare questi problemi. Consideriamo ad esempio i nodi Elasticsearch. Se un nodo si interrompe, Amazon OpenSearch Service rileva questa condizione e lo sostituisce automaticamente. È una delle situazioni sulle quali non desideri certo perdere tempo.
In sostanza, è opportuno disporre di un team di grandi dimensioni, in quanto la gestione autonoma complica le cose. Se l'esecuzione di un cluster Elasticsearch non è fondamentale per la tua linea di business, puoi affidarne la gestione ad AWS. È sempre meglio pagare i tecnici per creare valore aziendale, piuttosto che per gestire la pila ELK.
Quali strumenti possono evitarti grattacapi nella gestione della pila ELK?
Se crei, esegui e supporti l'ELK, è importante ricordare che non supporti un solo strumento. In questo caso devi occuparti di ben tre strumenti. L'esecuzione in ambiente di produzione comporta ulteriori preoccupazioni. A quali altri elementi dovrai fornire supporto nel perseguire i tuoi obiettivi di gestione autonoma?
Ad esempio, per aggiungere resilienza, potresti utilizzare Kafka per la coda dei registri. In momenti di traffico elevato, perdere registri è sconsigliabile, poiché la pila ELK potrebbe non riuscire a tenere il passo. Il tuo sistema è attrezzato per ricorrere anche alla gestione Kafka? In alternativa, puoi utilizzare Redis per aiutarti nella gestione del carico nei momenti di picco. Un momento: non si tratta di un altro elemento da gestire? Come farai a estrarre i dati analitici che ti occorrono per fare in modo che il tuo team possa monitorare il sistema? Dovrai intervenire anche qui oppure dovrai installare e configurare un altro sistema in grado di fornirti il monitoraggio di cui hai bisogno?
Esiste un'alternativa. Puoi utilizzare uno strumento come Amazon Cloudwatch per aiutarti. Tale strumento interagisce con Kibana, creando un metodo di facile utilizzo per l'analisi dei registri.
Per ultimi, ma non in ordine di importanza, i servizi gestiti Elasticsearch come Amazon OpenSearch Service possono aiutarti anche nell'integrazione della sicurezza, grazie al supporto VPC, alla crittografia incorporata per i dati memorizzati e per quelli in transito e all'autenticazione degli utenti.
Le soluzioni gestite sono adatte a te?
Molte aziende decidono di ricorrere all'hosting autonomo. Tuttavia, non tutte prendono in considerazione la quantità di lavoro e le risorse e competenze tecniche necessarie per un'esecuzione ottimale. Inoltre, nessuno vuole impiegare il proprio tempo nel garantire il funzionamento corretto del sistema quando può dedicarlo alla fornitura di prodotti straordinari ai propri clienti.
Anche se pensi di ricorrere all'hosting autonomo, ti consigliamo di iniziare ricorrendo a servizi gestiti come Amazon OpenSearch Service per allestire in modo rapido il tuo sistema. È probabile che, una volta sperimentati, i servizi gestiti come Amazon OpenSearch Service ti permettano di dedicare il tuo tempo a elementi di importanza critica.
OpenSearch include alcuni codici Elasticsearch con licenza Apache di Elasticsearch B.V. e altri codici sorgente. Elasticsearch B.V. non è la fonte dell’altro codice sorgente. ELASTICSEARCH è un marchio registrato di Elasticsearch B.V.
Ulteriori informazioni sui prezzi di Amazon OpenSearch Service