Phenquestions
Database Elasticsearch
Elasticsearch è uno dei database NoSQL più popolari utilizzato per archiviare e cercare dati basati su testo. Si basa sulla tecnologia di indicizzazione Lucene e consente il recupero della ricerca in millisecondi in base ai dati indicizzati.
Basato sul sito web di Elasticsearch, ecco la definizione:
Elasticsearch è un motore di ricerca e analisi RESTful distribuito open source in grado di risolvere un numero crescente di casi d'uso.
Quelle erano alcune parole di alto livello su Elasticsearch. Cerchiamo di capire i concetti in dettaglio qui.
- distribuito: Elasticsearch divide i dati che contiene in più nodi e utilizza padrone-schiavo algoritmo internamente
- Riposante: Elasticsearch supporta le query di database tramite API REST. Ciò significa che possiamo utilizzare semplici chiamate HTTP e utilizzare metodi HTTP come GET, POST, PUT, DELETE ecc. per accedere ai dati.
- Motore di ricerca e analisi: ES supporta query altamente analitiche da eseguire nel sistema che possono consistere in query aggregate e più tipi, come query strutturate, non strutturate e geografiche.
- Scalabile orizzontalmente: questo tipo di ridimensionamento si riferisce all'aggiunta di più macchine a un cluster esistente. Ciò significa che ES è in grado di accettare più nodi nel suo cluster e non fornire tempi di inattività per gli aggiornamenti richiesti al sistema. Guarda l'immagine qui sotto per capire i concetti di ridimensionamento:
Ridimensionamento verticale e orizzontale
Iniziare con Elasticsearch Database
Per iniziare a utilizzare Elasticsearch, deve essere installato sulla macchina. Per fare ciò, leggi Installa ElasticSearch su Ubuntu.
Assicurati di avere un'installazione di ElasticSearch attiva se vuoi provare gli esempi che presenteremo più avanti nella lezione.
Elasticsearch: concetti e componenti
In questa sezione vedremo quali componenti e concetti si trovano nel cuore di Elasticsearch. La comprensione di questi concetti è importante per capire come funziona ES:
- Grappolo: Un cluster è una raccolta di macchine server (nodi) che contiene i dati. I dati sono divisi tra più nodi in modo che possano essere replicati e il Single Point of Failure (SPoF) non si verifica con il server ES. Il nome predefinito del cluster è ricerca elastica. Ogni nodo in un cluster si connette al cluster con un URL e il nome del cluster quindi è importante mantenere questo nome distinto e chiaro.
- Nodo: una macchina Nodo fa parte di un server ed è definita come una singola macchina. Memorizza i dati e fornisce funzionalità di indicizzazione e ricerca, insieme ad altri nodi al cluster.
Grazie al concetto di ridimensionamento orizzontale, possiamo aggiungere virtualmente un numero infinito di nodi in un cluster ES per dargli molta più forza e capacità di indicizzazione.
- Indice: Un indice è una raccolta di documenti con caratteristiche in qualche modo simili. Un indice è molto simile a un database in un ambiente basato su SQL.
- genere: viene utilizzato un tipo per separare i dati tra lo stesso indice. Ad esempio, il database/indice clienti può avere più tipi, come utente, tipo_pagamento ecc.
Nota che i tipi sono deprecati da ES v6.0.0 in poi. Leggi qui perché è stato fatto.
- Documento: Un documento è il livello più basso di unità che rappresenta i dati. Immaginalo come un oggetto JSON che contiene i tuoi dati. È possibile indicizzare quanti più documenti all'interno di un Indice.
Tipi di ricerca in Elasticsearch
Elasticsearch è noto per le sue capacità di ricerca quasi in tempo reale e la flessibilità che fornisce con il tipo di dati che vengono indicizzati e ricercati. Iniziamo a studiare come utilizzare la ricerca con vari tipi di dati.
- Ricerca strutturata: questo tipo di ricerca viene eseguito su dati che hanno un formato predefinito come date, orari e numeri. Con il formato predefinito arriva la flessibilità di eseguire operazioni comuni come confrontare i valori in un intervallo di date. interessante, anche i dati testuali possono essere strutturati. Questo può accadere quando un campo ha un numero fisso di valori. Ad esempio, il nome dei database può essere, MySQL, MongoDB, Elasticsearch, Neo4J ecc. Con la ricerca strutturata, la risposta alle query che eseguiamo è sì o no.
- Ricerca full-text: questo tipo di ricerca dipende da due fattori importanti, Rilevanza e Analisi. Con Rilevanza, determiniamo quanto bene alcuni dati corrispondono alla query definendo un punteggio per i documenti risultanti. Questo punteggio è fornito dalla stessa ES. Analisi si riferisce alla suddivisione del testo in token normalizzati per creare un indice invertito.
- Ricerca multicampo: con il numero di query analitiche in costante aumento sui dati archiviati in ES, di solito non affrontiamo solo semplici query di corrispondenza. I requisiti sono cresciuti per eseguire query che si estendono su più campi e hanno un elenco ordinato con punteggio di dati restituiti dal database stesso. In questo modo, i dati possono essere presentati all'utente finale in modo molto più efficiente.
- Proimity Matching: le query oggi sono molto più che identificare se alcuni dati testuali contengono un'altra stringa o meno. Si tratta di stabilire la relazione tra i dati in modo che possano essere valutati e abbinati al contesto in cui i dati vengono abbinati. Per esempio:
- Palla colpita John
- John ha colpito la palla
- John ha comprato una nuova palla che è stata colpita dal giardino di Jaen
Una query di corrispondenza troverà tutti e tre i documenti quando viene cercata Colpo di palla. Una ricerca di prossimità può dirci fino a che punto queste due parole appaiono nella stessa riga o paragrafo a causa della quale si sono abbinate.
- Corrispondenza parziale: spesso è necessario eseguire query di corrispondenza parziale. Partial Matching ci consente di eseguire query che corrispondono parzialmente. Per visualizzarlo, diamo un'occhiata a query basate su SQL simili:
Query SQL: corrispondenza parziale
DOVE nome LIKE "%john%"
E nome COME "%red%"
E nome COME "%giardino%"In alcune occasioni, abbiamo solo bisogno di eseguire query a corrispondenza parziale anche quando possono essere considerate come tecniche di forza bruta.
Integrazione con Kibana
Quando si tratta di un motore di analisi, di solito è necessario eseguire query di analisi in un dominio Business-Intelligence (BI). Quando si tratta di analisti aziendali o analisti di dati, non sarebbe corretto presumere che le persone conoscano un linguaggio di programmazione quando vogliono visualizzare i dati presenti in ES Cluster. Questo problema è risolto da Kibana. Kibana offre così tanti vantaggi alla BI che le persone possono effettivamente visualizzare i dati con un'eccellente dashboard personalizzabile e vedere i dati in modo poco attraente. Diamo un'occhiata ad alcuni dei suoi vantaggi qui.
Grafici interattivi
Al centro di Kibana ci sono grafici interattivi come questi:
Kibana è supportato con vari tipi di grafici come grafici a torta, sunburst, istogrammi e molto altro che utilizza le capacità di aggregazione complete di ES.
Supporto per la mappatura
Kibana supporta anche la geo-aggregazione completa che ci consente di geo-mappare i nostri dati. Non è fantastico??!
Aggregazioni e filtri predefiniti
Con le aggregazioni e i filtri predefiniti, è possibile letteralmente frammentare, rilasciare ed eseguire query altamente ottimizzate all'interno della dashboard di Kibana. Con pochi clic è possibile eseguire query aggregate e presentare risultati sotto forma di grafici interattivi.
Facile distribuzione dei dashboard
Con Kibana, è anche molto facile condividere i dashboard con un pubblico molto più ampio senza apportare modifiche al dashboard con l'aiuto della modalità Solo dashboard. Possiamo facilmente inserire dashboard nella nostra wiki interna o pagine web web.
Immagini delle caratteristiche prese dalla pagina del prodotto Kibana.
Utilizzo di Elasticsearch
Per visualizzare i dettagli dell'istanza e le informazioni sul cluster, eseguire il comando seguente:
Ora, possiamo provare a inserire alcuni dati in ES utilizzando il seguente comando:
Inserimento dati
arricciare \-X POST 'http://localhost:9200/linuxhint/hello/1' \
-H 'Tipo di contenuto: application /json' \
-d ' "nome" : "LinuxHint" '\
Ecco cosa otteniamo indietro con questo comando:
Proviamo ora a recuperare i dati:
Ottenere dati
curl -X GET 'http://localhost:9200/linuxhint/hello/1'Quando eseguiamo questo comando, otteniamo il seguente output:
Conclusione
In questa lezione, abbiamo esaminato come possiamo iniziare a utilizzare ElasticSearch, che è un eccellente motore di analisi e fornisce un eccellente supporto anche per la ricerca in testo libero quasi in tempo reale.
