Kā importēt CSV failu programmā Kibana

Ka Importet Csv Failu Programma Kibana



“Komatatdalītās vērtības (CSV) ir viens no daudzpusīgākajiem un vienkāršākajiem datu formātiem. Tas ir viegls datu formāts, kas ļauj izstrādātājiem un lietojumprogrammām pārsūtīt un parsēt datus no viena avota uz citu.

CSV dati saglabā datus tabulas formātā, kur katra kolonna ir atdalīta ar komatu, un jaunai rindai tiek piešķirts jauns ieraksts. Tas padara to par ļoti labu izvēli tādu datu bāzu eksportēšanai kā SQL datu bāzes, Cassandra dati un citas.







Tāpēc nav pārsteigums, ka jūs saskarsities ar scenāriju, kurā jums datu bāzē ir jāimportē CSV fails.



Šīs apmācības mērķis ir parādīt ātru un vienkāršu metodi, kā importēt CSV failu savā Elasticsearch klasterī, izmantojot Kibana informācijas paneli.



Lecam iekšā.





Prasības

Pirms niršanas pārliecinieties, ka jums ir izpildītas šādas prasības:

    1. Elasticsearch klasteris ar zaļu veselības stāvokli.
    2. Kibana serveris ir savienots ar jūsu Elasticsearch klasteru.
    3. Pietiekamas atļaujas, lai pārvaldītu indeksus jūsu klasterī.

CSV faila paraugs

Kā parasti, pirmā prasība ir jūsu avota CSV fails. Ir ieteicams nodrošināt, lai jūsu CSV failā esošie dati būtu pareizi formatēti un tajos nav kļūdu.



Ilustrācijas nolūkos mēs izmantosim bezmaksas datu kopu, kas satur Amazon Prime filmas un TV pārraides.

Atveriet pārlūkprogrammu un dodieties uz tālāk norādīto resursu:

https://www.kaggle.com/datasets/shivamb/amazon-prime-movies-and-tv-shows

Izpildiet procedūru, lai lejupielādētu datu kopu vietējā datorā. Lejupielādēto arhīvu var izvilkt ar komandu:

$ izņemiet rāvējslēdzēju a~ / Lejupielādes / arhīvs.zip

Importēt CSV failu

Kad avota fails būs gatavs, mēs varam turpināt un apspriest, kā to importēt.

Sāciet, pārejot uz savu Kibana mājas informācijas paneli un atlasot opciju “augšupielādēt failu”.


Palaišanas programmas logā atrodiet mērķa CSV failu, kuru vēlaties importēt.


Atlasiet avota failu un noklikšķiniet uz Augšupielādēt.


Ļaujiet Elasticsearch un Kibana analizēt augšupielādēto failu. Tas parsēs CSV failu un noteiks datu formātu, laukus, datu tipus utt.

PIEZĪME. Atkarībā no jūsu klastera konfigurācijas un datu lieluma šis process var aizņemt kādu laiku. Pārliecinieties, vai galvenais mezgls reaģē, lai izvairītos no taimauta.

Kad process ir pabeigts, jums vajadzētu iegūt sava faila satura un Elastic analizētās faila statistikas paraugu.


Varat pielāgot daudzus parametrus, piemēram, atdalītāju, galvenes rindas utt. Piemēram, mēs varam pielāgot iepriekš minēto izvadi, lai paziņotu Elastic, ka mūsu CSV failā ir galvenes faili.


Pēc tam mēs varam noklikšķināt uz Lietot un atkārtoti analizēt datus. Tam vajadzētu formatēt datus pareizā formātā, tostarp laukus.


Pēc tam mēs varam noklikšķināt uz Importēt, lai pārietu uz importēto informācijas paneli.

Šeit mums ir jāizveido indekss, kurā tiek glabāti CSV dati. Varat savam rādītājam piešķirt jebkuru atbalstīto nosaukumu.


Ja vēlaties pielāgot savus indeksa rekvizītus, piemēram, fragmentu, kopiju, kartējumu skaitu utt. Atlasiet papildu opciju un pielāgojiet iestatījumus, kā to vēlas.

Visbeidzot, noklikšķiniet uz Importēt un skatieties, kā Kibana veic savu 'maģiju'. Kad tas ir pabeigts, varat piekļūt savam rādītājam, izmantojot Elasticsearch API, vai arī izmantot Kibana informācijas paneli.


Un esat pabeidzis!!

Secinājums

Šajā ziņojumā mēs apskatījām jūsu CSV datu kopas izgūšanas un importēšanas procesu jūsu Elasticsearch klasterī, izmantojot Kibana informācijas paneli.

Paldies par lasīšanu un laimīgu kodēšanu!