Kibi Data Intelligence

A Kibi Data Intelligence nyílt forráskódú analitikai és adatvizualizációs platform, amely könnyebbé teszi a nagy adattömegek megértését a nem elemző típusú felhasználók számára is.

A rendszer felépítése

A Kibi a Logstash adatfeldolgozó alkalmazás segítségével 3 különböző inputot képes kezelni.

  • Strukturált adatbázis adatokat, ami általában MySQL, PostgreSql, Oracle vagy MSSQL
  • Az online kapcsolódási forma weboldalak tartalmának figyelésére szolgál (rendezetlen adatforma)
  • A Log a számítógép által naplózott eseményeket tartalmazza (rendezett adatforma)

Logstash

A Logstash egy olyan adatgyűjtő motor, amely képes valós időben nyomon követni a bemenetek változásait és a beérkezett adatokat vízszintesen skálázhatóvá teszi.

Elasticsearch

Az Elasticsearch a Logstash által lekérdezett adatok közötti szűrést teszi lehetővé, ami az indexelés elvére épül. A szűrés azokon a lokálisan eltárolt adatokon történik, amelyek a Logstash-től érkeztek. A rendelkezésre álló terhely optimális kihasználásához fontos meghatároznunk, hogy milyen adatokra van szükségünk és hogy milyen időközönként kérdezzük le azokat.

Kibi

A Kibi a platform elemzésért és adatvizualizációért felelős felhasználói felülete. Ezen keresztül tervezhetjük meg és állíthatjuk be az egyes elemzői nézeteket, az adattartalmak áttekintését segítő dashboard-okat és a szűrési paramétereket. A Kibi felület legfontosabb képességei:

  • Discover – adatfelderítés, indexek kezelése
  • Visualize – az egyes adatelemek, összefüggések megjelenítésének megtervezése
  • Dashboard – a megtervezett adatelemek kirajzolása, portáloldalba szervezése