Numlabs - logo

Big Data

   

Analizuj terabajty danych w rozproszonym środowisku.
Przetwarzaj dane strumieniowe, wdrażaj modele uczenia maszynowego na klastrach obliczeniowych.

O co chodzi?

   

Big data stało się w ostatnich latach popularnym hasłem, co za tym idzie, obrosło wieloma mitami. W rzeczywistości jest to termin zbiorczy dla szeregu technologii, a przede wszystkim metodologii dotyczącej przechowywania, przesyłania, analizowania i wyciągania wniosków z ogromu danych, z którymi pojedyncze maszyny nie są w stanie sobie poradzić. Co więcej, systemy big data mają wbudowaną tolerancję błędów, przez co utrata danych jest znacznie mniej prawdopodobna.

Czy moja firma potrzebuje technologii Big Data?

   

W dzisiejszych czasach big data jest bliżej niż myślisz. Nie tylko giganci technologiczni, tacy jak Google czy Facebook generują duże ilości danych. Firma, która generuje zaledwie 3 GB danych dziennie, po rokuf będzie miała ich już terabajt. Niektóre dane można usunąć, inne są źródłem cennej wiedzy, na przykład: zachowania klientów na naszej stronie internetowej czy pomiary dokonywane przez czujniki IoT. Dzięki nim można mieć lepszy wgląd w swój biznes i przewidzieć jego przyszłe funkcjonowanie.

Technologia Big Data

   

Dzięki rozwiązaniom takim jak Hadoop czy Spark możliwe jest przechowywanie i tworzenie analiz w oparciu o duże zbiory danych. Narzędzia takie jak Elasticsearch pozwalają na bardzo szybkie przeszukiwanie milionów dokumentów tekstowych. Z kolei Kafka daje nam możliwość zbierania informacji z tysięcy urządzeń jednocześnie. Podobną funkcjonalność mogą zapewnić również narzędzia udostępniane w ramach chmur publicznych, takich jak AWS.

Tworzenie backendu i frontendu aplikacji webowych

   

Dzięki wykorzystaniu przez nas big data, projekty polegające na monitorowaniu całej hali – wykrywaniu w czasie rzeczywistym anomalii, takich jak zmiana charakterystyki pracy silników elektrycznych (wskazująca np. na awarię), tworzeniu modeli pozwalających na przedwczesną wymianę urządzeń o żywotności na finiszu, przy jednoczesnej możliwości szybkiego ręcznego dostępu do niezbędnych informacji, nie jest koncepcją science-fiction.