W poniedziałek wykład dla studentów drugiego roku studiów magisterskich na kierunku Analiza i Przetwarzanie Danych wygłosili przedstawiciele firmy Datarabbit Panowie Michał Mikołajczak (CEO i założyciel) oraz Kamil Sagalara (Software Engineer / AWS Cloud).
Tytuł wykładu brzmiał: "Od surowych danych do wizualizacji i wniosków: studium przypadku Hurtowni danych typu multitenant w środowisku AWS" i dotyczył ciekawego zastosowania wielu elementów, które studenci poznają podczas studiów m.in. na przedmiocie Gromadzenie i eksploracja danych prowadzonym przez Pana prof. Marka Nawrockiego.
Streszczenie wykładu:
Streszczenie: Celem prezentacji jest przedstawienie, jak w dynamicznym środowisku startupowym zbudować scentralizowaną hurtownię danych za zasilaną za pomocą systemu ETL (Extract, Transform, Load). System ten integruje dane z wielu baz pochodzących z różnych organizacji, gdzie struktura danych często się różni, co stanowi istotne wyzwanie podczas projektowania i wdrażania rozwiązania. Na podstawie rzeczywistego przypadku użycia zaprezentujemy krok po kroku proces projektowania i wdrożenia takiego systemu, wykorzystując usługi AWS, takie jak Amazon Redshift, AWS Glue i AWS Step Functions. Szczególny nacisk położymy na automatyzację oraz raportowanie błędów w przypadku niepoprawnych danych wejściowych. W kolejnej części omówimy, jak nasz system wspiera zespół analityków, jakie rozwiązał problemy oraz w jak automatycznie dostosowuje się do rosnącej ilości danych. Uczestnicy dowiedzą się, jak od podstaw zaprojektować i wdrożyć hurtownie danych w AWS, uwzględniając zarówno techniczne wyzwania, jak i korzyści biznesowe. Wykład skierowany jest do studentów, analityków i architektów danych, którzy chcą zgłębić nowoczesne technologie przetwarzania i analizy danych w chmurze.
Dziękujemy prelegentom za inspirującą prezentację!
