Databricks Certified Data Engineer Associate - wprowadzenie

Partner: Udemy
Affiliate Name:
Area:
Description: Sztuczna inteligencja nie mogła by się rozwinąć gdyby nie były dostępne dane. Co więcej tych danych jest potrzebna ogromna ilość, ale nie tylko ilość się tu liczy. Dane muszą też mieć dobrą jakość, bo inaczej - sztuczna inteligencja nie będzię inteligentna, tylko głupia. Data Engineer to ktoś, kto potrafi pracować z ogromnymi ilościami danych, pobierać je z dostępnych źródeł, przetwarzać i udostępniać dalej. Do tego rodzaju zadań są też potrzebne odpowiednie narzędzia i jednym z nich jest Databricks - chmurowa platforma do przetwarzania danych i budowania modeli Machine Learning oraz AI.Ten kurs to wprowadzenie do Data Engineering w Databricks. Jest to jednocześnie podstawowa wiedza od której należy zacząć przygotowując się do egzaminu Databricks Certified Data Engineer Associate, ale i szczegółowe przedstawnienie niuansów o których nie jeden praktykujący Data Enginner nie wie lub ich nie rozumie.Na kursie zaczynamy od przedstawienia metod na darmowe korzystanie z Databricks, bo co do zasady za każde uruchomienie clustra trzeba zapłacić.Później przechodzimy do omówienia, jak są zbudowane zasoby obliczeniowe wykonujące przetwarzanie danych oraz jak te dane są gromadzone w tzw. katalogach.Dalej pokazujemy, jak budować notebooki i jak integrować je z GitHub. Poznajemy metody tworzenia nowych katalogów oraz wykonywania podstawowych operacji w systemie plików pomocy modułu dbutils. Ponieważ Databricks to usługa mocno osadzona w chmurze, to pokazujemy też, jak ta integracja została wykonana z punktu widzenia Azure i przy okazji tworzymy własne External Locations i zewnętrzne katalogi. Jest to już poważna administracyjna część zarządzania Databricks na Azure.Następnie przechodzimy do omówienia formatu Delta, czyli bazującego na Parquet sposobu przechowywania danych w Databricks i Spark. Dowiesz się, co to jest Detla Table, jak "podróżować w czasie", optymalizować
Category: IT & Software > IT Certifications > Databricks
Partner ID:
Price: 64.99
Commission:
Source: Impact
Go to Course