Cubix Institute of TechnologyCubix Institute of Technology aims to gather the most important skill set building blocks for IT professionals by organizing cohort-based online IT&TECH trainings with the help of industry-leading mentors, tech companies and higher education institutions.
Our constantly expanding portfolio currently consists of 35+ courses, including topics, e.g.: Frontend and Backend development (Java, Python, C++, JavaScript, Angular, React, Node.js, C#, .NET, stb), Mobile and Cross-Platform Development (iOS, Android, Flutter), IT Project and Product Management, Software Testing, DevOps, and Cloud Solutions, Data Science, AI/ML/DL, UI/UX, IT security, Video Game-, AR/VR/XR Development, IoT and Embedded System Development, Blockchain, etc.
Become a member of our community!
Online IT academy
|
|
|
Databricks és PySpark Workshop
A vállalatok egyre több adatot gyűjtenek értékesítési, pénzügyi, marketing-, ügyfélkezelési és informatikai rendszerekből. Ezek az adatok azonban önmagukban még nem alkalmasak megbízható riportingra, üzleti elemzésre vagy AI-alapú felhasználásra. Az adatok gyakran különböző rendszerekben találhatók, eltérő formátumban érkeznek, hiányos vagy hibás értékeket tartalmaznak, és manuális feldolgozást igényelnek.
A Databricks olyan egységes adatplatformot biztosít, amely egy környezetben támogatja az adatbetöltést, az adatfeldolgozást, a transzformációt, az analitikai felhasználást és a machine learninghez szükséges adatelőkészítést. A PySpark segítségével pedig olyan adatfeldolgozási folyamatok építhetők, amelyek nagyobb adatmennyiség és összetettebb vállalati környezet esetén is skálázhatók.
A workshop végére megérted, mire használható a Databricks, mit jelent a lakehouse szemlélet, és hogyan építhető fel egy egyszerű, több lépésből álló mini data pipeline a nyers forrástól a tisztított, üzletileg használható adatkészletig.
A data engineering terület iránt sokan érdeklődnek, de egy hosszabb, több hónapos képzés komoly időbeli, pénzügyi és mentális elköteleződést jelent. Első lépésként gyakran nehéz eldönteni, hogy valóban érdekli-e az embert a technikai adatfeldolgozás és a SQL/Python-alapú feladatok.
Ez a workshop egy rövidebb, kisebb elköteleződést igénylő, mégis kifejezetten gyakorlati belépési lehetőséget biztosít. Nem egy általános "gyorstalpalóról" van szó, hanem egy konkrét, piacképes és a vállalati adatkörnyezetekben egyre gyakrabban használt technológiai irányra koncentrálunk.
A workshop végére a Databricks, a PySpark, a lakehouse és a medallion architektúra (Bronze/Silver/Gold) már nem pusztán elméleti fogalmak lesznek. Minden résztvevő egy konkrét, továbbvihető technikai outputtal távozik: saját Databricks-notebookkal, egy működő mini data pipeline-nal, és egy tisztább szakmai képpel arról, hogyan működik a modern data engineering a gyakorlatban.

Adatvezérelt megoldások fejlesztésével foglalkozik Data Engineer-ként, jelenleg egy nemzetközi csapat részeként dolgozik a vállalat adatminőségi csapatában.
Python, PySpark, SQL és az Azure technológiák segítségével épít adatmegoldásokat, ETL folyamatokat kezel, fejleszt és biztosítja a különböző rendszerek közötti zökkenőmentes integrációt. Emellett PowerBI dashboardokat frissít, hogy a döntéshozók valós idejű betekintést nyerhessenek az adatokba.
A szakmai munkája mellett aktív szerepet vállal a közösségépítésben is: a Budapest.py meetup csoport szervezője.
Céges csapat számára keresel workshopot?
A Databricks + PySpark workshop zárt vállalati képzésként is elérhető. A cél a csapat közös technológiai alapjainak kialakítása, a lakehouse működésének megértése és a különböző adatos szerepkörök (BI, IT, fejlesztők) közötti együttműködés támogatása.
Kérj egyedi vállalati ajánlatot és igazítjuk a csapatotok technológiai környezetéhez!
Ha szeretnéd egyetlen intenzív nap alatt kipróbálni a Databricks és a PySpark használatát, jelentkezz a következő online workshopra. A jelentkezést követően hozzáférést kapsz az előzetes tananyaghoz és a technikai checklisthez.
Ha még nem vagy biztos benne, hogy a workshop megfelel-e a jelenlegi SQL-, Python- vagy adatos tudásszintednek, kérj egyeztetést. Segítünk eldönteni, hogy ez a workshop, vagy egy hosszabb mentorált képzés illeszkedik-e jobban a céljaidhoz.
Ha a BI-, data-, reporting- vagy IT-csapatod számára szeretnél közös Databricks és PySpark alapokat kialakítani, kérj egyedi vállalati ajánlatot.
Írj nekünk az info@cubixedu.com címre és készséggel segítünk!
-
1.A Workshop fő témái
-
1. lecke
A Data Engineer szerepe a modern adatos működésben
-
2. lecke
Az adat útja a forrásrendszertől a riportingig, analitikáig vagy AI-felhasználásig
-
3. lecke
ETL- és ELT-folyamatok
-
4. lecke
Batch és streaming adatfeldolgozás
-
5. lecke
Data lake, data warehouse és lakehouse megközelítés
-
6. lecke
A Databricks szerepe a modern data stackben
-
7. lecke
Apache Spark és PySpark alaplogika
-
8. lecke
Spark DataFrame-ek
-
9. lecke
SQL és PySpark együttműködése
-
10. lecke
Databricks-account és workspace előkészítése
-
11. lecke
A dataset és a szükséges notebookok ellenőrzése