Chagua lugha yako
Kozi ya Cloud Data Engineer
Zaidi ya wanafunzi milioni 2 duniani kote

Kozi ya Cloud Data Engineer

Jifunze uhandisi mzima wa data wa wingu, kuanzia hifadhi na ukusanyaji hadi usindikaji wa wakati halisi na shughuli za uzalishaji. Kozi hii inakupa ujuzi wa vitendo wa kubuni mifumo ya data inayopanuka, kutekeleza mifumo ya utawala, na kuendesha mifumo ya kutegemeka. Jenga utaalamu unaohitajika katika nafasi za kisasa za uhandisi wa data.

Dedika kwa biashara

Utakachojifunza:

Utajifunza jinsi ya kubuni na kusimamia mifumo ya data ya wingu kwa kutumia zana na mifumo inayotambulika katika sekta. Kozi inashughulikia misingi ya miundombinu ya wingu, mifumo ya hifadhi ya uhusiano na NoSQL, mifumo ya ukusanyaji kwa makundi na utiririshaji, na usindikaji uliosambazwa kwa Apache Spark. Utatekeleza uthibitishaji wa ubora wa data, ufuatiliaji wa asili, na mbinu za uangalizi ili kuweka mifumo ya usafirishaji kuwa ya kutegemeka katika mazingira halisi. Mada za juu ni pamoja na utiririshaji wa wakati halisi kwa Apache Flink, Miundombinu kama Msimbo, mifumo ya kazi ya DataOps, na usanifu wa kisasa kama ziwa la data na mtandao wa data. Pia utapata ujuzi wa vitendo katika Python, uboreshaji wa SQL, na uunganishaji wa mfumo wa ML.

Jinsi unavyosoma kwa vitendo Kozi ya Cloud Data Engineer

Jinsi unavyofanya mazoezi Kozi ya Cloud Data Engineer

Kwa ajili yako ambaye ni kampuni na unataka kufundisha timu yako

Katika Dedika kwa ajili ya kampuni, kozi inakuja na mazoezi na mifano inayohusiana na biashara yako na jinsi kampuni yako inavyohitaji.

Bofya hapa

Maudhui ya kozi

8 Suras • 37 MasomoMuda kati ya 4 na 360 masaa (wewe unachagua)

Sura 1Tazama maelezo

Misingi ya Kompyuta ya Wingu kwa Wahandisi wa Data

  • Somo 1 • Mifano ya Huduma ya Wingu na Aina za Usambazaji

    Inashughulikia tofauti za IaaS, PaaS, na SaaS pamoja na usambazaji wa umma, binafsi, na mseto. Inaweka mazingira ya usanifu kwa maamuzi yote yanayofuata ya huduma za data za wingu.

  • Somo 2 • Vipengele vya Msingi vya Miundombinu ya Wingu

    Inatanguliza primitives za kompyuta, hifadhi, mitandao, na utambulisho zinazotumiwa katika majukwaa makubwa ya wingu. Inatoa msamiati unaohitajika kubuni na kujadili miundombinu ya data.

  • Somo 3 • Misingi ya Usalama wa Wingu na Uzingatiaji

    Inashughulikia usimbaji fiche wakati wa kupumzika na usafirishaji, usimamizi wa funguo, na mifumo ya udhibiti wa kufuata kwa data. Inaweka tabia za usalama zinazotumiwa katika kozi nzima.

  • Somo 4 • Misingi ya Uwekaji Bei na Usimamizi wa Gharama kwa Wingu

    Inaelezea bei ya kulipa kadri unavyotumia, uwezo uliotengwa, na mifano ya bei ya papo hapo inayohusiana na mizigo ya kazi ya data. Inawezesha maamuzi ya usanifu yanayozingatia gharama tangu mwanzo.

Sura 2Tazama maelezo

Mifumo ya Hifadhi ya Data katika Wingu

  • Somo 1 • Kuchagua Hifadhi Sahihi kwa Kila Hali ya Matumizi

    Inatumia mfumo wa maamuzi kulinganisha mifumo ya hifadhi na mahitaji ya muda wa kuchelewa wa mtandao, upitishaji, na gharama. Inaunganisha chaguo zote za hifadhi katika mwongozo wa uteuzi wa vitendo.

  • Somo 2 • Chaguo za Hifadhidata za NoSQL na Hifadhi ya Ufunguo-Thamani

    Inashughulikia mifano ya hifadhidata ya hati, safu-wima pana, ufunguo-thamani, na grafu zinazopatikana kama huduma za wingu. Inaelekeza uteuzi kulingana na mifumo ya ufikiaji na mahitaji ya uthabiti.

  • Somo 3 • Huduma za Hifadhidata za Uhusiano za Wingu

    Inachunguza matoleo ya hifadhidata za uhusiano yanayosimamiwa, usanidi wa upatikanaji wa juu, na nakala za usomaji. Inaunganisha misingi ya SQL na mifumo ya usambazaji inayosimamiwa na wingu.

  • Somo 4 • Ghala la Data kama Huduma ya Wingu

    Inatanguliza hifadhi ya safu-wima, usanifu wa MPP, na upatikanaji na uongezaji wa ghala la data la wingu. Inawaandaa wanafunzi kwa mizigo ya kazi ya uchanganuzi wa maswali inayoshughulikiwa katika sura za baadaye.

  • Somo 5 • Hifadhi ya Kitu na Maziwa ya Data

    Inaelezea usanifu wa hifadhi ya kitu, sera za ndoo, sheria za mzunguko wa maisha, na mifumo ya upangaji wa ziwa la data. Inaunda msingi wa kazi zote za ulaji na hifadhi ya data kwa kiwango kikubwa.

Sura 3Tazama maelezo

Misingi ya Ulaji wa Data na Mfumo wa Usafirishaji wa Data

  • Somo 1 • Mifumo na Zana za Ulaji wa Kundi

    Inashughulikia uhamishaji wa faili ulioratibiwa, ulaji wa API kwa wingi, na mikakati ya upakiaji wa nyongeza kwa mifumo ya usafirishaji wa data ya kundi. Inaweka mfumo wa kawaida zaidi wa ulaji kabla ya kutambulisha utiririshaji.

  • Somo 2 • Mbinu za Kukamata Mabadiliko ya Data

    Inaelezea mbinu za CDC za msingi wa kumbukumbu ya matukio, msingi wa kichochezi, na msingi wa muda kwa ajili ya kukamata mabadiliko ya hifadhidata. Inawezesha urudufishaji wa karibu wa wakati halisi bila uchanganuzi kamili wa meza.

  • Somo 3 • Misingi ya Ulaji wa Kutiririsha

    Inatanguliza dhana za utiririshaji wa matukio, wazalishaji, watumiaji, mada, na sehemu kwa mtiririko wa data wa wakati halisi. Inaunganisha ujuzi wa ulaji wa kundi kwa usindikaji wa data unaoendelea.

  • Somo 4 • Misingi ya Uratibu wa Mfumo wa Usafirishaji wa Data

    Inashughulikia uratibu wa msingi wa DAG, utegemezi wa kazi, majaribio ya kurudia, na arifa kwa usimamizi wa mfumo wa usafirishaji wa data. Inatoa mgongo wa uendeshaji kwa aina zote za mfumo wa usafirishaji wa data zilizojengwa katika kozi hii.

Sura 4Tazama maelezo

Usafirishaji na Usindikaji wa Data kwa Kipimo

  • Somo 1 • Uratibu wa Utiririshaji wa Mabadiliko

    Inatumia zana za uratibu kupanga, kufuatilia, na kutoa matoleo ya kazi za mabadiliko kwa kipimo. Inapanua misingi ya uratibu wa mfumo wa usafirishaji wa data kwa utiririshaji changamano wa mabadiliko ya hatua nyingi.

  • Somo 2 • Uundaji wa Mfano wa Data kwa Uchanganuzi

    Inatanguliza schema ya nyota, schema ya theluji, na uundaji wa mfano wa ghala la data kwa mizigo ya kazi ya uchanganuzi. Inahakikisha kuwa matokeo ya mabadiliko yameundwa kwa uwezo mzuri wa kuuliza maswali chini ya mkondo.

  • Somo 3 • Mifumo ya Mabadiliko ya Msingi wa SQL

    Inashughulikia vitendaji vya dirisha, CTE, mifano ya nyongeza, na uboreshaji wa maswali kwa mabadiliko makubwa ya SQL. Inaunganisha ujuzi wa SQL na injini za maswali za ghala la data la wingu na ziwa.

  • Somo 4 • Usindikaji wa Kundi Ulio Sambazwa na Spark

    Inafundisha API za RDD na DataFrame, ugawaji, mabadilishano, na uboreshaji wa kazi katika Apache Spark. Inaweka injini kuu ya usindikaji iliyosambazwa inayotumiwa katika kozi nzima.

  • Somo 5 • Kipimo cha Utendaji kwa Kazi Kubwa

    Inashughulikia akiba, viunganishi vya matangazo, uteuzi wa fomati ya faili, na ukubwa wa nguzo kwa utendaji wa mabadiliko. Inawaandaa wanafunzi kutambua na kutatua vikwazo katika mifumo ya usafirishaji wa data ya uzalishaji.

Sura 5Tazama maelezo

Usindikaji wa Data ya Kutiririsha na Mifumo ya Usafirishaji wa Data ya Wakati Halisi

  • Somo 1 • Dirisha na Wakati wa Semantiki

    Inashughulikia madirisha ya kutumbua, kuteleza, na kikao pamoja na wakati wa tukio, wakati wa usindikaji, na viwango vya maji. Inawezesha mkusanyiko sahihi juu ya mikondo ya tukio iliyovurugika na inayofika kwa kuchelewa.

  • Somo 2 • Mifumo ya Usanifu wa Mfumo wa Usafirishaji wa Data ya Kutiririsha

    Inatumia usanifu wa lambda, kappa, na utiririshaji kwanza kwa hali halisi za uhandisi wa data. Inaunganisha ujuzi wa mfumo wa programu na maamuzi ya usanifu wa mwisho hadi mwisho.

  • Somo 3 • Usindikaji wa Hali ya Mtiririsho

    Inaelezea hali ya ufunguo, hali ya kiendeshaji, ukaguzi, na nyuma ya hali kwa kazi za utiririshaji zinazostahimili makosa. Inawezesha ugunduzi wa matukio changamano na mkusanyiko unaoendelea kwenye mikondo isiyo na mipaka.

  • Somo 4 • Muhtasari wa Mifumo ya Usindikaji wa Utiririshaji

    Inalinganisha Apache Flink, Spark Structured Streaming, na huduma za utiririshaji za wingu zinazosimamiwa kwa uwezo. Inaelekeza uteuzi wa mfumo wa programu kulingana na mahitaji ya muda wa kuchelewa wa mtandao, hali, na uendeshaji.

Sura 6Tazama maelezo

Ubora, Utawala, na Uchunguzi wa Data

  • Somo 1 • Mkataba wa Data na Usimamizi wa Schema

    Inafafanua mikataba ya data kati ya wazalishaji na watumiaji na inashughulikia matumizi na mageuko ya rejista ya schema. Inazuia mabadiliko ya kuvunja kuenea katika mifumo ya data inayotegemea.

  • Somo 2 • Mifumo ya Uthibitishaji wa Ubora wa Data

    Inashughulikia uthibitishaji wa schema, ukaguzi wa tupu, uadilifu wa marejeleo, na uchanganuzi wa takwimu kwa ubora wa data. Inaunganisha milango ya ubora moja kwa moja kwenye mifumo ya usafirishaji wa data ya ulaji na mabadiliko.

  • Somo 3 • Asili na Uorodheshaji katika Katalogi ya Data

    Inaelezea ufuatiliaji wa asili wa kiwango cha safu-wima, uorodheshaji katika katalogi ya metadata, na zana za ugunduzi wa data kwa kufuata utawala. Inawezesha timu kufuatilia asili ya data na kuelewa athari za mabadiliko chini ya mkondo.

  • Somo 4 • Uchunguzi na Ufuatiliaji wa Mfumo wa Usafirishaji wa Data

    Inatanguliza vipimo, kumbukumbu za matukio, athari, na ufuatiliaji wa SLA kwa ufuatiliaji wa afya ya mfumo wa usafirishaji wa data wa mwisho hadi mwisho. Inatoa mwonekano wa uendeshaji unaohitajika kudumisha mifumo ya data ya uzalishaji kwa kutegemewa.

  • Somo 5 • Udhibiti wa Ufikiaji wa Data na Faragha

    Inashughulikia udhibiti wa ufikiaji kulingana na jukumu, usalama wa kiwango cha safu, ufunikaji wa data, na mbinu za kuhifadhi faragha kwa data nyeti. Inaoanisha mifumo ya ufikiaji wa data na mahitaji ya udhibiti na shirika.

Sura 7Tazama maelezo

Usanifu na Muundo wa Jukwaa la Data la Wingu

  • Somo 1 • Kubuni kwa Mazingira ya Wingu Nyingi na Mseto

    Inashughulikia uhamishaji wa data, mitandao ya kuvuka wingu, na zana zisizotegemea muuzaji kwa majukwaa ya data ya wingu nyingi. Inawaandaa wanafunzi kubuni majukwaa yanayoepuka kufuliwa kwa muuzaji mmoja.

  • Somo 2 • Mifumo ya Upanuzi na Kuegemea

    Inashughulikia upanuzi wa mlalo, ustahimilivu wa makosa, uwezo wa kufanywa mara nyingi, na uokoaji wa maafa kwa vipengele vya jukwaa la data. Inahakikisha miundo ya jukwaa inakidhi mahitaji ya kuegemea na upatikanaji wa uzalishaji.

  • Somo 3 • Mikakati ya Uboreshaji wa Gharama ya Jukwaa

    Inatumia urekebishaji wa ukubwa, matumizi ya papo hapo, upangaji wa viwango vya hifadhi, na udhibiti wa gharama ya maswali ili kupunguza matumizi ya jukwaa. Inaunganisha maamuzi ya usanifu moja kwa moja na matokeo ya gharama yanayoweza kupimika.

  • Somo 4 • Usanifu wa Marejeleo wa Jukwaa la Data la Kisasa

    Inachunguza usanifu wa medali, wavu wa data, na ziwa nyumba kama mifumo ya majukwaa ya data ya wingu. Inatoa msamiati na mifumo ya usanifu kwa mazoezi ya muundo yanayofuata.

  • Somo 5 • Miundombinu Kama Nambari kwa Majukwaa ya Data

    Inashughulikia upatikanaji wa miundombinu wa kuelezea, moduli, usimamizi wa hali, na CI/CD kwa rasilimali za data za wingu. Inawezesha usambazaji unaoweza kurudiwa na kudhibitiwa kwa matoleo ya vipengele vyote vya miundombinu ya data.

Sura 8Tazama maelezo

Uendeshaji, Usambazaji na Uzalishaji wa DataOps

  • Somo 1 • Upangaji wa Uwezo na Usimamizi wa Utendaji

    Inatumia upimaji wa mzigo, utabiri wa rasilimali, na kuweka viwango vya utendaji kwa maamuzi ya uwezo wa jukwaa la data. Inahakikisha majukwaa yanapanuka kwa makini badala ya kuguswa chini ya kiasi cha data kinachokua.

  • Somo 2 • Utamaduni wa DataOps na Uboreshaji Unaendelea

    Inatanguliza kanuni za DataOps, mizunguko ya maoni, utoaji wa matoleo ya mfumo wa usafirishaji wa data, na mazoea ya ushirikiano wa timu. Inapachika mtazamo wa uboreshaji unaoendelea katika uendeshaji wa kila siku wa uhandisi wa data.

  • Somo 3 • Usimamizi wa Mazingira na Usanidi

    Inashughulikia usawa wa mazingira ya dev, staging, na uzalishaji, usimamizi wa siri, na usanidi maalum wa mazingira. Inazuia upotovu wa usanidi na kufichuliwa kwa hati za kusadikika katika mazingira ya usambazaji.

  • Somo 4 • Mifumo ya CI/CD kwa Uhandisi wa Data

    Inajenga upimaji wa kiotomatiki, uchanganuzi tuli, usambazaji, na utiririshaji wa kazi wa kurudisha nyuma kwa nambari ya mfumo wa usafirishaji wa data. Inatumia mazoea ya uwasilishaji wa uhandisi wa programu kwa mzunguko wa maisha wa uhandisi wa data.

  • Somo 5 • Mwitikio wa Matukio kwa Mifumo ya Data

    Inafafanua viwango vya ukali wa matukio, vitabu vya uendeshaji, uchambuzi wa sababu ya mizizi, na michakato ya uchunguzi wa baada ya kifo kwa kukatika kwa data. Inaunda nidhamu ya uendeshaji inayohitajika kudumisha SLA za data chini ya hali ya kushindwa.

Uthibitisho

Cheti chako halali cha kumaliza

Kozi hii ni kwa ajili yako:

  • Mchambuzi wa data: yuko tayari kuhama mbele kumiliki mifumo ya usafirishaji inayolisha ripoti zake.

  • Mhandisi wa programu: anataka kutalii katika miundombinu ya data na kazi za mifumo iliyosambazwa.

  • Mtengenezaji wa BI: anatafuta kupanuka zaidi ya dashibodi hadi uhandisi wa mifumo ya data inayopanuka.

  • Mhandisi mchanga wa data: anatafuta mtaala uliopangwa ili kuziba mapungufu muhimu ya ujuzi haraka.

  • Mtengenezaji wa upande wa seva: anahamia nafasi za data za wingu katika makampuni yanayotumia data.

  • Mhandisi wa uchanganuzi: analenga kuongeza utaalamu katika uandaaji, utiririshaji na shughuli za uzalishaji.

Kile ambacho wanafunzi wetu wanasema

Masomo yenu ni mazuri sana. Nilinunua kifurushi cha mwaka mmoja na, hatimaye, nina fursa ya kufuata mada mbalimbali za maslahi yangu bila kuhitaji kubadilisha jukwaa... ninashukuru kwa kila kitu mnachofanya, nimeshawapendekeza kwa watu wengine...
Giulio Carlo
Giulio CarloMwanafunzi wa Masoko ya Kidijitali
Ninapenda jinsi masomo yanavyo moja kwa moja na jinsi ninavyoweza kubadilisha sura na kuruka maudhui ambayo sihitaji.
Mariana Ferres
Mariana FerresMwanafunzi wa Upigaji Picha
Ninapenda maudhui na njia ya uwasilishaji na uandishi wa video, ambayo inaharakisha mchakato!
Luciana Alvarenga
Luciana AlvarengaMwanafunzi wa Muundo wa Makucha
Jukwaa ni la haraka, rahisi kutumia. Utofauti wa maudhui na video za ziada zinasaidia sana katika kujifunza.
André Felipe
André FelipeMwanafunzi wa Uhandisi wa Prompt

Mafunzo muhimu

Maswali Yanayoulizwa Mara kwa Mara

Dedika ni nani?

Je, cheti kinatumika nchini Tanzania?

Kozi ni bure?

Mzigo wa masomo wa kozi ni upi?

Kozi zikoje?

Kozi zinafanyaje kazi?

Kozi hudumu kwa muda gani?

Gharama au bei ya kozi ni ipi?

Kozi ya EAD au mtandaoni ni nini na inafanyaje kazi?

Kozi ya PDF