Text copied to clipboard!

Pavadinimas

Text copied to clipboard!

Hadoop inžinierius

Aprašymas

Text copied to clipboard!
Ieškome patyrusio Hadoop inžinieriaus, kuris prisijungtų prie mūsų duomenų inžinerijos komandos ir padėtų kurti, diegti bei prižiūrėti didelio masto duomenų apdorojimo sistemas. Jūs būsite atsakingas už Hadoop klasterių architektūrą, diegimą, konfigūravimą ir optimizavimą, užtikrinant jų patikimumą, saugumą ir našumą. Dirbsite glaudžiai su duomenų mokslininkais, analitikais ir kitais IT specialistais, kad užtikrintumėte sklandų duomenų srautų valdymą bei efektyvų duomenų apdorojimą. Jūsų pagrindinės užduotys apims Hadoop ekosistemos komponentų (HDFS, MapReduce, YARN, Hive, Pig, Spark ir kt.) diegimą, konfigūravimą bei palaikymą. Taip pat būsite atsakingas už klasterio stebėseną, našumo analizę, problemų sprendimą ir nuolatinį sistemos tobulinimą. Tikimės, kad gebėsite kurti ir įgyvendinti duomenų saugumo, atsarginių kopijų ir atkūrimo strategijas, užtikrinsite duomenų integralumą bei laikysitės geriausių industrijos praktikų. Sėkmingas kandidatas turės stiprių žinių apie Linux operacinę sistemą, tinklų pagrindus, programavimo įgūdžių (pvz., Java, Python ar Scala) ir patirties su debesų kompiuterijos platformomis (AWS, Azure ar Google Cloud). Vertiname gebėjimą dirbti komandoje, savarankiškumą, analitinį mąstymą ir norą nuolat tobulėti. Jei domitės didžiųjų duomenų technologijomis, norite prisidėti prie inovatyvių sprendimų kūrimo ir dirbti dinamiškoje aplinkoje, kviečiame kandidatuoti į Hadoop inžinieriaus poziciją mūsų įmonėje.

Atsakomybės

Text copied to clipboard!
  • Hadoop klasterių diegimas, konfigūravimas ir priežiūra
  • Hadoop ekosistemos komponentų palaikymas (HDFS, YARN, Hive, Spark ir kt.)
  • Duomenų srautų valdymo ir apdorojimo procesų optimizavimas
  • Klasterio našumo stebėsena ir problemų sprendimas
  • Duomenų saugumo ir atsarginių kopijų strategijų įgyvendinimas
  • Bendradarbiavimas su duomenų mokslininkais ir analitikais
  • Sistemos dokumentacijos rengimas ir atnaujinimas
  • Naujų technologinių sprendimų diegimas ir testavimas
  • Automatizavimo įrankių kūrimas ir palaikymas
  • Reguliarus sistemos atnaujinimas ir patobulinimų diegimas

Reikalavimai

Text copied to clipboard!
  • Patirtis dirbant su Hadoop ekosistema
  • Geri Linux operacinės sistemos įgūdžiai
  • Programavimo žinios (Java, Python arba Scala)
  • Patirtis su debesų kompiuterijos platformomis (AWS, Azure ar Google Cloud)
  • Duomenų bazių ir SQL pagrindai
  • Analitinis mąstymas ir problemų sprendimo įgūdžiai
  • Gebėjimas dirbti komandoje ir savarankiškai
  • Geros anglų kalbos žinios (raštu ir žodžiu)
  • Atsakomybės jausmas ir kruopštumas
  • Aukštasis išsilavinimas IT ar susijusioje srityje

Galimi interviu klausimai

Text copied to clipboard!
  • Kiek metų turite patirties su Hadoop ekosistema?
  • Kokius Hadoop komponentus esate diegęs ir prižiūrėjęs?
  • Ar turite patirties su debesų kompiuterijos platformomis?
  • Kokias programavimo kalbas mokate?
  • Kaip sprendžiate našumo problemas Hadoop klasteryje?
  • Ar esate įgyvendinęs duomenų saugumo strategijas?
  • Kaip užtikrinate duomenų integralumą?
  • Ar turite patirties su automatizavimo įrankiais?
  • Kaip bendradarbiaujate su kitomis komandomis?
  • Kokius iššūkius esate patyręs dirbdamas su dideliais duomenų kiekiais?