Data Engineer álláslehetőség

Data Engineer

Data Engineer szeretnél lenni, de nincs még tapasztalatod? Itt megszerezheted: szoftvermérnököket keresek a Databricks kiemelt partneréhez.

A cégről és a feladatról

Megbízóm a Datapao magyar tulajdonú vállalkozás, melynek tevékenysége adatelemzés (machine learning, data science) és adatelemző infrastruktúrák (big data, elosztott rendszerek) fejlesztése, illetve ehhez kapcsolódó tanácsadás és oktatás.

A Databricks kiemelt partnerei. A Databricks egy egységes, komplex adatplatform, amelyet az Apache Spark alkotói alapítottak. A világ egyik leggyorsabban fejlődő cége: 2018-ban 380 fő, 2019-ben már 1200 fő dolgozott a vállalatnak. A Databricks a világ első 1st party terméke MS Azure-on, amelynek köszönhetően szintén nő az igény a szolgáltatások iránt.

A Datapaonál azzal foglalkoznak, hogy az ügyfeleik adat-jellegű üzleti problémáira megoldást szállítsanak.

Ügyfélkörük változatos: megbízóik főleg az USA-ból és Nyugat-Európából kerülnek ki. A világ legnagyobb vállalataival, intézményeivel dolgoznak együtt (például Apple, Uber, NASA), ami itthon ritka, nehezen elérhető lehetőség. Ha választhatnak, legszívesebben olyan ügyfeleknek dolgoznak, akik gyártási, energetikai, gyógyszerkutatási és űrkutatási területen tevékenyek. Az ügyfeleik méretének és tevékenységének köszönhetően olyan feladatokkal is találkoznak, amelyek nem evidensek és kihívást jelentenek. Néhány feladat és üzleti probléma a közelmúltból:

  • 100 gépes clusteren, 100 TB adaton végzett feladatok
  • Valamilyen paraméternek 1 trillió különböző permutációját kiszámolni és megjeleníteni 1 másodperc válaszidő alatt
  • Olajipari cég számára olajpumpák életciklusának predikciója, vagyis amortizáció megbecslése adatok alapján
  • A világ egyik legnagyobb háztartásigép-gyártó vállalata számára azt megmondani, hogy az egyes gépek régiók szerint miért mennek tönkre.
  • Autóipari beszállító cég számára azt vizsgálták, hogy egyes biztonságkritikus alkatrészek heggesztése megfelelően történt-e. A heggesztési varratok alapján gépi tanuló algoritmussal mondják meg, hogy megfelelő-e az alkatrész.


A feladat lényegében arról szól, hogy meg kell oldani az ügyfelek üzleti problémáit. Először meg kell érteni, hogy mi is a kérdés, sokat egyeztetni, majd a cél az, hogy jussanak el oda, hogy elkészül a data pipeline. Közben folyamatosan válaszolni kell a felmerülő kérdésekre.
A feladatok szerteágazóak. Van, amikor kutatási jellegű a probléma, mert a válaszok nem evidensek, kutatással és teszteléssel jár a megoldásuk. Persze vannak gyakori hibák, standard, triviális problémák is, amelyeket meg kell tudni oldani.

Egy tanácsadó jellemzően 1-2 projektet visz párhuzamosan, esetenként hármat, de általában kettőnél többet nem lehet elvállalni. A projektek pár héttől akár egy évig is eltarthatnak. Jellemzően 1-2 hónaposak. Általában két napot kell egy héten foglalkozni egy ügyféllel.

Kit keresünk Data Engineering területre?

Lehetsz junior vagy senior, a lényeg, hogy a cél a data engineering legyen. Bármilyen adatbázisos vagy backendes fejlesztői tapasztalatra lehet alapozni. Devops irányból is jöhetsz, lényegében mindegy. Nem elvárás a data engineering tapasztalat, de persze, nem haragszunk meg érte. 🙂 Viszont van pár dolog, ami fontos: 

  • legalább 2 év releváns szoftvermérnöki vagy rendszermérnöki munkatapasztalat
  • Python
  • SQL
  • Linux – felhasználói szinten
  • Tárgyalóképes angol nyelvtudás szóban és írásban
  • Projekt-szemlélet
  • Ügyfél-centrikus hozzáállás, korábbi ügyfélprojekten szerzett tapasztalat

Előnyt jelent, ha bármilyen felhős (AWS, Azure) vagy big data (pl. Hadoop, Apache Spark) tapasztalatod van.

Ha senior/architect/lead data engineer vagy, akkor kattints ide. Ez az ajánlat inkább neked szól.

Praktikus információk

Munkavégzés helye, munkakörülmények

Margit híd budai hídfőnél található, modern lakásiroda.

Munkavégzéssel járó utazás

Erre számítani kell, és valószínűleg lesz is, főleg Európába (UK, skandináv országok, Németország, stb.). A projektek indulásakor előfordulhat, hogy pár naptól 1-2 hétig terjedő időszakot on-site kell tölteni az ügyfélnél, és később is lehet külföldi munkavégzés. Most ez az elképzelés, de a járvány még hozhat változásokat az ügyfelek hozzáállásában is.

Munkaidő

Rugalmas, az irodából és otthonról is lehet dolgozni, de cél az, hogy időnként legyenek együtt a munkatársak, mert így gyorsabb, zökkenőmentesebb a kommunikáció. Az biztos, hogy senki nem fogja nézni, hogy hány órát dolgoztál.

Covid alatt most mindenki távmunkában van.

Foglalkoztatás módja

Főállású munkaviszony, teljes állás.

Fizetés és juttatások

Mivel nagyon változó háttérrel és szintre keresünk, így a megajánlott bér a bérigény és a tudás alapján alakul majd ki. 

(Itt találsz egy indikatív bérsávot, hogy senior data engineer miben tud gondolkodni náluk.)

Egyelőre egyéb juttatások nincsenek. Munkaeszközt, természetesen, biztosítanak. A legtöbben MacBook Pro-t használnak, de szabadon lehet gépet választani.

Az első időszak a tanulásról fog szólni, amikor el kell végezni a Databricks kurzusokat, ami egy több mint 10 ezer dollár értékű képzési csomag. Ha úgy vesszük, tehát, van képzési keret. 🙂

Kiválasztási folyamat

Első körben velem lesz egy beszélgetés, ahol elmeséled a tapasztalataidat, mi az, ami motivál, stb. beszélünk angolul, illetve mesélek még a cégről, válaszolok a kérdéseidre. Ha továbbra is szimpatikus a dolog, továbbítom a pályázatod a két ügyvezetőnek/szakmai vezetőnek.
Ezt követően három körre számíthatsz: 1. intro beszélgetés, 2. szakmai interjú, 3. team interjú

Jelentkezni részletes angol önéletrajzzal tudsz az oldalon található űrlapon keresztül.



A weboldalon "cookie-kat" ("sütiket") használunk, hogy a legjobb felhasználói élményt nyújthassuk látogatóinknak. A cookie beállítások igény esetén bármikor megváltoztathatók a böngésző beállításaiban. További információ

A süti beállítások ennél a honlapnál engedélyezett a legjobb felhasználói élmény érdekében. Amennyiben a beállítás változtatása nélkül kerül sor a honlap használatára, vagy az "Elfogadás" gombra történik kattintás, azzal a felhasználó elfogadja a sütik használatát.

Bezárás