Sisällysluettelo:
Määritelmä - mitä JobTracker tarkoittaa?
JobTracker on demoni, joka toimii Apache Hadoopin MapReduce-moottorilla. JobTracker on tärkeä palvelu, joka ylläpitää kaikki MapReduce-tehtävät klusterin eri solmuille, mieluiten niille solmuille, jotka jo sisältävät tiedot tai ainakin sijaitsevat samassa telineessä kuin tiedot sisältävät solmut.
Techopedia selittää JobTrackerin
JobTracker on Hadoopin palvelu, joka vastaa asiakaspyyntöjen vastaanottamisesta. Se määrää ne DataNodes-sovelluksen TaskTrackers-sovelluksille, joissa vaaditut tiedot ovat paikallisesti läsnä. Jos tämä ei ole mahdollista, JobTracker yrittää osoittaa tehtävät TaskTrackersille samassa telineessä, jossa tiedot ovat paikallisesti läsnä. Jos jostain syystä tämä myös epäonnistuu, JobTracker antaa tehtävän TaskTrackerille, jossa on tietojen kopio. Hadoopissa datalohkoja replikoidaan DataNodes-järjestelmissä redundanssin varmistamiseksi, joten jos klusterin yksi solmu epäonnistuu, työ ei myöskään epäonnistu.
JobTracker-prosessi:
- JobTracker vastaanottaa työhakemukset asiakassovelluksista,
- JobTracker pyytää NameNode-koodia tarvittavien tietojen sijainnin määrittämiseksi.
- JobTracker etsii TaskTracker-solmut, jotka sisältävät tietoja tai ainakin ovat datan lähellä.
- Työ lähetetään valittuun TaskTrackeriin.
- TaskTracker suorittaa tehtävänsä JobTrackerin tarkkailemana. Jos työ epäonnistuu, JobTracker yksinkertaisesti lähettää työn toiselle TaskTrackerille. JobTracker itse on kuitenkin yksi virhekohta, mikä tarkoittaa, että jos se epäonnistuu, koko järjestelmä menee alas.
- JobTracker päivittää tilansa, kun työ on valmis.
- Asiakaspyynnön esittäjä voi nyt kysyä tietoja JobTrackerista.
