హడూప్ జాబ్ టాకర్
జాబ్ ట్రాకర్ అనేది ఉద్యోగ వనరుల నిర్వహణ మరియు ఉద్యోగాల షెడ్యూల్ / పర్యవేక్షణ రెండింటికీ మాస్టర్ డెమోన్. ఇది హడూప్ మరియు మీ అప్లికేషన్ మధ్య అనుసంధానంగా పనిచేస్తుంది.
ప్రక్రియ
క్లయింట్‌కు ఉద్యోగాన్ని సమర్పించే ముందు యూజర్ మొదట ఫైల్‌లను డిస్ట్రిబ్యూటెడ్ ఫైల్ సిస్టమ్ (డిఎఫ్‌ఎస్) కు కాపీ చేస్తాడు. క్లయింట్ ఈ ఇన్పుట్ ఫైళ్ళను అందుకుంటాడు. వినియోగదారు ఇన్పుట్ ఫైళ్ళ ఆధారంగా చీలికలు లేదా బ్లాకులను స్వీకరిస్తారు.క్లయింట్ చేయగలడుమనిషిలో చీలికలు లేదా బ్లాకులను సృష్టించండిner it prefers, దాని వెనుక కొన్ని పరిగణనలు ఉన్నాయి. పూర్తి డేటాపై విశ్లేషణ జరిగితే, మీరు డేటాను విభజిస్తారు. ఫైళ్ళు క్లయింట్ ద్వారా కాపీ చేయబడవు, కానీ ఫ్లూమ్ లేదా స్కూప్ లేదా ఏదైనా బాహ్య క్లయింట్ ఉపయోగించి కాపీ చేయబడతాయి.
ఫైల్స్ DFS కు కాపీ చేయబడి, క్లయింట్ DFS తో ఇంటరాక్ట్ అయిన తర్వాత,చీలికలు మ్యాప్‌రెడ్యూస్ j ను అమలు చేస్తాయిob. జాబ్ ట్రాకర్ ద్వారా ఉద్యోగం సమర్పించబడుతుంది. జాబ్ ట్రాకర్ అనేది మాస్టర్ డీమన్, అదే నోడ్‌లో నడుస్తుందిపరుగులుడేటా నోడ్లలో ఈ బహుళ ఉద్యోగాలు. ఈ డేటా వివిధ డేటా నోడ్లలో ఉంటుంది, కాని దానిని జాగ్రత్తగా చూసుకోవడం జాబ్ ట్రాకర్ యొక్క బాధ్యత.
క్లయింట్ సమర్పించిన తర్వాతజాబ్ ట్రాకర్, జాబ్ క్యూలో ఉద్యోగం ప్రారంభించబడుతుంది మరియు జాబ్ ట్రాకర్ మ్యాప్‌లను సృష్టిస్తుంది మరియు తగ్గిస్తుంది. మ్యాప్ ఫంక్షన్‌లో ఉన్న ప్రోగ్రామ్ ఆధారంగా మరియు ఫంక్షన్‌ను తగ్గిస్తే, ఇది మ్యాప్ టాస్క్‌ను సృష్టిస్తుంది మరియు టాస్క్‌ను తగ్గిస్తుంది. ఈ రెండు ఇన్పుట్ స్ప్లిట్లలో నడుస్తాయి. గమనిక: క్లయింట్లు సృష్టించినప్పుడు, ఈ ఇన్పుట్ స్ప్లిట్ మొత్తం డేటాను కలిగి ఉంటుంది.
php శ్రేణిని ఎలా ముద్రించాలో
ప్రతి ఇన్పుట్ స్ప్లిట్లో మ్యాప్ జాబ్ నడుస్తుంది మరియు మ్యాప్ టాస్క్ యొక్క అవుట్పుట్ తగ్గించే పనిలోకి వెళుతుంది. జాబ్ ట్రాకర్ ఒక నిర్దిష్ట డేటాపై ట్రాక్‌ను నడుపుతుంది. దాని యొక్క బహుళ ప్రతిరూపాలు ఉండవచ్చు, కనుక ఇది స్థానిక డేటాను ఎంచుకుంటుంది మరియు నిర్దిష్ట టాస్క్ ట్రాకర్‌లో పనిని నడుపుతుంది. టాస్క్ ట్రాకర్ వాస్తవానికి డేటా నోడ్‌లో టాస్క్‌ను నడుపుతుంది. జాబ్ ట్రాకర్ పాస్ అవుతుందిసమాచారంటాస్క్ ట్రాకర్‌కు మరియు టాస్క్ ట్రాకర్ డేటా నోడ్‌లో పనిని అమలు చేస్తుంది.
టాస్క్ ట్రాకర్‌కు ఉద్యోగం కేటాయించిన తర్వాత, ప్రతి టాస్క్ ట్రాకర్ మరియు జాబ్ ట్రాకర్‌తో సంబంధం ఉన్న హృదయ స్పందన ఉంటుంది. డేటా నోడ్లు ఇంకా సజీవంగా ఉన్నాయో లేదో తెలుసుకోవడానికి ఇది సంకేతాలను పంపుతుంది. నోడ్లు మసకబారే అవకాశం ఉన్నందున రెండూ తరచుగా సమకాలీకరిస్తాయి.
c లో లింక్డ్ జాబితాను అమలు చేయండి
మాకు ప్రశ్న ఉందా? వ్యాఖ్యల విభాగంలో వాటిని ప్రస్తావించండి మరియు మేము మిమ్మల్ని సంప్రదిస్తాము.
సంబంధిత పోస్ట్లు: