Matokeo ya kazi ya Ramani au ramani (jozi za thamani-msingi) ni ingizo kwa Kipunguzaji Kipunguzaji hupokea jozi ya thamani-msingi kutoka kwa kazi nyingi za ramani. Kisha, kipunguzaji hujumlisha nakala hizo za data za kati (jozi ya kati-thamani ya ufunguo) katika seti ndogo ya vinyago au jozi za thamani-msingi ambayo ndiyo pato la mwisho.
Watengeneza ramani na vipunguza ramani hufanya nini?
Hadoop Mapper ni chaguo la kukokotoa au kazi ambayo hutumika kuchakata rekodi zote za ingizo kutoka kwa faili na kutoa matokeo ambayo hufanya kazi kama ingizo la Reducer Hutoa pato kwa kurudisha mpya. jozi muhimu-thamani. … Mchora ramani pia hutengeneza baadhi ya data ndogo wakati wa kuchakata rekodi za ingizo kama jozi ya thamani-msingi.
Kuna tofauti gani kati ya ramani na kipunguza ramani?
Nini Tofauti Kubwa Kati ya Mapper na Reducer? Kazi ya Mapper ni awamu ya kwanza ya kuchakata ambayo huchakata kila rekodi ya ingizo (kutoka RecordReader) na kutoa jozi za thamani ya ufunguo wa kati. Mbinu ya kupunguza inaitwa kando kwa kila jozi ya orodha ya funguo/thamani.
Unahesabuje idadi ya wachora ramani na vipunguza?
Inategemea ni kori ngapi na una kumbukumbu ngapi kwa kila mtumwa. Kwa ujumla, mchora ramani mmoja anapaswa kupata cores 1 hadi 1.5 za vichakataji Kwa hivyo ikiwa una cores 15 basi mtu anaweza kuendesha Ramani 10 kwa kila Nodi. Kwa hivyo ikiwa una nodi 100 za data kwenye Hadoop Cluster basi mtu anaweza kuendesha Ramani 1000 kwenye Kundi.
Je, utendakazi wa Mapper hufanya kazi vipi?
Mapper ni chaguo la kukokotoa ambalo kuchakata data ya ingizo Mchora ramani huchakata data na kuunda vipande kadhaa vidogo vya data. Ingizo kwa chaguo za kukokotoa ramani ni katika mfumo wa (ufunguo, thamani) jozi, ingawa ingizo la programu ya MapReduce ni faili au saraka (ambayo imehifadhiwa katika HDFS).
