Haritadan gruplandırılmış verilerle yöntem anlaşmalarını azaltın. Ama merak ediyorum, görevleri azaltmak grup verilerini nasıl alır? Eğer haritalar gruplanmış birçok veriyi çıkarırsa, her birinin görevi azaltmak aynı grupları gruplar mı? Mekanizma nedir?hadoop'un harita gruplandırılmış verileriyle görevleri nasıl azaltacağını gösterir
0
A
cevap
0
Görevler grup verilerini nasıl alır?
O Karışık Şarkı ele alınır ve Sıralama haritacılar tarafından gönderilen bu phasedData sırasında faz
, nihayet elde tuşu, List <> sonucu ((anahtar) tarafından grup gibi) tuşu göre gruplandırılmıştır. Sonuç redüktörlere gönderilir. Eğer sonuçların farklı redüktörlere gönderilmesi gerekiyorsa, Shuffle ve Sort Phase'dan farklı bir faz olan bölüm fazına dikkat edilir.
Bu aşama, Hadoop çerçevesiyle yapılır ve bildiğim kadarıyla bu aşama hakkında yapacak veya değiştirecek bir şeyiniz olmadığını bilirsiniz.
da bu soruya What is the purpose of shuffling and sorting phase in the reducer in Map Reduce Programming?
bakmak önermek