mapreduce

6ısı

2cevap

Mevcut MapReduce ve YARN (MRv2)

arasındaki farklar Var mıdır? Var olan MapReduce ve YARN arasındaki farklar nelerdir, çünkü bu ikisi arasındaki tüm açık farklılıkları bulamadım. P.S: Bunlar arasında bir karşılaştırma yapmak istiyoru

hadoop mapreduce yarn 2013-08-27

---

5ısı

1cevap

Domuz java.lang.NoSuchFieldException: jobsInProgress istisnası

CDH4 ile pig-0.11.0 + 28 kullanıyorum ve herhangi bir Domuz işi çalıştırdığımda bu özel durumu alıyorum. Yerel modda da olurum. Herhangi bir fikir? 2013-07-08 13:53:44,035 [main] WARN org.apache.pig.b

hadoop mapreduce apache-pig 2013-07-08

---

5ısı

2cevap

Hadoop - çoklu girişleri nasıl kullanır ve azaltır?

Mapper/Reducer 1 --> (key,value) / | \ / | \ Mapper/Reducer 2 | Mapper/Reducer 4 -> (oKey,oValue) | -> (xKey, xValue) | | Mapper/Reducer 3

java hadoop mapreduce 2013-04-11

---

7ısı

1cevap

zincirleme Çok İndirgenler

Şimdi bir 4 fazlı MapReduce iş var: Input-> Map1 -> Reduce1 -> Reducer2 -> Reduce3 -> Reduce4 -> Output Ben Hadoop içinde ChainMapper sınıf olduğunu fark hangi can büyük bir eşleştiricisindeki içine

java hadoop mapreduce 2013-06-01

---

13ısı

1cevap

Tür uyumsuzluğu: beklenen org.apache.hadoop.io.NullWritable, alınan org.apache.hadoop.io.Text

benim ihtiyaçlarını karşılamak için mevcut bir sorunu çimdik çalışıyorum .. Temelde giriş .. basit metin bunu işlemek ve redüktör için anahtar/değer çiftini geçirmeleri ve ben bir json oluşturmak yani

java hadoop mapreduce 2013-06-04

---

5ısı

1cevap

Mapreduce

içinde job.setInputFormatClass ayarı yapılırken bir hata MapReduce programı çalıştırıyorum. KEYVALUE çifti biçiminde giriş metin dosyası vermem gerekiyor. böylece ben Tutulma derleyici ben InputFormat

java hadoop mapreduce 2013-06-06

---

5ısı

2cevap

Harita() için LongWritable tuş girişi nedir?

Her biri 1 MB'lık 2 adet metin dosyası, HDFS'de MapReduce programımın girdisi olarak saklanır. Aşağıdaki satırda, harita() için giriş çiftini göz önünde bulundururuz. class Map extends MapReduceBase i

mapreduce 2013-06-08

---

27ısı

3cevap

Hadoop'ta NullWritable kullanmanın avantajları

null anahtarları/değerleri için null metinlerini (yani new Text(null)) kullanarak NullWritable kullanmanın avantajları nelerdir? «Hadoop: Kesin Kılavuz» kitabından aşağıdakileri görüyorum. bu, sıfır u

java hadoop mapreduce 2013-04-24

---

33ısı

1cevap

gzip desteği Spark

Büyük Veri projesi için, tekrarlanan iş yükleri için bellek içi hesaplamalar gibi bazı güzel özelliklere sahip olan spark kullanmayı planlıyorum. Yerel dosyalarda veya HDFS'nin üstünde çalışabilir. An

java scala mapreduce gzip apache-spark 2013-04-30

---

5ısı

2cevap

Zincirleme ile Hadoop MapReduce (C++)

İki MapReduce'u Pipes API ile nasıl zincirleyeceğini bilen var mı? Zaten JAVA ile önceki bir projede iki MapReduce zinciri var, ancak bugün C++ kullanmam gerekiyor. Maalesef C++ 'da hiç örnek görmedim

c++ hadoop mapreduce chain 2013-03-16

---