hadoop

5ısı

1cevap

Neden çıktı anahtarı/değer sınıfını Hadoop programında açık olarak ayarlamamız gerekiyor?

"Hadoop: Kesin Kılavuz" kitabında, aşağıdaki kodla birlikte bir örnek program vardır. JobConf conf = new JobConf(MaxTemperature.class); conf.setJobName("Max temperature"); FileInputFormat.addInputPa

5ısı

2cevap

Hive/hadoop, her bir mapper'ın bunun için yerel veriler üzerinde çalışmasını nasıl sağlar?

2 temel soru bu beni: nasıl 32 dosya kovanın her biri eşsiz makinede benim tabloları saklamak için oturur kullandığından emin olabiliriz? Eğer bu gerçekleşirse, nasıl kovan 32 haritacıları oluşturursa

5ısı

1cevap

MapReduce iş yürütme sırasında konsolda nasıl yazdırılır hadoop

Konsolu gerçekleştirdikten sonra "haritam" adımlarını yazdırmak istiyorum. şey System.out.println ("Adım biri Tamamlandı") gibi; System.out.println ("Tamamlanmış Adım iki"); ve böylece bunu yapmak içi

17ısı

2cevap

String.getBytes() ve Bytes.toBytes (String verileri) arasındaki fark

Hadoop/HBase işi yazıyorum. Bir Java String bir bayt dizisine dönüştürmem gerekiyordu. Java'nın String.getBytes() ve Hadoop'un Bytes.toBytes() arasında herhangi bir fark var mı?

5ısı

1cevap

Python Streaming: çoklu çıkışlara nasıl indirilir (Java ile mümkün olsa)

Hadoop in Action'i okudum ve Java ve MultipleOutputs sınıflarını kullanarak Java'in verileri birden fazla dosyaya indirebileceğimizi fakat Python streaming kullanarak aynı şeyi nasıl elde edeceğimi bi

5ısı

1cevap

Hadoop nasıl kaldırılır?

Mac OSX kullanarak ve kaldırmak için/yüklemek yeniden istemek (temiz) Hadoop bana normal izlediyseniz , size

7ısı

1cevap

Özel MapReduce Giriş Biçimi - Oluşturucu Bulamıyor

Hadoop 0.20.2 için özel bir InputFormat yazıyorum ve bir NoSuchMethodException çalışıyorum. çalıştırırken bu hata var public class ConnectionInputFormat extends FileInputFormat<Text, Connection> {

6ısı

1cevap

Nutch üzerinde EMR problemi okuma S3'den itibaren

Merhaba Amazon'un EMR'sinde Apache Nutch 1.2 çalıştırmaya çalışıyorum. Bunu yapmak için S3'ten bir giriş dizini belirtiyorum. Aşağıdaki hatayı alıyorum: Fetcher: java.lang.IllegalArgumentException:

13ısı

2cevap

apache mahout'unu hadoop bağımlılığı olmadan kullanmak mümkün mü?

Hadoop'a bağımlı olmadan Apache mahout kullanmak mümkün mü? Tek bir bilgisayarda mahout algoritmasını sadece Java projemdeki mahout kütüphanesi dahil olmak üzere kullanmak istiyorum ancak her halükard

6ısı

1cevap

Hadoop MapReduce ara çıkışı

Uygulamayı düzenlemeden MapReduce İşinin ara (Map Phase) çıktısını günlüğe kaydetmek için çıkış yolu var mı? (Uygulama benim değil, küme ve istediğim şekilde Hadoop Kümesini kurabilirim)