hadoop

6ısı

1cevap

Birden çok dizinden ve dosyadan dosya alınıyor olabilir

Dosya girdisi olarak, dosya girdisi olarak ayarladım. arg[0]+"/*/*/*", hiçbir dosyayla eşleşmediğini söyledi. ne istiyorum gibi birden dosyalarından okumaktır: Directory1 ---Directory11 ---Dir

5ısı

1cevap

Hadoop: core-site.xml içinde varsayılan FileSystem'i HDFS olarak ayarlayamıyor

Hadoop 1.0.3'ü Pseudo-Distributed modunda kullanıyorum. aşağıdaki gibi Ve benim conf/çekirdek-site.xml dosyasını ayarlanır: <configuration> <property> <name>fs.default.name</name> <va

12ısı

3cevap

Kovan sorgusu içindeki girdi dosyası adını sütun olarak nasıl girilir

Bazı dizine eşlenen bir dış tablo var. Bu dizinde birkaç dosya bulunmaktadır. Bir kullanıcı "abc" select file_name , usr from usrs_tables where usr = "abc" Ama tabii veri içindeki dosya adını içerir

6ısı

3cevap

Hive desteklemiyor, mevcut. Aşağıdaki sorguyu nasıl yazarım?

Her ikisinde de bir sütun kimliğine sahip iki A ve B tablosu var. Bariz bir şekilde B. bulunmaz A'dan kimlikleri almak isteyen: SELECT id FROM A WHERE id NOT IN (SELECT id FROM B) Maalesef kovan içi

7ısı

1cevap

zincirleme Çok İndirgenler

Şimdi bir 4 fazlı MapReduce iş var: Input-> Map1 -> Reduce1 -> Reducer2 -> Reduce3 -> Reduce4 -> Output Ben Hadoop içinde ChainMapper sınıf olduğunu fark hangi can büyük bir eşleştiricisindeki içine

9ısı

3cevap

hadoop kaynaktan inşa edilemedi

Kaynaktan hadoop-2.0.4-alpha oluşturmaya çalışıyorum..in ubuntu 13.04 Benim maven 3.0.5'im var, protobuf (libprotoc 2.4.1), cmake (2.8.10.1) ben bu occured: stylesheet /home/hadoop/hadoop-2.0.4-alpha-

13ısı

1cevap

Tür uyumsuzluğu: beklenen org.apache.hadoop.io.NullWritable, alınan org.apache.hadoop.io.Text

benim ihtiyaçlarını karşılamak için mevcut bir sorunu çimdik çalışıyorum .. Temelde giriş .. basit metin bunu işlemek ve redüktör için anahtar/değer çiftini geçirmeleri ve ben bir json oluşturmak yani

5ısı

2cevap

Hadoop'ta, TextOutputFormat

için kayıt sınırlayıcıyı belirtmek mümkündür. Mapreduce.textoutputformat.separator (api'nin 1.03'ü kullanarak) kullanarak anahtar ve değer arasındaki sınırlayıcıyı geçersiz kılacak bir mekanizma görüy

5ısı

1cevap

Mapreduce

içinde job.setInputFormatClass ayarı yapılırken bir hata MapReduce programı çalıştırıyorum. KEYVALUE çifti biçiminde giriş metin dosyası vermem gerekiyor. böylece ben Tutulma derleyici ben InputFormat

6ısı

2cevap

Cloudera yöneticisi olmadan cloudera impala yükleme

Lütfen cloudera yöneticisi olmadan ubuntu'da imapala'yı kurmak için bağlantı sağlayın. Resmi bağlantıyla yüklenemedi. sudo apt-get install impala # Binaries for daemons sudo apt-get install impala