hadoop

13ısı

6cevap

Hadoop-.20 api'de KeyValueTextInputFormat Ayırıcı nasıl belirlenir?

Yeni API'de (apache.hadoop.mapreduce.KeyValueTextInputFormat), anahtar ve Değer'i ayırmak için sekme dışındaki (ayırıcı) ayırıcı (sınırlayıcı) belirtme. Örnek Giriş: one,first line two,second line

5ısı

2cevap

PDF dosyalarını Hadoop Map'de ayrıştırma

Hadoop'ta bir Harita Azaltma Programında HDFS olan PDF dosyalarını ayrıştırmak zorundayım. Bu yüzden PDF dosyasını HDFS'den Giriş bölü olarak aldım ve ayrıştırılmalı ve Mapper Sınıfına gönderilmelidir

6ısı

1cevap

Kovan nasıl eş zamanlı olarak eşleştirilir?

Ben kovanına yeniyim ve ben bir sorunla karşılaştık, böyle kovanında bir tablo vardır: create table td(id int, time string, ip string, v1 bigint, v2 int, v3 int, v4 int, v5 bigint, v6 int) PARTITIONE

5ısı

1cevap

Bir takograf aracı için ek sınıf yolu ayarlama

Kavanozların bir hadoop araç sınıfından erişilebilir olması için ek bir sınıf yolunu dinamik olarak nasıl kurabilirim? İşimi "hadoop jar" ile çalıştırıyorum. Ne yazık ki sadece mappers ve redüktörler

7ısı

4cevap

HDFS vs GridFS: Hangi özelliği kullanmalı?

HDFS ve GridFS, dağıtılmış dosya tasarrufu için iki harika teknolojidir, ancak bunların farklılıkları nelerdir? Ne tür problemler her birine daha uygun?

38ısı

6cevap

Süreç testi için söz konusu süreçte bir zookeeper sunucu örneği başlatılabilir mi?

call org.apache.zookeeper.server.quorum.QuorumPeerMain.main() çalışmıyor.

12ısı

1cevap

HDFS'den HBase'ye (cdh3u2) veri alma

Yüklü hadoop ve hbase cdh3u2 var. Hadoop'da /home/file.txt yolunda bir dosyam var. Bu dosyayı hbase içine almak istiyorum. Bu durumda, ilk alan String olarak ayrıştırılmalı ve 2. alan tamsayı olarak a

5ısı

2cevap

Gruplanmış kayıtları Pig ile birden çok dosyada nasıl depolanır?

Kayıtları yükledikten ve gruplandırdıktan sonra, bu gruplandırılmış kayıtları, grup başına bir (= kullanıcı) olan birkaç dosyaya nasıl kaydedebilirim? belirtilen bir özelliğe göre kayıtları böler - re

22ısı

4cevap

MapReduce alternatifleri

MapReduce (Google, Hadoop) için alternatif paradigmalar var mı? &'u bölmek için büyük problemleri birleştirmenin başka bir yolu var mı?

10ısı

2cevap

hadoop çıktı dosyalarına nasıl özel bir ad verilir

Çıkış dosyalarını 2012117-part-r-00000 biçiminde istiyorum. Temel olarak, çıktı dosyasının tarihe göre olmasını istiyorum, böylece dosyaları tarihe göre düzenleyebilirim. OutputFormat ve FileOutputFor