hadoop

38ısı

1cevap

Cassandra, Membase, Hadoop, MongoDB, RDBMS vb. Arasında nasıl seçim yapılır?

Cassandra ya da Membase ya da Hadoop ya da düz eski ilişkisel veritabanlarını ne zaman kullanacağınız hakkında bir gazete/blog yazısı var mı? Her birinin güçlü ve zayıf yönlerini tartışan bir makale v

5ısı

1cevap

Elastik Harita üzerinde Pig ile Dağıtılmış Önbellek Kullanma

Azaltın Amazon'un Elastik Harita Azaltmasında Pig komutumu (UDF'leri kullanan) çalıştırmaya çalışıyorum. UDF'lerimden bazı statik dosyaları kullanmam gerekiyor. benim UDF böyle bir şey yapmak: Ben Dom

8ısı

1cevap

Hamur sıralı dosya nasıl okunur?

Sahte harita küçültme işinin çıktısı olan bir sıralı dosyam var. Bu dosyada veriler anahtar değer çiftlerine yazılır ve değer kendisini bir haritadır. Değeri daha fazla işleyebilmemiz için değeri MAP

9ısı

7cevap

Hadoop: Birim testi nasıl yapılır FileSystem

Birim testini çalıştırmak istiyorum ancak org.apache.hadoop.fs.FileSystem örneğim olması gerekiyor. Dosya sistemi oluşturmak için herhangi bir sahte veya başka bir çözüm var mı?

30ısı

1cevap

'hadoop dfs' ve `hadoop fs`

arasındaki fark dfs komutunu gördüm, sonra belgelere gittim ama anlayamıyorum. Bakış açımda fs ve dfs benzer şekilde çalışıyor. Herhangi biri tam bir fark verir mi?

6ısı

1cevap

Bölme Sırası Denetimli bir şekilde - Hadoop

hadoop, SequenceFile anahtar-değer çifti (kayıt) biçiminde yazar. Büyük bir sınırsız günlük dosyasına sahip olduğumuzu düşünün. Hadoop dosyayı blok büyüklüğüne göre böler ve çoklu veri düğümlerine kay

8ısı

2cevap

Domuz toplu olmayan uyarılar çıktı konumu?

Pig: 0.8.1-cdh3u2 Hadoop: 0.20.2-cdh3u0 Hata ayıklama FIELD_DISCARDED_TYPE_CONVERSION_FAILED uyarıları, ancak her yerde tek tek uyarılar yazdıramıyor gibi görünmüyor. Toplamanın -w veya aggregate.w

6ısı

1cevap

Yanlış anahtar sınıfı: problem olmasıdır Metin

Bu aptal bir soru gibi görünse IntWritable değil, ama söz konusu belirtildiği gibi ben Hadoop benim mapreduce kodunda benim türlerinde sorunu görmek için başarısız Intwritable bekleniyor ama redüktörü

10ısı

2cevap

Hadoop Merhaba Dünya Örneği ve Giriş

Apache Hadoop hakkında yoğun taksileri işlemek için harika bir yol olarak çok şey duyuyorum. Hadoop'a gerçekten basit bir giriş yapmak. helloworld eşdeğeri gibi ve belki bir örnek kullanım durumu. Bir

8ısı

2cevap

mapred.reduce.parallel.copies nasıl ayarlanır?

http://gbif.blogspot.com/2011/01/setting-up-hadoop-cluster-part-1-manual.html'u okuduktan sonra, mapred.reduce.parallel.copies ile deneme yapmak istiyoruz. Blog "günlüklerde çok dikkatli görünüyor" da