mapreduce

10ısı

2cevap

Var olan mapreduce işini kümeden alma (iş çalışıyor veya tamamlanmış olabilir)

Önceden, RunningJob'u almak için org.apache.hadoop.mapred.JobClient#getJob(org.apache.hadoop.mapred.JobID) kullanıyordum. Bu çağrı, iş tamamlama geri çağırma yönteminden yapıldı, ancak bana göre, işin

8ısı

2cevap

Kelime sayımı mapreduce işi yürütülürken InterruptedException var

Makinemdeki Cloudera VM sürüm 5.8'i yükledim. Kelime sayımı mapreduce işini çalıştırdığımda, istisna aşağıda atar. `16/09/06 06:55:49 WARN hdfs.DFSClient: Caught exception java.lang.InterruptedExcept

0ısı

1cevap

Satırları

numaralı sütundaki sütunlara dönüştürün Mapceduce gerçekleştirmek için Wikipedia Veri Kümesini kullanıyorum. Kullanmakta olduğum veri kümesi (Vikipedi Wiki ad alanı) here'dan. Bu REVISION 724 234015 W

-1ısı

1cevap

Mongo toplama sorgusu

İlginç bir sorum var. Örneğin, start_date ve end_date ile bir mongo koleksiyonum var. Çakışan tarihlere sahip bir dizi diziyi döndürecek bir toplama sorgusu (veya mapReduce) oluşturmam gerekiyor. Örne

1ısı

1cevap

lxml

kullanarak her öğede xmlns nasıl denetlenir Ürün öğeleri bir MapReduce işinde akış olarak kontrol etmek için lxml kullanıyorum. Her öğede yalnızca doğru xmlns değerinin bulunduğundan emin olmaya çalış

1ısı

1cevap

MongoDB regex Array ile arama

Veritabanından 1000s kayıtlardan veri almak için bir mantık arıyorum. Uygulama düzeyinde yapamam. "ll, gg, ss, ff ..." gibi iki çift harfi biten verilerim var. DB'den yukarıdaki ikiz karakterlerle bit

6ısı

1cevap

Couchbase'deki veriler harita ile nasıl birleştirilir?

Uygulamam, aynı grupta birden çok belge türü saklıyor. İyi bir uygulama olmadığını biliyorum, ancak sunucumda kaç tane kepçe oluşturabildiğim konusunda bir sınırım var ve şu anda bunun etrafında bir y

6ısı

1cevap

Karıştır ve sıralama MapReduce

için ben kesin Rehberi okuduysanız ve tam karıştırma ve gerçekleşmesi sıralama gelmez nerede bir here sorum Web'deki diğer bazı bağlantılar mı? benim anlayış başına gelince, onlar haritacılarla ve düş

5ısı

1cevap

Java

'daki MapReduce'un girdi ve çıktılarının sayısını alın Harita aşamasının giriş ve çıkışlarının sayısını, azaltma aşamasını ve tüm eşleme/azaltma işini Java ile elde etmek istiyorum. Bu istatistikler T

5ısı

1cevap

mongoDB'deki dizi öğelerinin üst sayıları nasıl korunur?

Belirli bir öğenin ilk iki (veya başka bir sayı) sayımını verilen koleksiyondan elde etmenin bir yolunu arıyorum. {"id": "xyz" , "fruits": ["Apple", "Mango"]} {"id": "abx", "fruits": ["Apple", "Banan