hadoop

6ısı

1cevap

Küçük veri kod çalıştırdığınızda, aşağıdaki hatayı alamıyorum. Ama aynı kodu daha büyük bir veri kümesinde çalıştırdığımda birden fazla çıktı kullanırken aşağıdaki hatayı alıyorum. Pls Yardım! public

5ısı

4cevap

Sysdate -1 ini al Kovanı

Her zaman Hive yesterdays date anlamına gelir current date -1 almak için herhangi bir yolu var mı? Ve bu formatta - 20120805? Bugün Aug 6th olduğu gibi yesterday's date ilişkin verileri almak için böy

6ısı

1cevap

Hadoop tüm redüktörlere kayıt gönder

Tüm redüktörlerime belirli bir kaydı nasıl gönderebilirim? Partitioner sınıfını ve ne yaptığını biliyorum, ancak kayıtların tüm redüktörlere gittiğinden emin olmanın kolay bir yolunu göremiyorum. Teme

30ısı

2cevap

aşağıda çıktısını alabilirsiniz bir yolu var mı bu kovan Tablo aşağıda</p> <pre><code>CREATE EXTERNAL TABLE IF NOT EXISTS SampleTable ( USER_ID BIGINT, NEW_ITEM ARRAY<STRUCT<PRODUCT_ID: BIGINT,TIMESTAMPS:STRING>> ) </code></pre> <p>olan Hive

yılında Struct dizisi Patlat Ve bu yukarıdaki masanın 1015826235 [{"product_id":220003038067,"timestamps":"1340321132000"},{"product_id":300003861266,"timestamps":"1340271857000"}] yılında veridir

6ısı

2cevap

Ben mrjob kullanarak bir harita işlevi yazıyorum Nasıl MRjob

giriş dosyasının adını alır. Girişim HDFS'deki bir dizindeki dosyalardan gelecek. Dosya adlarında, dosyalarda bulunmayan küçük ancak önemli bir parça bilgisi bulunur. Belirli bir anahtar-değer çiftini

5ısı

1cevap

System from Hbase MapReduce

için kısa metin dosyası okuyun. Metin dosyasından Map Reduce'a veri yüklemem gerekiyor, Günlerce gözümü kırpıyorum ama işim için doğru bir çözüm bulamadım. Bir sistemden bir metin/csv dosyası okuyan v

20ısı

1cevap

Site yöneticisi üzerinden karışıklık izleyicisi api

İş izleyiciden bazı bilgileri toplamaya çalışıyorum. Yeni başlayanlar için, mesela iş kimliği veya iş adı vb Ama zaten sıkışmış olarak çalışan işleri hakkında bilgi alma ile başlamak istiyorum, burada

7ısı

1cevap

Python Hadoop akışı: Ayar bir işin adı

kullanıyorum benim küme üzerinde çalışan bir iş var Hadoop-akışı nasıl geçebilir, Ben bir iş adı eklemek istediğiniz yeni bir işe başlamak zorunda Bir iş adı kurmak için komut satırı veya dosyadaki bu

5ısı

1cevap

Start -dfs.sh kullanarak daemon başlatılamıyor

Cloudera'dan cdh4-0.0 dağılımı kullanıyoruz. Aşağıdaki komutları kullanarak daemonları başlatamıyoruz. >start-dfs.sh Starting namenodes on [localhost] [email protected]'s password: localhost: mkdir

13ısı

2cevap

Hadoop Dosya Sistemi'nde birden çok dosya arasında Grep

Hadoop ile çalışıyorum ve Hadoop dosya sistemimde ~ 100 dosyadan hangisinin belirli bir dizgi içerdiğini bulmam gerekiyor. Bu gibi çeşitli girişler verdiği ..which bash-3.00$ hadoop fs -ls /apps/mdhi-