hdfs

5ısı

1cevap

HDFS, dosyanın hala açık olduğunu, ancak işlemin yazıldığı tarihte

öldürülmüştüm hadoop için yeni durumdayım ve geçen birkaç saati bu konuyla ilgilenmeye çalıştım, ancak yardımcı olan hiçbir şey bulamadım. Benim sorunum HDFS'nin, dosyaya yazma işleminin uzun süre ölm

7ısı

2cevap

PIG'deki UNION sonuçlarını tek bir dosyada saklamak

Dört sonuç üreten bir PIG Komut Dosyası sahibiyim Hepsini tek bir dosyada saklamak istiyorum. UNION kullanmayı denedim, ancak UNION kullandığımda dört dosya bölümü m-00000, part-m-00001, part-m-00002,

6ısı

5cevap

Hadoop

ile büyük boyutlu küçük dosyaların işlenmesi Hadoop örnek programı WordCount kullanarak büyük boyutlu küçük dosya/web sayfalarını (cca. 2-3 kB) işlemek için kullanıyorum. Bu, hadoop dosyaları için en

5ısı

1cevap

Bu Hadoop dosya sistemi yükleme hatasını nasıl çözebilirim?

Hadoop'u Cloudera Ubuntu olmayan bir test görüntüsüne yüklemeye çalışıyorum. Her şey ben ./bin/start-all.sh koştu kadar iyi gidiyor gibi görünüyor. İsim düğümü asla çıkmıyor, bu yüzden dosya sistemine

27ısı

4cevap

HDFS dosyaları varsayılan olarak yerel olarak depolar?

Tek düğümlü küme ile varsayılan yapılandırmada hadoop çalıştırıyorum ve HDFS'nin dosyaları yerel olarak nerede sakladığını bulmak istiyorum. Herhangi bir fikrin var mı? Teşekkürler.

7ısı

4cevap

HDFS vs GridFS: Hangi özelliği kullanmalı?

HDFS ve GridFS, dağıtılmış dosya tasarrufu için iki harika teknolojidir, ancak bunların farklılıkları nelerdir? Ne tür problemler her birine daha uygun?

8ısı

3cevap

Hadoop Mapreduce Programının çıktısını program aracılığıyla okumak

Bu temel bir soru olabilir, ancak Google’da bunun için bir yanıt bulamadım. Çıkış dizininde birden çok çıktı dosyası oluşturan bir harita küçültme işim var. Java uygulamam bu işi uzak bir çalışan dizi

12ısı

1cevap

HDFS'den HBase'ye (cdh3u2) veri alma

Yüklü hadoop ve hbase cdh3u2 var. Hadoop'da /home/file.txt yolunda bir dosyam var. Bu dosyayı hbase içine almak istiyorum. Bu durumda, ilk alan String olarak ayrıştırılmalı ve 2. alan tamsayı olarak a

5ısı

2cevap

Hive/hadoop, her bir mapper'ın bunun için yerel veriler üzerinde çalışmasını nasıl sağlar?

2 temel soru bu beni: nasıl 32 dosya kovanın her biri eşsiz makinede benim tabloları saklamak için oturur kullandığından emin olabiliriz? Eğer bu gerçekleşirse, nasıl kovan 32 haritacıları oluşturursa

5ısı

1cevap

Start -dfs.sh kullanarak daemon başlatılamıyor

Cloudera'dan cdh4-0.0 dağılımı kullanıyoruz. Aşağıdaki komutları kullanarak daemonları başlatamıyoruz. >start-dfs.sh Starting namenodes on [localhost] [email protected]'s password: localhost: mkdir