hadoop

-1ısı

1cevap

Birden çok dosyadan okuma yapın ve tek bir dosyada sıkıştırın

Hadoop'a Yeni. Veriler, farklı dizinlerdeki birden çok dosyaya yükleniyor. Görev, birden fazla dosya okumak ve tek bir dosyaya yazmak/sıkıştırmaktır. Bu görevi gerçekleştirmek için en iyi seçeneklerin

0ısı

1cevap

Hadoop Data Node başlatılmıyor

Halo kümesini başlattığımda aşağıdaki hatayı alıyorum. DNS çözümlemesini doğrulamıştım ve mükemmel çalışıyor. Ayrıca tüm veri düğümlerine şifrelerle ssh edebiliyorum. Veri düğümlerinin neden isim veya

0ısı

2cevap

Kerberos tarafından korunan bir HDFS dosyasını almak için Spark'i kullanma

Kıvılcım ortamımı bir kerberleştirilmiş HDFS dosya konumundan okumak için ayarlama sorunlarım var. anda aşağıdaki yapmaya çalıştık: Aşağıdaki hata ile, Spark Bağlamını yaratma noktasında başarısız def

1ısı

1cevap

Windows'taki Spark Çalışıyor Hata 5 (Erişim Engellendi) Admin olarak çalışıyor olsa bile Admin

Spark ile başlıyorum, bu yüzden sorunumun neresinde olduğundan emin değilim ve burada yararlı bir ipucu arıyorum. Bir Windows 7 makinesinde bir yönetici olarak Spark (pyspark) çalıştırmaya çalışıyorum

1ısı

1cevap

Önbelleğe Alınmış Spark RDD (Dizi Dosyasından okunan) geçersiz girişlere sahip, bunu nasıl düzeltirim?

Spark kullanarak Hadoop Sekans Dosyalarımı okuyorum (v1.6.1). RDD'yi önbelleğe aldıktan sonra, RDD'deki içerik geçersiz hale gelir (son giriş n kez kopyalanır). İşte benim kod parçacığı geçerli: impor

0ısı

2cevap

Geomesa Yapılandırma Erorr

Ben geoserver 2.8.0 ile Hadoop 2.7 kullanıyorum ama Geomesa 1.2.0 yapılandırmak çalışıyorum ederken, bu hata mesajı alıyorum: $ geomesa Using GEOMESA_HOME = /usr/local/geomesa/dist/tools/geomesa-tool

0ısı

2cevap

HA Yetebilirlikli Hadoop İplik Kümesinde Apache Spark dağıtımı

Büyük veri ortamına yeni ve yeni bir Node Hadoop küme 2.6, Zookeeper kullanarak HA Yeteneği ile birlikte kuruldu. Tüm işler şu an için iyi ve NN1 ve NN2 üzerinde zookeeper kullanarak Yük Devretme sena

0ısı

1cevap

Hadoop 2.6.2, start-dfs.sh jobtacker ve tasktracker'ı başlatma

Tek bir düğüm oluşturdum ve şimdi küme start-dfs.sh komutuyla başlatıyorum. Ancak jobotracker ve görev bekçisi, jps komutuyla görünmüyor, bu yüzden başlangıçta değiller. Nedenini görüyor musunuz? Im s

2ısı

1cevap

Hadoop Hive ACID sorgu hatası

Bir dize küme üzerinde çalışıyorum, hortonworks 2.4 dağılımı. Bir Hive tablosunda ACID işlemleri yapmak istiyorum. Ben aynı yapıya sahip bir dış kovan masaya dayalı bu tabloyu doldurmak CREATE TABLE m

0ısı

2cevap

hortonworks kovanından cassandra'ya veri nasıl aktarılır?

Verileri hortonworks kovanından Cassandra'ya aktarmak istiyorum ETL araçlarını kullanmadan, Horton works Hive'dan datastax Cassandra'ya veri aktarmanın bir yolu var mı?