hadoop

0ısı

1cevap

Apache domuz grubu işlev tarafından beklenen çıktıyı vermiyor

Aşağıda gösterildiği gibi csv biçiminde veri var. verileri aşağıda formatını User.csv altında adında "first_name","last_name","company_name","address","city","county","postal","phone1","phone2","email

0ısı

1cevap

Doküman çeşitliliği ile hadoop ile aranabilir arşiv için en iyi uygulamalar (pdf, ppt, MS word, düz metin vb.)

PDF, MS Word, PPT gibi çeşitli formatlarda çeşitli belgelere sahip olduğum bir sorunum var. HDFS'da bulunan düz metin vb. İçeriği elasticsearch dizini içine almalı ve aynısı için bir tam metin arama s

0ısı

1cevap

hadoop: put komutunun yürütme süresini nasıl gösterir? Veya Yükün süresini bir dosyada nasıl gösteririm?

Hadoop'ta put komutunu nasıl yapılandırabilirim, böylece yürütme süresini gösterir? Çünkü bu komut: hadoop fs -put table.txt /tables/table sadece bu döndürüyor: 16/04/04 01:44:47 WARN util.NativeCod

1ısı

1cevap

Aynı kelimelerin çiftlerini MapReduce öğesinden çıkarma

Bir sözcüğün aynı satırda kaç sözcükle göründüğü gibi, bir metindeki satır başına birlikte yazılmasını saymak istiyorum. Bunun için, özel bir kelime çiftleri sınıfı oluşturdum, bu yüzden MapReduce ban

0ısı

1cevap

Harita Dağıtım için java'daki işi azaltın

Verileri günlük bazda bir kümeden diğerine kopyalamaya çalışıyorum. Çok arandı ama herkes DistCp'in ana işlevini hatalarla çağırmayı öneriyor. Aynı şey için java kodu sıkıyordum. Ama onun da çalışmadı

0ısı

1cevap

aşağıda bu komutla kovan metastore sunucuyu

Im başlangıç kovan metastore sunucusunu başlatmak olamaz: hive --service metastore & Ama Im aşağıda bu hataları alıyorsanız, çalışmıyor. Ama bunun zaten işe yaradığı ve bunun neden işe yaradığını

0ısı

1cevap

Domuz Haritası izinsiz giriş reddedildi

Bağlantıyı kullanarak tarih sunucusunu etkinleştirmeyi denedim, bunu yapamayacağımı ancak hdfs dis -mkdir -p/app-log'ları başarısız olana kadar yapabilirdim ve devam edemedim. Harita oluşturduğunuz do

1ısı

2cevap

kovanı birleştirme özellikleri küçük dosyalar için çalışmıyor

Çok sayıda küçük dosya oluşturan dinamik bölümlenmiş tabloya veri eklemeye çalışıyorum, aşağıdaki gibi kovan özelliklerini ayarladım ama bölümlenmiş klasörde küçük dosyalar görüyorum, görev başına boy

0ısı

1cevap

Anahtar ve değer iki eşleştiriciden bir redüktöre nasıl kullanılır?

A.txt ve B.txt adlı iki farklı dosyam var. A.txt: B.txt id name des id name 1 one 0 1 apple 2 two 1 2 pine 3 three 0 3 orange Her iki dosyada da aynı alana "id" sahibim. İki mapper

3ısı

1cevap

CSV'yi ORC'ye dönüştürürken istisnalar

Girdiyi CSV olarak alan ve ORC biçiminde yazan ancak NullPointerException özel durumuna bakan bir mapreduce programı yazmaya çalışıyorum. Aşağıda mapreduce işi /** sürücü kod **/ public class RunORC e