apache-pig

8ısı

2cevap

Domuz toplu olmayan uyarılar çıktı konumu?

Pig: 0.8.1-cdh3u2 Hadoop: 0.20.2-cdh3u0 Hata ayıklama FIELD_DISCARDED_TYPE_CONVERSION_FAILED uyarıları, ancak her yerde tek tek uyarılar yazdıramıyor gibi görünmüyor. Toplamanın -w veya aggregate.w

14ısı

2cevap

STORE çıkışı tek bir CSV'ye mi?

Şu anda, HDFS'YE MAĞAZAMAK, birçok parça dosyası oluşturuyor. Tek bir CSV dosyasına depolamanın bir yolu var mı?

6ısı

1cevap

Hive

'da saklanan veriler üzerinde Domuz sorgusu çalıştırılıyor Kovan formatında depolanan Domuz sorgularının nasıl çalıştırılacağını öğrenmek istiyorum. Sıkıştırılmış verileri depolamak için Hive'yi yapıl

8ısı

1cevap

Pig, Hadoop Globs'u bir 'load' ifadesinde nasıl kullanıyor?

noted previously yüklediğim gibi, Pig boş (0 bayt) dosyalarla iyi başa çıkmıyor. Ne yazık ki, bu dosyaların oluşturulmasının birçok yolu vardır (hatta within Hadoop utilitities). Bu soruna geçici olar

5ısı

2cevap

Gruplanmış kayıtları Pig ile birden çok dosyada nasıl depolanır?

Kayıtları yükledikten ve gruplandırdıktan sonra, bu gruplandırılmış kayıtları, grup başına bir (= kullanıcı) olan birkaç dosyaya nasıl kaydedebilirim? belirtilen bir özelliğe göre kayıtları böler - re

8ısı

1cevap

PIG

'deki tüm kayıt kümeleri için Max/Min Bir dosyadan yüklediğim bir dizi kayıt kümem var ve yapmanız gereken ilk şey bir sütunun en fazla ve en az olanını almak. SQL Böyle bir alt sorgu ile bunu olacakt

6ısı

1cevap

Bir EvalFunc domuzunda bir istisna atmak UDF sadece bu çizgiyi atlayabilir veya tamamen durdurabilir mi?

Bir günlük dosyasındaki satırları ayrıştırmak ve bilgiyi tekrar işleme döndürmek için Java'da yazılmış bir Kullanıcı Tanımlı İşlev (UDF) var, bu yüzden tüm işlemleri yapabilir. Bu şuna benzer: public

6ısı

2cevap

Apache Pig Latin'de birden çok satıra komuta ayırabilir miyim?

Apache Pig (Latin) ifadeleri olarak çok uzun satırlarım var. Bunları birden fazla hat üzerinde bölmenin bir yolu var mı? bellek beni yanıltmıyorsa Ben en kısa (tamamlanmamış) komutu yürütür enter tuşu

5ısı

1cevap

Elastik Harita üzerinde Pig ile Dağıtılmış Önbellek Kullanma

Azaltın Amazon'un Elastik Harita Azaltmasında Pig komutumu (UDF'leri kullanan) çalıştırmaya çalışıyorum. UDF'lerimden bazı statik dosyaları kullanmam gerekiyor. benim UDF böyle bir şey yapmak: Ben Dom