hadoop

2ısı

1cevap

Spark Hive Bağlam - Bölümler ve büyük harf alan adlarıyla Avro tablosu

Bölümlenmiş Avro Hive tabloları için, Avro şemasında büyük harf karakterleri olan alan adları boş olarak geri çekiliyor. Eksik olduğum bazı ayarların/çözümlerin olup olmadığını merak ettim, ya da bu s

0ısı

1cevap

kovanlık ile başarısız oldu java.io.IOException: java.lang.ClassCastException: java.sql.Timestamp java.sql.Date için kullanılamaz.

Ben domuz 0.15 kullanıyorum, aşağıdaki gibi ORC biçiminde dosya saklanır. loading_data= Load '/user/location/emp.csv' using PigStorage('\u241C') AS ( empno:long ,ename:chararray ,job:chararray ,mgr

0ısı

1cevap

HDInsight SDK [Hadoop için Microsoft .NET SDK] Bu makalede belirtildiği gibi

(Bölüm: Avro Library kullanarak şemaları derleme) - https://azure.microsoft.com/en-us/documentation/articles/hdinsight-dotnet-avro-serialization/ Microsoft'tan HDInsight SDK kaynak kodunun son sürümü

0ısı

1cevap

Hive

için alt sorgu olarak deyimi göster Bir sorguda bir show deyiminin çıktısını kullanmanın bir yolu var mı? Bir hesaplamada kullanmak için tablo boyutunu sorgulamaya çalışıyorum ama hata iletisi alıyors

1ısı

1cevap

Hbase Maven ben mimarlık <a href="http://hbase.apache.org/0.94/book/build.html" rel="nofollow">.Hbase official website</a> bu komutu aracılığıyla katran topu Bina açıklıyor inşa maven için yeni bir kaynaktan

den inşa? Anladığım kadarıyla /hbase-assembly/src/main/assembly/src.xml Ancak bu montaj dosyası özelliklerine göre katran topu oluşturulmamış mı? Yani tam olarak ikili katran topu nerede oluşturulacak

1ısı

1cevap

Kafka'yı çoklu giriş ve tek çıkışlı mı kullanıyorsunuz?

Kafka, merkezi bir düğüme gelen çok sayıda bilgi akışınız varsa gerekli olsa da, hepsinin Hadoop veya Spark'da işlenmesi gerekiyor mu? Farklı bilgi türlerini filtrelemeye gerek olmadığı için, Kafka'nı

0ısı

2cevap

Kovan Geçerli tarih fonksiyonu

Güncel tarihi güncelleştirmek istiyorum. FROM_UNIXTIME(UNIX_TIMESTAMP()) bu çıkışı: Bunu kullanmayı denediniz ben bunu elde etmek için arıyordu ne 16-03-21 : 2016-03-21 09:34 Bunu nasıl yapacağı

0ısı

1cevap

Hive'daki iki dizinin kesişme noktalarını ve birleşimlerini nasıl hesaplarsınız? Örneğin

, select union(array("A","B"), array("B","C")) ["A","B","C"] dönmelidir select intersect(array("A","B"), array("B","C")) ["B"] ve birliği dönmelidir kavşak nedir Bunu Kovan'da yapmanın en iyi

10ısı

1cevap

özel MAP_SIDE sağlanması akmakta olan mantık katılması, Build sadece

aşağıdaki gibi, tarif edildiği gibi (diğer iki karşı birleşmek üzere bir) 3 basamaklı boruları sahip LHSPipe - (büyük boyutu) RHSPipes - (küçük boyutu not muhtemelen uygun olduğunu olabilir aşağıdaki

0ısı

1cevap

Hive adresinden Oracle NoSQL'e erişme

Hive'dan bir StorageHandler kullanarak yerel bir Oracle NoSQL DB'ye erişmek için this (pretty old) tutorial izliyorum. başarıyla ettik: Çıkarılan Hadoop 2.7.2 /home/hadoop/hadoop altında Çıkarılan Kov