başka bir masaya

Question

datastax kurumsal

datastax-başlatma

Biz DataStax DSE Cluster kullandığınız için büyük bir masa (> 1.7 M satırlar) kopyalamak için en iyi yolu nedir.

Biz 1 tablo olarak ancak ikincil bir endeks

Yaklaşık 1,7 milyon satır

1) cqlsh dan Biz ilk kullanıcı Cassandra KOPYA komutu vardır ile aynı tanımıyla başka bir tabloya bir tablo göç etmeye çalışıyoruz . Bu uzun bir zaman alıyor> 1 saat. Zaman aşımı, çalışmadı 2) Daha sonra 1 tabloyu CSV dosyasına aktarmak için bir program yazıyoruz. Bu CSV dosyasını ayrı CSV dosyalarına böleriz ve 2. tabloya karşı yüklemeyi deneriz. Bu doğru bir yaklaşımdır,

insert bazen sürer ve biz CSV dosyasını olmadığından dolayı Biz

http://www.datastax.com/dev/blog/using-the-cassandra-bulk-loader-updated inceliyorlar

3) başarısız?

Ve bu lib https://github.com/yukim/cassandra-bulkload-example'u SSTABLE'ı oluşturmak için kullanıyoruz.

Bunu halletmenin doğru yolu mu?

Answer 1

Eğer bir csv varsa ben bu toplu yükleyici kullanarak öneriyoruz:

sc.cassandraTable ("KS1", "tablosu: Eğer Kıvılcım analitiği Kümenizde

https://github.com/brianmhess/cassandra-loader

etkinleştirdiyseniz ") .saveToCassandra (" KS2" , "

bakınız tablo"):

http://docs.datastax.com/en/latest-dse/datastax_enterprise/migration/migratingBulkSparkRDD.html