Pertanyaan tentang topik tersebut 'apache-beam'

kesalahan saat menulis aliran PubSub ke Cloud Storage menggunakan Dataflow
Menggunakan SCIO dari spotify untuk menulis pekerjaan untuk Dataflow , berikut 2 contoh mis.1 dan e .g2 untuk menulis aliran PubSub ke GCS , tetapi dapatkan kesalahan berikut untuk kode di bawah ini Kesalahan Exception in...
883 dilihat

Batas ukuran Templat Google Dataflow sebesar 10Mb
Saya menyiapkan template di Google dataflow dan berfungsi dengan baik. Setelah beberapa modifikasi dengan menambahkan pemrosesan paralel pada partisi, ukuran template menjadi jauh lebih besar. Saya mencoba menjalankannya dan gagal. Saya mendapat...
486 dilihat

sertakan file lain dengan aliran data
Aliran data saya menggunakan file .sql . File ini berisi kueri dan berada di direktori bernama queries . Saya perlu mengunggah file ini dengan aliran data saya. Apa yang saya temukan adalah penggunaan file manifest.in tetapi sejauh yang saya...
962 dilihat