Вопросы по теме 'apache-beam'
ошибка записи потока PubSub в облачное хранилище с помощью Dataflow
Использование SCIO из spotify для написания задания для Dataflow , следуя 2 примерам например1 и e .g2 , чтобы записать PubSub поток в GCS , но получить следующую ошибку для приведенного ниже кода
Ошибка
Exception in thread...
883 просмотров
schedule
05.11.2023
Максимальный размер шаблона Google Dataflow - 10 МБ
Я установил шаблон в потоке данных Google, и он работал нормально. После некоторой модификации добавления параллельной обработки на раздел размер шаблона стал намного больше. Я попытался запустить его, но ничего не вышло. У меня такая ошибка, как...
486 просмотров
schedule
06.11.2023
включить другие файлы с потоком данных
В моем потоке данных используется файл .sql . Этот файл содержит запрос и находится в каталоге с именем queries .
Мне нужно, чтобы этот файл был загружен с моим потоком данных.
То, что я обнаружил, было использованием файла manifest.in, но,...
962 просмотров
schedule
02.01.2024