Вопросы по теме 'avro'

Как получить размер объекта ParquetWriter в памяти перед его закрытием и записью на диск?
Я читаю сообщения Avro из потока и записываю их в файл Parquet с помощью parquet.hadoop.ParquetWriter. Я пытаюсь увеличить размер выходных файлов выше порогового значения. проблема в том, что ParquetWriter хранит все в памяти и записывает это на...
1805 просмотров
schedule 14.12.2023

Позволяет ли авросердце в улье обновлять или удалять записи?
У меня есть таблица в улье, созданная с использованием ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.avro.AvroSerDe' . Пытаюсь обновить запись, но получаю следующее сообщение об ошибке: FAILED: SemanticException [Error 10294]: Attempt to do...
553 просмотров
schedule 28.10.2023

Ошибка при чтении файлов avro в python
Я успешно установил Apache Avro в Python. Затем я пытаюсь прочитать файлы Avro в Python, следуя приведенной ниже инструкции. https://avro.apache.org/docs/1.8.1/gettingstartedpython.html У меня есть куча Avros в каталоге, который уже задан...
7242 просмотров
schedule 17.01.2024

Как установить тип контента avro на продюсере kafka с помощью Spring Boot и Spring Cloud Stream
Я пытаюсь создать рабочий пример с производителем сообщений avro, kafka и потребителем avro, используя весеннюю загрузку, реестр схемы весеннего облачного потока, связыватель kafka. При использовании сообщений возникает следующая ошибка: ОШИБКА...
1805 просмотров
schedule 14.01.2024

Как использовать параметры интерфейса oData с Avro, похожие на формат JSON, для предоставления данных
Я создал службу XSOdata в SAP HANA, и для внешней системы требуется формат AVRO, а не формат JSON. Формат JSON выглядит так, как показано ниже, со ссылкой и его изменениями в представлении расчета HANA:...
164 просмотров
schedule 29.10.2023