คำถามในหัวข้อ 'avro'

วิธีรับขนาดในหน่วยความจำของวัตถุ ParquetWriter ก่อนที่จะปิดและเขียนลงดิสก์
ฉันกำลังอ่านข้อความ Avro จากสตรีมและเขียนลงในไฟล์ Parquet โดยใช้ parquet.hadoop.ParquetWriter ฉันกำลังพยายามให้มีขนาดไฟล์เอาต์พุตเกินขีดจำกัด ปัญหาคือ ParquetWriter เก็บทุกอย่างไว้ในหน่วยความจำและเขียนลงดิสก์เมื่อสิ้นสุดเมื่อปิดตัวเขียนเท่านั้น...
1805 มุมมอง
schedule 14.12.2023

avroserde ในกลุ่มอนุญาตให้อัปเดตหรือลบบันทึกหรือไม่
ฉันมีตารางในกลุ่มซึ่งสร้างโดยใช้ ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.avro.AvroSerDe' กำลังพยายามอัปเดตบันทึก แต่ฉันได้รับข้อความแสดงข้อผิดพลาดต่อไปนี้: FAILED: SemanticException [Error 10294]: Attempt to do update or delete using...
553 มุมมอง
schedule 28.10.2023

เกิดข้อผิดพลาดเมื่ออ่านไฟล์ avro ใน python
ฉันติดตั้ง Apache Avro ใน Python ได้สำเร็จ จากนั้นฉันพยายามอ่านไฟล์ Avro ลงใน Python ตามคำแนะนำด้านล่าง https://avro.apache.org/docs/1.8.1/gettingstartedpython.html ฉันมี Avros จำนวนมากในไดเร็กทอรีซึ่งได้รับการตั้งค่าเป็นเส้นทางที่ถูกต้องใน...
7242 มุมมอง
schedule 17.01.2024

วิธีการตั้งค่าประเภทเนื้อหา avro บนผู้ผลิต kafka ด้วย spring boot และ spring cloud stream
ฉันกำลังพยายามสร้างตัวอย่างการทำงานกับผู้ผลิตข้อความ avro, kafka และ avro Consumer โดยใช้ spring boot, รีจิสทรีสคีมาสตรีมคลาวด์ของ spring cloud, kafka binder ข้อผิดพลาดต่อไปนี้เกิดขึ้นเมื่อใช้งานข้อความ: ข้อผิดพลาด 7059 --- [afka-listener-1]...
1805 มุมมอง
schedule 14.01.2024

วิธีใช้ตัวเลือกอินเทอร์เฟซ oData กับ Avro คล้ายกับรูปแบบ JSON สำหรับการเปิดเผยข้อมูล
ฉันได้สร้างบริการ XSOdata ใน SAP HANA และระบบภายนอกต้องการในรูปแบบ AVRO แทนที่จะเป็นรูปแบบ JSON รูปแบบ JSON มีลักษณะดังนี้พร้อมลิงก์และการพัฒนาในมุมมองการคำนวณ HANA: https://HANA_SERVER/package_name/XSODATA_NAME.xsodata/name_event?$format=json...
164 มุมมอง
schedule 29.10.2023