Pertanyaan tentang topik tersebut 'hdfs'

Apa perbedaan antara Foreman dan Hue untuk Hadoop?
Dalam meneliti berbagai platform administrasi saya ingin mengetahui perbedaan antara, kapan/tidak menggunakan Foreman dan Hue untuk Hadoop/HDFS? Terima kasih.
157 dilihat
schedule 26.11.2023

data hdfs rusak. folder yang rusak tidak dapat dihapus karena tidak menunjukkan file atau direktori tersebut
Data hdfs saya rusak. saat melakukan fsck, saya mendapat hasil sebagai berikut. /siva: Blok KORUPSI blk_-1910702044505537827 /siva: Blok KORUPSI blk_6483992593913191763 /siva: HILANG 2 blok dengan ukuran total 82009995 B.Status: CORRUPT...
559 dilihat
schedule 19.01.2024

Konfigurasi CDH 5.9 dfs.datanode.data.dir
Saya telah menginstal CDH 5.9 menggunakan Cloudera Manager Installer, tempat saya menentukan direktori untuk metadata HDFS (/dfs/nn) dan data aktual (/dfs/dn). Setelah instalasi HDFS berfungsi dengan benar dan menyimpan metadata dan data yang...
257 dilihat
schedule 30.10.2023

impor sqoop tidak mengidentifikasi tabel mysql yang menampilkan Kesalahan ClassNotFountException
Saya memiliki tabel "pelanggan" mysql dan mencoba mengimpor data dari lokasi mysql ke hdfs menggunakan sqoop import. Di bawah ini adalah versi yang saya instal di mesin saya: versi sqoop: 1.4.6 versi hive: 2.3.0 Versi Hadoop: 2.8.1 Perintah impor...
411 dilihat
schedule 06.12.2023

Bagaimana cara mengunduh file Hadoop (di HDFS) melalui FTP?
Saya ingin menerapkan pekerjaan SSIS yang mampu mengunduh file CSV besar yang terletak di cluster Hadoop jarak jauh. Tentu saja, hanya dengan memiliki server FTP biasa di sistem Hadoop tidak mengekspos file HDFS karena menggunakan sistem file lokal....
710 dilihat
schedule 26.11.2023

File direktori tidak disalin ke HDFS dengan perintah 'hadoop fs -put ‹my local path› ‹hdfs path›
Saya menyalin file yang diproses babi di sistem lokal ke jalur HDFS (yang ditautkan ke tabel HIVE) dengan memberikan perintah di bawah ini tetapi tidak menyalin. Langkah 1: data ada di jalur lokal saya [root@quickstart plantoutput]# ll total 4...
346 dilihat
schedule 27.12.2023

Pekerjaan streaming terstruktur Spark ditutup secara diam-diam
Saya memiliki pekerjaan streaming terstruktur Spark yang mati secara diam-diam tanpa pesan kesalahan eksplisit di log aplikasi. Itu berjalan dengan baik selama sekitar 10 jam, dan kemudian mulai memiliki beberapa pesan kesalahan non-fatal. Kurang...
602 dilihat

Apa perbedaan antara data lake dengan HDFS atau S3 di AWS?
Saya perlu membangun data lake di AWS, tetapi saya tidak tahu apa sebenarnya perbedaan S3 dari HDFS. Saya menemukan beberapa jawaban di Internet tetapi saya masih belum memahami perbedaan sebenarnya. Saya juga perlu tahu apakah seseorang memiliki...
1226 dilihat
schedule 13.11.2023

Perintah salin Hadoop fs?
Maaf jika ini pertanyaan yang agak sederhana, tetapi saya belum menemukan apa pun secara online dan hanya memerlukan jawaban cepat. Saya mencoba menyalin file dari satu direktori HDFS ke direktori baru untuk membuat cadangan. Saya diberi sesuatu...
27 dilihat
schedule 08.11.2023