Pertanyaan tentang topik tersebut 'hdfs'
Apa perbedaan antara Foreman dan Hue untuk Hadoop?
Dalam meneliti berbagai platform administrasi saya ingin mengetahui perbedaan antara, kapan/tidak menggunakan Foreman dan Hue untuk Hadoop/HDFS?
Terima kasih.
157 dilihat
schedule
26.11.2023
data hdfs rusak. folder yang rusak tidak dapat dihapus karena tidak menunjukkan file atau direktori tersebut
Data hdfs saya rusak.
saat melakukan fsck, saya mendapat hasil sebagai berikut. /siva: Blok KORUPSI blk_-1910702044505537827
/siva: Blok KORUPSI blk_6483992593913191763
/siva: HILANG 2 blok dengan ukuran total 82009995 B.Status: CORRUPT...
559 dilihat
schedule
19.01.2024
Konfigurasi CDH 5.9 dfs.datanode.data.dir
Saya telah menginstal CDH 5.9 menggunakan Cloudera Manager Installer, tempat saya menentukan direktori untuk metadata HDFS (/dfs/nn) dan data aktual (/dfs/dn).
Setelah instalasi HDFS berfungsi dengan benar dan menyimpan metadata dan data yang...
257 dilihat
schedule
30.10.2023
impor sqoop tidak mengidentifikasi tabel mysql yang menampilkan Kesalahan ClassNotFountException
Saya memiliki tabel "pelanggan" mysql dan mencoba mengimpor data dari lokasi mysql ke hdfs menggunakan sqoop import. Di bawah ini adalah versi yang saya instal di mesin saya: versi sqoop: 1.4.6 versi hive: 2.3.0 Versi Hadoop: 2.8.1
Perintah impor...
411 dilihat
schedule
06.12.2023
Bagaimana cara mengunduh file Hadoop (di HDFS) melalui FTP?
Saya ingin menerapkan pekerjaan SSIS yang mampu mengunduh file CSV besar yang terletak di cluster Hadoop jarak jauh. Tentu saja, hanya dengan memiliki server FTP biasa di sistem Hadoop tidak mengekspos file HDFS karena menggunakan sistem file lokal....
710 dilihat
schedule
26.11.2023
File direktori tidak disalin ke HDFS dengan perintah 'hadoop fs -put ‹my local path› ‹hdfs path›
Saya menyalin file yang diproses babi di sistem lokal ke jalur HDFS (yang ditautkan ke tabel HIVE) dengan memberikan perintah di bawah ini tetapi tidak menyalin.
Langkah 1: data ada di jalur lokal saya
[root@quickstart plantoutput]# ll
total 4...
346 dilihat
schedule
27.12.2023
Pekerjaan streaming terstruktur Spark ditutup secara diam-diam
Saya memiliki pekerjaan streaming terstruktur Spark yang mati secara diam-diam tanpa pesan kesalahan eksplisit di log aplikasi. Itu berjalan dengan baik selama sekitar 10 jam, dan kemudian mulai memiliki beberapa pesan kesalahan non-fatal. Kurang...
602 dilihat
schedule
29.10.2023
Apa perbedaan antara data lake dengan HDFS atau S3 di AWS?
Saya perlu membangun data lake di AWS, tetapi saya tidak tahu apa sebenarnya perbedaan S3 dari HDFS. Saya menemukan beberapa jawaban di Internet tetapi saya masih belum memahami perbedaan sebenarnya.
Saya juga perlu tahu apakah seseorang memiliki...
1226 dilihat
schedule
13.11.2023
Perintah salin Hadoop fs?
Maaf jika ini pertanyaan yang agak sederhana, tetapi saya belum menemukan apa pun secara online dan hanya memerlukan jawaban cepat.
Saya mencoba menyalin file dari satu direktori HDFS ke direktori baru untuk membuat cadangan. Saya diberi sesuatu...
27 dilihat
schedule
08.11.2023