Pertanyaan tentang topik tersebut 'mapreduce'

Di hadoop, bagaimana cara memverifikasi jumlah tugas peta yang berjalan pada setiap node budak satu per satu?
Saya memiliki cluster Hadoop dengan node kepala sebagai master dan 7 node lainnya dikonfigurasi sebagai budak, masing-masing memiliki 8 core dan memori 8 GB. Saya bermain-main dengan memvariasikan parameter "mapred.tasktracker.map.tasks.maximum" dan...
1410 dilihat
schedule 18.01.2024

Kueri penghitungan lanjutan MongoDB, bergantung pada konten dokumen
Saya punya masalah dengan kueri penghitungan lanjutan dengan MongoDB. Saya mencoba menghitung objek di dalam bidang dokumen, tetapi hanya jika elemen sebelumnya yang cocok dengan kueri ada dan lebih tua dalam larik. Biar saya...
898 dilihat
schedule 24.11.2023

apakah fungsi Cascading dijalankan dalam utas tunggal sebagai fungsi pemetaan hadoop?
Saya sedang membaca dokumentasi cascading bab 5.2 Fungsi dan saya ingin tahu apa yang akan terjadi dengan kode berikut. Haruskah ini berfungsi dengan baik di lingkungan multithread? Pertanyaan yang lebih umum adalah apakah Fungsinya bisa...
332 dilihat
schedule 28.11.2023

mengapa jumlah reduksi lebih besar dari yang saya tentukan di Hadoop?
Ini adalah output di konsol pekerjaan MR saya. Pekerjaan berhasil diselesaikan. Tapi saya punya dua kekhawatiran. 1) Saya menentukan -D mapred.reduce.slowstart.completed.maps=0.75 . namun peredam tidak dimulai ketika peta sudah 75% selesai...
187 dilihat
schedule 10.12.2023

Kesalahan aneh di kelas mapreduce
kesalahan ini tampaknya sepele, tetapi tidak akan hilang. Saya telah mendefinisikan kelas berikut: import java.io.IOException; import java.util.Iterator; import java.util.StringTokenizer; import org.apache.hadoop.fs.Path; import...
5277 dilihat
schedule 13.11.2023

Mereproduksi fungsionalitas map/emit MongoDB di javascript/node.js (tanpa MongoDB)
Saya menyukai fungsionalitas yang disediakan MongoDB untuk melakukan tugas peta/pengurangan, khususnya emit() dalam fungsi mapper. Bagaimana saya bisa mereproduksi perilaku peta yang ditunjukkan di bawah ini dalam javascript/node.js tanpa MongoDB?...
786 dilihat
schedule 05.11.2023

MongoDB MapReduce, kembali hanya jika hitungan › 1
Saya memiliki data di MongoDB. Struktur suatu objek adalah seperti ini: { "_id" : ObjectId("5395177980a6b1ccf916312c"), "institutionId" : "831", "currentObject" : { "systemIdentifiers" : [ {...
533 dilihat