Saya menggunakan tindakan MR di oozie. Dan ingin menggunakan fungsi tangguhkan/lanjutkan yang disediakan oleh oozie di MR.
Masalahnya - Namun, ketika kita memanggil 'suspend' pada Oozie, hal itu tidak mematikan tugas hadoop, melainkan hanya memperbarui status oozie, sementara tugas hadoop terus berjalan hingga selesai. Saya ingin pekerjaan hadoop segera dihentikan ketika alur kerja oozie ditangguhkan. Sepertinya itu tidak mungkin kan?
Jadi, saya pikir saya dapat mematikan alur kerja oozie dan menjalankannya kembali. Tapi sekarang masalahnya, jika ada 3 node tindakan di alur kerja saya, saya tidak ingin menjalankan semuanya kembali.
Apakah saya merokok di sini atau mungkinkah mengakses node oozie terakhir yang berhasil (yang kemungkinan besar disimpan di database mysql)?
Apakah ada pendekatan yang lebih baik untuk kasus penggunaan saya yang licik?
Hargai bantuan Anda sebelumnya,
P.S. Saya tidak memposting alur kerja saya karena ini adalah alur kerja sederhana dengan beberapa tindakan pengurangan peta, tidak ada ilmu roket di sini.