Kami menggunakan Google App Engine dengan Datastore dan Objectify. Di mesin lokal kami, diperlukan waktu 1 detik untuk melakukan kueri, sedangkan di cloud memerlukan waktu sekitar 20 detik. Lokasi server berada di Eropa-Barat dan saya di Spanyol, jadi menurut saya ini bukan masalahnya.
Kueri yang kami lakukan hanyalah mengambil data hanya dengan 1 filter:
final CityEntity cityEntity = new CityEntity();
cityEntity.setId(1);
ofy().load().type(Person.class).filter("city =", cityEntity).list();
Di penyimpanan data, kueri diskalakan dengan ukuran kumpulan hasil. Berapa banyak orang di kota? Jika berukuran besar, kueri tidak hanya akan lambat, Anda juga akan segera mencapai batas RAM.
Tergantung pada apa yang Anda coba lakukan, Anda mungkin perlu mengambil pendekatan yang berbeda. Misalnya, Anda dapat melakukan kueri khusus kunci, mengonversi hasilnya menjadi tugas, dan memasukkan tugas ke dalam antrean untuk setiap orang. Itu mungkin akan berhasil hingga ratusan ribu, mungkin jutaan sebelum Anda mencapai tenggat waktu 10 juta tugas/cron. Untuk jumlah yang lebih besar, Anda mungkin menginginkan beberapa bentuk peta/pengurangan.
