Saya bertanya-tanya apakah ada cara membuat bot/crawler web untuk situs web di ASP.NET. Saya harus mengambil informasi dari salah satu penyedia pembayaran kami, namun mereka tidak memiliki API sehingga satu-satunya cara saat ini untuk mengambil...

Saya telah menyelesaikan proyek kecil selama dua hari terakhir yang terdiri dari pembuatan crawler di Perl. Saya tidak punya pengalaman nyata di Perl (hanya apa yang saya pelajari dalam dua hari terakhir). Skrip saya adalah sebagai berikut:...

Saya Ingin Masuk ke situs lain dengan program saya (asp.net/C#). BAGAIMANA saya dapat merayapi situs dan menemukan kotak teks nama pengguna & kata sandi dan mengisinya dengan data yang diperlukan. lalu BAGAIMANA cara menekan/menembak tombol...

Katakanlah saya memiliki beberapa halaman HTML dari situs web yang tidak terkait, tetapi berisi informasi keseluruhan yang sama. Saya ingin mengekstrak informasi tersebut dengan cara yang fleksibel, yaitu saya hanya ingin menulis sejumlah kecil...

Saya menemukan kesalahan Eksternal 408 ketika saya menguji situs saya pada alat Perayap Situs Web dan Generator Peta Situs XML pada tautan di bawah ini: http://tools.seochat.com/tools/online-crawl-google-sitemap-generator/ Nama situs saya seperti :...

Saya ingin mengekstrak nilai 'avail' dari output JSON yang terlihat seperti ini. { "result": { "code": 100, "message": "Command Successful" }, "domains": { "yolotaxpayers.com": { "avail": false,...

Baru mengenal python, berasal dari php. Saya ingin mengikis beberapa situs menggunakan Scrapy dan telah melalui tutorial dan skrip sederhana dengan baik. Sekarang menulis real deal muncul kesalahan ini: Traceback (panggilan terakhir...

Saya ingin menerapkan beberapa mekanisme anti-perayapan untuk melindungi data di situs saya. Setelah membaca banyak topik terkait di SO, saya akan fokus pada "menerapkan javascript yang berjalan". Rencana saya adalah: Terapkan fungsi khusus...