mengatur header permintaan di Selenium

Webdriver tidak berisi API untuk melakukannya. Lihat edisi 141 dari pelacak Selenium untuk info lebih lanjut. Judul masalahnya menyatakan bahwa ini tentang header respons tetapi diputuskan bahwa Selenium tidak akan berisi API untuk header permintaan dalam cakupan masalah ini. Beberapa masalah tentang penambahan API untuk menyetel header permintaan telah ditandai sebagai duplikat: pertama, kedua, ketiga.

Berikut beberapa kemungkinan yang dapat saya usulkan:

1. Gunakan driver/perpustakaan lain selain Selenium
2. Tulis plugin khusus browser (atau temukan yang sudah ada) yang memungkinkan Anda menambahkan header untuk permintaan.
3. Gunakan browsermob-proxy atau proxy lainnya.

Saya akan memilih opsi 3 dalam banyak kasus. Itu tidak sulit.

Perhatikan bahwa Ghostdriver memiliki API untuk itu tetapi tidak didukung oleh driver lain.

Bagi orang-orang yang menggunakan Python, Anda dapat mempertimbangkan untuk menggunakan Selenium Wire yang juga dapat mengatur header permintaan memberi Anda kemampuan untuk memeriksa permintaan dan tanggapan.

from seleniumwire import webdriver  # Import from seleniumwire

# Create a new instance of the Chrome driver (or Firefox)
driver = webdriver.Chrome()

# Create a request interceptor
def interceptor(request):
    del request.headers['Referer']  # Delete the header first
    request.headers['Referer'] = 'some_referer'

# Set the interceptor on the driver
driver.request_interceptor = interceptor

# All requests will now use 'some_referer' for the referer
driver.get('https://mysite')

Saya memiliki masalah yang sama. Saya menyelesaikannya dengan mengunduh add-on firefox modifikasi-header dan mengaktifkannya dengan Selenium.

Kode dalam python adalah sebagai berikut

fp = webdriver.FirefoxProfile()
path_modify_header = 'C:/xxxxxxx/modify_headers-0.7.1.1-fx.xpi'
fp.add_extension(path_modify_header)

fp.set_preference("modifyheaders.headers.count", 1)
fp.set_preference("modifyheaders.headers.action0", "Add")
fp.set_preference("modifyheaders.headers.name0", "Name_of_header") # Set here the name of the header
fp.set_preference("modifyheaders.headers.value0", "value_of_header") # Set here the value of the header
fp.set_preference("modifyheaders.headers.enabled0", True)
fp.set_preference("modifyheaders.config.active", True)
fp.set_preference("modifyheaders.config.alwaysOn", True)

driver = webdriver.Firefox(firefox_profile=fp)

Mengalami masalah yang sama hari ini, hanya saja saya perlu menetapkan referensi berbeda untuk setiap pengujian. Saya akhirnya menggunakan middleware dan kelas untuk meneruskan header ke sana. Saya pikir saya akan berbagi (atau mungkin ada solusi yang lebih bersih?):

lib/request_headers.rb:

class CustomHeadersHelper
  cattr_accessor :headers
end

class RequestHeaders
  def initialize(app, helper = nil)
    @app, @helper = app, helper
  end

  def call(env)
    if @helper
      headers = @helper.headers

      if headers.is_a?(Hash)
        headers.each do |k,v|
          env["HTTP_#{k.upcase.gsub("-", "_")}"] = v
        end
      end
    end

    @app.call(env)
  end
end

config/initializers/middleware.rb

require 'request_headers'

if %w(test cucumber).include?(Rails.env)
  Rails.application.config.middleware.insert_before Rack::Lock, "RequestHeaders", CustomHeadersHelper
end

spec/support/capybara_headers.rb

require 'request_headers'

module CapybaraHeaderHelpers
  shared_context "navigating within the site" do
    before(:each) { add_headers("Referer" => Capybara.app_host + "/") }
  end

  def add_headers(custom_headers)
    if Capybara.current_driver == :rack_test
      custom_headers.each do |name, value|
        page.driver.browser.header(name, value)
      end
    else
      CustomHeadersHelper.headers = custom_headers
    end
  end
end

spec/spec_helper.rb

...
config.include CapybaraHeaderHelpers

Kemudian saya dapat memasukkan konteks bersama di mana pun saya membutuhkannya, atau meneruskan header berbeda di blok before lainnya. Saya belum mengujinya dengan apa pun selain Selenium dan RackTest, tetapi harus transparan, karena injeksi header dilakukan sebelum permintaan benar-benar masuk ke aplikasi.

Jika Anda menggunakan HtmlUnitDriver, Anda dapat mengatur header permintaan dengan memodifikasi WebClient, seperti:

final case class Header(name: String, value: String)

final class HtmlUnitDriverWithHeaders(headers: Seq[Header]) extends HtmlUnitDriver {
  super.modifyWebClient {
    val client = super.getWebClient
    headers.foreach(h => client.addRequestHeader(h.name, h.value))
    client
  }
}

Header kemudian akan berisi semua permintaan yang dibuat oleh browser web.

Saya menginginkan sesuatu yang sedikit lebih ramping untuk RSpec/Ruby sehingga kode khusus hanya harus berada di satu tempat. Inilah solusi saya:

/spec/support/selenium.rb
...
RSpec.configure do |config|
  config.after(:suite) do
    $custom_headers = nil
  end
end

module RequestWithExtraHeaders
  def headers
    $custom_headers.each do |key, value|
      self.set_header "HTTP_#{key}", value
    end if $custom_headers

    super
  end
end
class ActionDispatch::Request
  prepend RequestWithExtraHeaders
end

Kemudian dalam spesifikasi saya:

/specs/features/something_spec.rb
...
$custom_headers = {"Referer" => referer_string}

Dengan solusi yang sudah dibahas di atas, solusi yang paling dapat diandalkan adalah menggunakan Browsermob-Proxy

Namun saat bekerja dengan mesin jaringan jarak jauh, Browsermob-proxy tidak terlalu membantu.

Inilah cara saya memperbaiki masalah dalam kasus saya. Semoga dapat bermanfaat bagi siapa pun yang memiliki pengaturan serupa.

1. Tambahkan ekstensi ModHeader ke browser chrome

Bagaimana cara mengunduh Modheadernya? Tautan

ChromeOptions options = new ChromeOptions();
options.addExtensions(new File(C://Downloads//modheader//modheader.crx));

// Set the Desired capabilities 
DesiredCapabilities capabilities = new DesiredCapabilities();
capabilities.setCapability(ChromeOptions.CAPABILITY, options);

// Instantiate the chrome driver with capabilities
WebDriver driver = new RemoteWebDriver(new URL(YOUR_HUB_URL), options);

2. Buka ekstensi browser dan ambil ID konteks Penyimpanan Lokal dari ModHeader

3. Arahkan ke URL ModHeader untuk mengatur Konteks Penyimpanan Lokal

.

// set the context on the extension so the localStorage can be accessed
driver.get("chrome-extension://idgpnmonknjnojddfkpgkljpfnnfcklj/_generated_background_page.html");

Where `idgpnmonknjnojddfkpgkljpfnnfcklj` is the value captured from the Step# 2

4. Sekarang tambahkan header ke permintaan menggunakan Javascript

.

   ((Javascript)driver).executeScript(
         "localStorage.setItem('profiles', JSON.stringify([{  title: 'Selenium', hideComment: true, appendMode: '', 
             headers: [                        
               {enabled: true, name: 'token-1', value: 'value-1', comment: ''},
               {enabled: true, name: 'token-2', value: 'value-2', comment: ''}
             ],                          
             respHeaders: [],
             filters: []
          }]));");

Dimana token-1, value-1, token-2, value-2 adalah header permintaan dan nilai yang akan ditambahkan.

5. Sekarang navigasikan ke aplikasi web yang diperlukan.

   driver.get("your-desired-website");

Jika Anda menggunakan javacsript dan hanya ingin menerapkannya di chrome, Dalang adalah opsi terbaik karena memiliki dukungan asli untuk mengubah header. Lihat ini: https://pptr.dev/#?product=Puppeteer&version=v10.1.0&show=api-pagesetextrahttpheadersheaders

Meskipun untuk penggunaan lintas-browser Anda dapat memeriksa paket @requestly/selenium npm. Ini adalah pembungkus ekstensi permintaan untuk memungkinkan integrasi yang mudah di Selenium-webdriver. Ekstensi ini dapat mengubah header. Lihat: https://www.npmjs.com/package/@requestly/selenium

Anda dapat melakukannya dengan PhantomJSDriver.

PhantomJSDriver pd = ((PhantomJSDriver) ((WebDriverFacade) getDriver()).getProxiedDriver());
pd.executePhantomJS(
            "this.onResourceRequested = function(request, net) {" +
            "   net.setHeader('header-name', 'header-value')" +
            "};");

Dengan menggunakan objek permintaan, Anda juga dapat memfilter sehingga header tidak disetel untuk setiap permintaan.

lihat ini: chrome_options = Opsi()

chrome_options.add_argument('--headless')
chrome_options.add_argument('user-agent="Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.103 Safari/537.36"')

Masalah terpecahkan!