Wenn Sie unsere Crawling-IP-Adressen nicht einzeln auf die Whitelist setzen möchten, können Sie stattdessen unser USER_AGENT-Skript verwenden:
javascriptUSER_AGENT = ( "Mozilla/5.0 (Windows NT 10.0; Win64; x64) " "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/123.0.0.0 Safari/537.36" )
Indem Sie diesen User-Agent festlegen, erwecken Sie gegenüber der Website den Eindruck, dass eine gewöhnliche Person mit einer aktuellen Version von Google Chrome unter Windows darauf zugreift. In vielen Fällen lässt sich dadurch verhindern, dass die Anfrage blockiert wird (HTTP 403 Forbidden).