Emulieren der GET-Anfrage eines Webbrowsers mit Curl

Beim Versuch, Webseiten mit Curl abzurufen, können Fehler auftreten, die scheinbar darauf zurückzuführen sind unerkannte oder nicht erfüllte Anforderungsheader. Dies liegt daran, dass Curl die GET-Anforderungsheader eines Webbrowsers nicht nativ emuliert.

Um einen Webbrowser ordnungsgemäß zu simulieren, führen Sie die folgenden Schritte aus:

1. Konfigurieren Sie den Benutzeragenten :

   • Weisen Sie der Curl-Anfrage einen gültigen Benutzeragenten zu, indem Sie CURLOPT_USERAGENT verwenden. Dadurch wird dem Server mitgeteilt, welchen Browser und welches Betriebssystem Sie simulieren.

2. Cookies verarbeiten (optional):

   • Der Server kann Cookies zur Authentifizierung von Anfragen verwenden. Um Cookies zu verwalten, verwenden Sie CURLOPT_COOKIE, CURLOPT_COOKIEFILE und CURLOPT_COOKIEJAR.

3. SSL-Zertifikat überprüfen:

   • Wenn die Anfrage dies betrifft Wenn Sie HTTPS verwenden, müssen Sie möglicherweise das SSL-Zertifikat überprüfen. Verwenden Sie CURLOPT_SSL_VERIFYPEER, um die Zertifikatsüberprüfung zu deaktivieren (nicht empfohlen für sichere Verbindungen).

4. Ausführlichen Modus festlegen:

   • Zum Drucken Debug-Informationen und Einblicke in den Anfrage-Antwort-Prozess ermöglichen CURLOPT_VERBOSE.

5. Beispielcode:

   • Hier ist ein aktualisiertes Beispiel, das diese Verbesserungen enthält:

$url = "https://new.aol.com/productsweb/subflows/ScreenNameFlow/AjaxSNAction.do?s=username&f=firstname&l=lastname";
$agent = 'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.0.3705; .NET CLR 1.1.4322)';

$ch = curl_init();
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($ch, CURLOPT_VERBOSE, true);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_USERAGENT, $agent);
curl_setopt($ch, CURLOPT_URL, $url);
$result = curl_exec($ch);
var_dump($result);