Speichern Sie Cookies, indem Sie die Anmeldung simulieren, und gehen Sie dann zur Backend-Seite, um fortlaufend Bestelldaten auf einer Website zu erfassen.
Jetzt zwei Fragen
Das Cookie auf dieser Website läuft in 10 Minuten ab. Nach Ablauf müssen Sie sich erneut anmelden
Das häufige Abfragen von Bestelldaten auf dieser Website ist untersagt
Um diese Funktion nun abzuschließen:
Ab dem simulierten Login werden Bestelldaten kontinuierlich und automatisch erfasst
Wenn das Cookie abläuft, wird automatisch eine Nachricht an den WeChat des Administrators gesendet, um den Administrator daran zu erinnern, sich erneut anzumelden.
Wie stellt man also die gespeicherte Cookie-Ablaufzeit während der simulierten Anmeldung ein? Und wie richtet man einen Datenerfassungsvorgang zu jedem festgelegten Zeitpunkt ein?
Gibt es eine Möglichkeit, diese Vorgänge in lokalen Tests abzuschließen, da diese Daten verarbeitet werden müssen?
Speichern Sie Cookies, indem Sie die Anmeldung simulieren, und gehen Sie dann zur Backend-Seite, um fortlaufend Bestelldaten auf einer Website zu erfassen.
Jetzt zwei Fragen
Das Cookie auf dieser Website läuft in 10 Minuten ab. Nach Ablauf müssen Sie sich erneut anmelden
Das häufige Abfragen von Bestelldaten auf dieser Website ist untersagt
Um diese Funktion nun abzuschließen:
Ab dem simulierten Login werden Bestelldaten kontinuierlich und automatisch erfasst
Wenn das Cookie abläuft, wird automatisch eine Nachricht an den WeChat des Administrators gesendet, um den Administrator daran zu erinnern, sich erneut anzumelden.
Wie stellt man also die gespeicherte Cookie-Ablaufzeit während der simulierten Anmeldung ein? Und wie richtet man einen Datenerfassungsvorgang zu jedem festgelegten Zeitpunkt ein?
Gibt es eine Möglichkeit, diese Vorgänge in lokalen Tests abzuschließen, da diese Daten verarbeitet werden müssen?
Um das Crawlen in festen Intervallen durchzuführen, können Sie den CLI-Modus zum Planen von Aufgaben verwenden.
Ich glaube nicht, dass es notwendig ist, die Cookie-Ablaufzeit festzulegen. Sie können die Anmeldung erneut simulieren, wenn die Schnittstelle ungültig ist.
1 Das häufige Abfragen von Bestelldaten auf dieser Website ist verboten
curl unterstützt Proxy-Anfragen und erkennt häufige Anfragen über IP
2Das Website-Cookie läuft nach 10 Minuten ab und Sie müssen sich nach Ablauf erneut anmelden (Die Sitzungs-ID wird im Cookie gespeichert, hauptsächlich weil die Sitzungs-ID abläuft und kein Cookie ist)
Je nach Ihrem Szenario gibt es zwei Arten von Cookie-Fehlern:
----1 Die Sitzungsdauer überschreitet die vom Server konfigurierte Sitzungsdauer (im Allgemeinen standardmäßig 30 Minuten)
----2 Der Benutzer verlässt die Sitzung und der Server zerstört aktiv die Sitzungs-ID
Da Sie Daten erfassen möchten, sollte das Konto Ihnen gehören, also das Möglichkeit 2 kann grundsätzlich ausgeschlossen werden. Wenn Sie die Curl-Proxy-Anfrage verwenden, gibt es kein Problem. 1. Wenn ja, können Sie eine geplante Anfrage verwenden, um die Sitzungs-Session-ID aufrechtzuerhalten (öffnen Sie ein anderes Programm, um anzufordern). alle 15 Minuten, um die Sitzung aufrechtzuerhalten)