Comment le framework hyperf simule-t-il la connexion et capture-t-il le contenu Web ?

Comment le framework hyperf simule-t-il la connexion et capture-t-il le contenu Web ? Comment le framework hyperf simule-t-il la connexion et capture-t-il le contenu Web ? Comment le framework hyperf simule-t-il la connexion et capture-t-il le contenu Web ? Comment le framework hyperf simule-t-il la...

Nine 2021-12-17 15:29:20 0  2  1003

javascript - Problème avec l'exploration des pages Web par Nodejs

Je prévois d'utiliser nodejs pour capturer toutes les actualités sur le site Web ci-dessous. Selon l'idée générale, obtenez d'abord l'URL de chaque page d'actualités, puis obtenez l'URL de chaque actualité et utilisez la requête pour récupérer le contenu de chaque URL. C'est tout. Mais toutes les in...

阿神 2017-05-16 13:43:09 0  2  654

php explore les données d'une page Web

J'ai certains besoins, comme explorer la page Web du marchand de plats à emporter Baidu https://wmpass.baidu.com/ucen..., mais cette page Web est écrite à l'aide d'un framework frontal modulaire. Si vous affichez le code source, vous ne pouvez que le faire. voir quelques-uns Le code source avant le ...

PHP中文网 2017-05-24 11:34:27 0  1  883

python - La page Web ne peut plus être explorée après la mise à jour des données

La page Web que j'ai explorée a mis à jour une information aujourd'hui, puis le robot d'exploration s'est exécuté mais ne l'a pas exploré {Code...} J'espère que les experts pourront être plus précis et communiquer davantage.

给我你的怀抱 2017-05-18 10:58:50 0  2  606

Téléchargez un fichier CSV contenant les URL de la page HTML et utilisez Flask pour lire les URL que vous souhaitez explorer

J'ai actuellement besoin de créer un système Web capable de télécharger un fichier CSV contenant une liste d'URL. Après le téléchargement, le système lira l'URL ligne par ligne et sera utilisée pour la prochaine étape d'exploration. Ici, l'exploration nécessite de se connecter au site Web avant l'ex...

P粉799885311 2023-09-07 11:22:35 0  1  567

Web scraping : attribut href manquant – Besoin de simuler les clics de souris pour le web scraping ?

Pour un projet de web scraping amusant, je souhaite collecter des données de la LNH à partir de ttps://www.nhl.com/stats/teams. Il existe une étiquette d'exportation Excel cliquable et je peux la trouver en utilisant Selenium et bs4. Malheureusement, c'est là que ça se termine : je n'arrive pas à ac...

P粉550823577 2024-04-04 10:32:06 0  1  3612

Comment protéger le bouton Click to Chat Whatsapp du scraping Web des robots ?

Je gère un site Web de petites annonces sur lequel les gens peuvent publier leurs articles et d'autres peuvent les contacter via Whatsapp pour plus de détails. Aujourd'hui, mon site Web a été attaqué et j'ai constaté un grand nombre de clics sur les liens sur le bouton Whatsapp dans Google Analytics...

P粉786800174 2023-09-03 12:52:21 0  1  590

Comment une page Web se connecte-t-elle à une base de données pour capturer des informations ?

Il y a un bouton et une zone de saisie sur une page Web. Cliquez sur le bouton pour vous connecter à la base de données afin de capturer des informations, puis renvoyez les informations dans la zone de saisie de la page Web. Je suis un débutant. Y a-t-il une source à laquelle je peux me référer ?

神秘人 2020-12-21 19:45:07 0  1  1149

Comment empêcher l'exploration de ddos ​​malveillants sur nginx

Tout d'abord, je n'ai aucune objection à ce que d'autres personnes explorent le contenu de mon site Web. Je ne limite pas nécessairement strictement l'exploration des autres. Cependant, l'exploration de certaines personnes n'a aucun résultat. Elles utilisent un ou même plusieurs scripts pour explore...

黄舟 2017-05-16 17:30:17 0  4  1061

PHPcurl, une interface réseau dédiée

J'ai un serveur (serveur Web) avec deux interfaces réseau. La première est une interface standard pour les connexions Internet publiques et l’autre est une interface réseau VPN virtuelle. Maintenant, je souhaite envoyer des données POST via curl sur d'autres services Web au sein du réseau VPN. Comme...

P粉521697419 2023-11-08 20:01:46 0  1  740

javascript - js détermine si le réseau de l'utilisateur peut accéder à Internet ?

Comment le frontal détermine-t-il si le réseau de l'utilisateur peut accéder à Internet ? Parce que certains utilisateurs ne peuvent pas avoir de réseau interne sans réseau externe, donc s'ils veulent détecter ceux qui ne peuvent pas accéder à Internet, ils peuvent annuler la connexion au lien exter...

女神的闺蜜爱上我 2017-07-05 10:51:37 0  9  1043

php - Un logiciel de communication peut-il capturer des informations sur une page Web lors de la transmission d'URL?

Je voudrais demander si l'URL du site Web est intégrée au logiciel de communication tel que WeChat ou Line... etc., les informations de la page Web peuvent-elles être capturées ? Par exemple, si je perds tinder.com, il peut capturer l'icône... Comment faire ? Capture d'écran 2017-06-10 à 22h23h49.pn...

巴扎黑 2017-06-12 09:21:43 0  1  654

Utilisez Excel\VBA pour extraire des informations des pages Web

J'essaie de récupérer des données d'une page Web, j'ai besoin de 4 bits de données, dont 2 que j'ai pu récupérer, mais les 2 autres m'ont été suggérés. Ce n'est pas une URL fixe, mais cette URL a été récupérée depuis IE après une redirection, donc pour cet exemple j'utiliserai : https://cpc.farnell....

P粉555696738 2023-09-02 18:48:32 0  1  849

javascript - Comment utiliser la bibliothèque de requêtes dans Nodejs pour capturer des images à partir de pages Web

{Code...} J'ai écrit une requête et un fichier d'écriture sous forme de promesse. Il est possible de capturer du HTML, mais pas des images. Au début, la sortie des données est de type chaîne, c'est-à-dire que le corps de la requête est de type chaîne. tapez, donc j'utilise Buffer.from pour convertir...

滿天的星座 2017-06-17 09:16:39 0  1  864

node.js - Utilisez Superagent pour capturer les caractères tronqués du site Web UTF-8

J'utilise superagent + cheerio pour explorer les produits de *Dong, mais l'en-tête de réponse chinois tronqué renvoyé est le suivant. Il est compressé par gzip, mais il va de soi que le superagent décompressera l'adresse du produit de *Dong https://item.jd.com. /5025518.html par défaut j'ai pris le ...

天蓬老师 2017-07-06 10:35:50 0  2  1390

laravel framework 4 demande de soumission de réseau mobile 3G ne peut pas obtenir de données

Je l'ai construit en utilisant laravel4 comme cadre back-end de l'application, mais lorsque j'utilise la 3G mobile pour demander des données, je ne parviens pas à obtenir les données. Je ne sais pas quel est le problème ? Le réseau que j'utilise est : CMWAP Il s'agit de la requête {code...} {code......

phpcn_u1582 2017-05-16 16:56:50 0  2  730

Web crawler - Comment utiliser Java pour explorer des informations et créer un système de classement ?

Il se trouve qu’il y a un projet intéressant à réaliser tout en apprenant Java Web. Notre école exige une carte de crédit pour les courses matinales. Le Service des Sports propose un site Internet de renseignements, mais ne fournit pas d'interface. Je souhaite créer un backend de site Web/WeChat pou...

迷茫 2017-06-12 09:19:16 0  4  663

Exploration Web dynamique php

J'essaie la bibliothèque chrome-php/chrome pour lire des pages Web rendues dynamiquement, mais elle ne renvoie rien. J'utilise la version php8.0. C'est ce que j'ai implémenté [j'ai suivi la documentation] - useHeadlessChromium\BrowserFactory;$browserFactory=newBrowserFactory();//startsheadlesschrome...

P粉311089279 2023-09-01 18:42:58 0  1  540

node.js - installation de nœud sans état du réseau

Lorsqu'il n'y a pas de réseau (la machine Linux n'a pas de réseau et ne peut utiliser que le LAN), que dois-je faire si le module de nœud téléchargé à partir du projet précédent est directement copié dans le répertoire spécifié et ne peut pas être utilisé ? ?

天蓬老师 2017-05-16 13:35:54 0  1  572

xp.cn ne peut pas être ouvert. Est-ce un problème avec mon réseau ?

xp.cn ne peut pas être ouvert. Est-ce un problème avec mon réseau ? xp.cn ne peut pas être ouvert. Est-ce un problème avec mon réseau ? xp.cn ne peut pas être ouvert. Est-ce un problème avec mon réseau ? xp.cn ne peut pas être ouvert. Est-ce un problème avec mon réseau ?

zjjsn 2022-03-29 18:16:59 0  2  1152