简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
首页 > 后端开发 > php教程 > 正文

获取网站所有网页访问的URL地址和页面资源加载访问地址

WBOY
发布： 2016-06-06 20:11:32
原创
1982 人浏览过

网站上面现有来两个图片服务器的域名地址，现在我想获取当前的网站究竟有哪些页面是访问了其中某一个服务器的域名。包括隐藏在js里面生成的访问地址。只要是网站上任何一个元素能向那个域名提交请求的。都要获取到。
这个思路应该怎么写？如果是用php或者是python写这个脚本应该用哪些工具？

回复内容：

网站上面现有来两个图片服务器的域名地址，现在我想获取当前的网站究竟有哪些页面是访问了其中某一个服务器的域名。包括隐藏在js里面生成的访问地址。只要是网站上任何一个元素能向那个域名提交请求的。都要获取到。
这个思路应该怎么写？如果是用php或者是python写这个脚本应该用哪些工具？

如果自己的网站可以写一段js foreach本页面的img对象的src然后通过ajax提交后台接口；
如果是本地工具抓取的话只能用selenium这种能够解析js的工具了；

推荐分析图片服务器的访问日志
用python写，应该蛮快的

相关标签：
html php python
来源：php.cn
上一篇：javascript - ajax：怎么获得onreadystatechange调用的函数的返回值？ 下一篇：gd库 - GD 库扩展在此 PHP 安装中不可用。
本站声明
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
作者最新文章
最新问题
如何在 PHP 中使用 while 循环按 ID 列出节中的数据？ 我有一个包含这些列的mysql表：series_id,series_color,product_name在输出中，我想按部分列出数据，每个series_id一个部分，如下所示：A1...
来自于 2023-11-17 20:03:03
0
1
290
未定义函数create_function()的调用 我在网站首页收到此消息：致命错误：未捕获错误：调用/customers/7/e/7/jovobytes.be/httpd.www/wp-content/themes/inovado...
来自于 2023-11-16 19:00:36
0
1
277
<?php //给定一个年月日,输出该日期是当年的第几天(注意闰年4 100 400) <?php //给定一个年月日,输出该日期是当年的第几天(注意闰年4 100 400) //可使用的技术路线:各类变量 例如数组 流程控制语句switch if el...
来自于 2023-11-14 23:55:21
0
1
79
PHP 修剪 unicode 空格 我正在尝试修剪诸如此字符之类的unicode空格，并且我能够使用此解决方案来做到这一点。此解决方案的问题是它不会修剪普通字符之间的unicode空格。例如这个使用薄空间$strin...
来自于 2023-11-13 08:49:45
0
2
398
TYPO3 V11: "PHP警告：未定义的数组键"，$this->request->getArguments()为空 我是typo3的新用户，我制作了一个插件来显示用户，并使用搜索栏来过滤他们，但是当我想显示我的页面时出现此错误：(1/1)#1476107295TYPO3\CMS\Core\Err...
来自于 2023-11-12 21:35:09
0
1
362
相关专题
更多>
热门推荐
热门教程
更多>
相关教程
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责声明 Sitemap
PHP中文网：公益在线PHP培训，帮助PHP学习者快速成长！