Python HTMLParser模块解析html获取url实例
Jun 10, 2016 pm 03:15 PMHTMLParser是python用来解析html的模块。它可以分析出html里面的标签、数据等等，是一种处理html的简便途径。HTMLParser采用的是一种事件驱动的模式，当HTMLParser找到一个特定的标记时，它会去调用一个用户定义的函数，以此来通知程序处理。它主要的用户回调函数的命名都是以handler_开头的，都是HTMLParser的成员函数。当我们使用时，就从HTMLParser派生出新的类，然后重新定义这几个以handler_开头的函数即可。这几个函数包括：
handle_startendtag 处理开始标签和结束标签
handle_starttag 处理开始标签，比如
handle_endtag 处理结束标签，比如
handle_charref 处理特殊字符串，就是以开头的，一般是内码表示的字符
handle_entityref 处理一些特殊字符，以&开头的，比如
handle_data 处理数据，就是
handle_comment 处理注释
handle_decl 处理
handle_pi 处理形如的东西
这里我以从网页中获取到url为例，介绍一下。要想获取到url，肯定是要分析标签，然后取到它的href属性的值。下面是代码：
#-*- encoding: gb2312 -*-
import HTMLParser
class MyParser(HTMLParser.HTMLParser):
def __init__(self):
HTMLParser.HTMLParser.__init__(self)
def handle_starttag(self, tag, attrs):
# 这里重新定义了处理开始标签的函数
if tag == 'a':
# 判断标签<a>的属性
for name,value in attrs:
if name == 'href':
print value
if __name__ == '__main__':
a = '<html><head><title>test</title><body><a href="http://www.163.com">链接到163</a></body></html>'
my = MyParser()
# 传入要分析的数据，是html的。
my.feed(a)
Article chaud
Outils chauds Tags
Article chaud
Tags d'article chaud
Bloc-notes++7.3.1
Éditeur de code facile à utiliser et gratuit
SublimeText3 version chinoise
Version chinoise, très simple à utiliser
Envoyer Studio 13.0.1
Puissant environnement de développement intégré PHP
Dreamweaver CS6
Outils de développement Web visuel
SublimeText3 version Mac
Logiciel d'édition de code au niveau de Dieu (SublimeText3)
Sujets chauds
Quels sont les avantages et les inconvénients des modèles ?
May 08, 2024 pm 03:51 PM
Quels sont les avantages et les inconvénients des modèles ?
Google AI annonce Gemini 1.5 Pro et Gemma 2 pour les développeurs
Jul 01, 2024 am 07:22 AM
Google AI annonce Gemini 1.5 Pro et Gemma 2 pour les développeurs
Pour seulement 250$, le directeur technique de Hugging Face vous apprend étape par étape comment peaufiner Llama 3
May 06, 2024 pm 03:52 PM
Pour seulement 250$, le directeur technique de Hugging Face vous apprend étape par étape comment peaufiner Llama 3
Partagez plusieurs frameworks de projets open source .NET liés à l'IA et au LLM
May 06, 2024 pm 04:43 PM
Partagez plusieurs frameworks de projets open source .NET liés à l'IA et au LLM
Un guide complet sur le débogage et l'analyse des fonctions Golang
May 06, 2024 pm 02:00 PM
Un guide complet sur le débogage et l'analyse des fonctions Golang
Comment enregistrer la fonction d'évaluation
May 07, 2024 am 01:09 AM
Comment enregistrer la fonction d'évaluation
