Beautiful Soup 모듈이 Python에서 객체를 생성하는 방법 소개-파이썬 튜토리얼-php.cn

집

백엔드 개발

파이썬 튜토리얼

Beautiful Soup 모듈이 Python에서 객체를 생성하는 방법 소개

Y2J

Apr 22, 2017 am 09:45 AM

beautiful soup python 객체 생성

이 글은 주로 Beautiful Soup 모듈을 사용하여 객체를 생성하는 관련 정보를 소개합니다. 글의 소개는 매우 자세하게 설명되어 있어 필요한 모든 사람이 참조할 수 있습니다.

설치

pip를 통해 Beautiful Soup 모듈을 설치합니다: pip install beautifulsoup4 .

PyCharm IDE를 사용하여 PyCharm의 환경 설정에서 프로젝트를 찾아 그 안에 있는 Beautiful Soup 모듈을 검색하여 설치할 수도 있습니다.

BeautifulSoup 개체 만들기

Beautiful Soup 모듈은 웹 페이지에서 데이터를 가져오는 데 널리 사용됩니다. Beautiful Soup 모듈을 사용하여 HTML/XML 문서에서 모든 데이터(예: 웹 페이지의 모든 링크 또는 태그 내의 콘텐츠)를 추출할 수 있습니다.

이를 위해 뷰티플수프는 다양한 객체와 메소드를 제공합니다. 모든 HTML/XML 문서는 다양한 Beautiful Soup 개체로 변환될 수 있으며, 이러한 개체는 서로 다른 속성과 메서드를 갖고 있으며, 우리는 그 개체에서 필요한 데이터를 추출할 수 있습니다.

Beautiful Soup에는 총 세 가지 개체가 있습니다.

BeautifulSoup
태그
NavigableString

BeautifulSoup 객체 생성

BeautifulSoup 객체 생성은 Beautiful Soup의 시작점입니다. 프로젝트.

BeautifulSoup은 컴퓨터의 파일이나 웹 페이지와 같은 문자열이나 파일 유사 객체를 전달할 수 있습니다.

문자열에서 BeautifulSoup 개체 만들기

생성자에 문자열을 전달하여 BeautifulSoup 개체를 만듭니다.

helloworld = &#39;<p>Hello World</p>&#39;
soup_string = BeautifulSoup(helloworld)
print soup_string 
<html><body><p>Hello World</p></body></html>

로그인 후 복사

파일 유사 객체에서 BeautifulSoup 객체 생성

생성자에 파일 유사 객체를 전달하여 BeautifulSoup 객체를 생성합니다. 이는 온라인 웹페이지를 분석할 때 매우 유용합니다.

url = "http://www.glumes.com"
page = urllib2.urlopen(url)
soup = BeautifulSoup(page)
print soup

로그인 후 복사

파일류 객체를 전달하는 것 외에도 로컬 파일 객체를 BeautifulSoup의 생성자에 전달하여 객체를 생성할 수도 있습니다.

with open(&#39;foo.html&#39;,&#39;r&#39;) as foo_file :
 soup_foo = BeautifulSoup(foo_file)
print soup_foo

로그인 후 복사

XML 구문 분석을 위한 BeautifulSoup 객체 생성

Beautiful Soup 모듈은 XML 구문 분석에도 사용할 수 있습니다.

BeautifulSoup 객체를 생성할 때 BeautifulSoup 모듈은 HTML/XML 트리를 생성하기 위해 적절한 TreeBuilder 클래스를 선택합니다. 기본적으로 HTML TreeBuilder 개체가 선택되어 기본 HTML 구문 분석기를 사용하여 HTML 구조 트리를 생성합니다. 위 코드에서 BeautifulSoup 개체는 문자열을 HTML 트리 구조로 구문 분석하여 생성됩니다.

Beautiful Soup 모듈이 입력 콘텐츠를 XML 유형으로 구문 분석하도록 하려면 Beautiful Soup 생성자에 사용되는 기능 매개변수를 정확하게 지정해야 합니다. 기능 매개변수를 지정함으로써 뷰티플수프는 우리가 원하는 기능을 충족시키기 위해 가장 적합한 TreeBuilder 클래스를 선택할 것입니다.

기능 매개변수 이해하기

각 TreeBuilder는 사용하는 파서에 따라 다른 기능을 갖습니다. 따라서 입력 콘텐츠는 생성자에 전달된 기능 매개변수에 따라 다른 결과를 갖게 됩니다.
Beautiful Soup 모듈에서 현재 TreeBuilder가 사용하는 파서는 다음과 같습니다:

lxml
html5lib
html.parser

BeautifulSoup 생성자의 기능 매개변수는 문자열 목록 또는 문자열 값을 허용할 수 있습니다.

현재 각 TreeBuilder에서 지원하는 기능 매개변수와 파서는 다음 표와 같습니다.

Features	TreeBuilder	Parser
[‘lxml','html','fast','permissive']	LXMLTreeBuilder	lxml
[‘html','html5lib','permissive','strict','html5′]	HTML5TreeBuilder	html5lib
[‘html','strict','html.parser']	HTMLParserTreeBuilder	html.parser
[‘xml','lxml','permissive','fast']	LXMLTreeBuilderForXML	lxml

根据指定的 feature 参数，Beautiful Soup 将会选择最合适的 TreeBuilder 类。如果在指定对应的解析器时，出现如下的报错信息，可能就是需要安装对应的解析器了。

bs4.FeatureNotFound: Couldn&#39;t find a tree builder with the features you requested: html5lib. 
Do you need to install a parser library?

로그인 후 복사

就 HTML 文档而言，选择 TreeBuilder 的顺序是基于解析器建立的优先级，就如上表格所示的优先级。首先是 lxml ，其次是 html5lib ，最后才是 html.parser 。例如，我们选择 html 字符串作为 feature 参数，那么如果 lxml 解析器可用，则 Beautiful Soup 模块将会选择 LXMLTreeBuilder 。如果 lxml 不可用，则会选择根据 html5lib 解析器选择 HTML5TreeBuilder 。如果在不可用，则会选择根据 html.parser 选择 HTMLParserTreeBuilder 了。

至于 XML ，由于 lxml 是唯一的解析器，所以 LXMLTreeBuilderForXML 总是会被选择的。

所以，为 XML 创建一个 Beautiful Soup 对象的代码如下：

helloworld = &#39;<p>Hello World</p>&#39;
soup_string = BeautifulSoup(helloworld,features="xml")
print soup_string

로그인 후 복사

输入的结果也是 XML 形式的文件：

在创建 Beautiful Soup 对象时，更好的实践是指定解析器。这是因为，不同的解析器解析的结果内容大不相同，尤其是在我们的 HTML 文档内容非法时，结果更为明显。

当我们创建一个 BeautifulSoup 对象时，Tag 和 NavigableString 对象也就创建了。

创建 Tag 对象

我们可以从 BeautifulSoup 对象中得到 Tag 对象，也就是 HTML/XML 中的标签。

如下 HTML 代码所示：

#!/usr/bin/python
# -*- coding:utf-8 -*-
from bs4 import BeautifulSoup
html_atag = """
 <html>
 <body>
 <p>Test html a tag example</p>
 <a href="http://www.glumes.com&#39;>Home</a>
 <a href="http;//www.glumes.com/index.html&#39;>Blog</a>
 </body>
 <html>
 """
soup = BeautifulSoup(html_atag,&#39;html.parser&#39;)
atag = soup.a
print type(atag)
print atag

로그인 후 복사

从结果中可以看到 atag 的类型是。而 soup.a 的结果就是 HTML 文档中的第一个标签。
HTML/XML 标签对象具有名称和属性。名称就是标签的名字，例如标签的名称就是 a 。属性则是标签的 class 、id 、style 等。Tag 对象允许我们得到 HTML 标签的名称和属性。

Tag 对象的名称

通过 .name 方式得到 Tag 对象的名称。

tagname = atag.name
print tagname

로그인 후 복사

同时也能够改变 Tag 对象的名称：

atag.name = &#39;p&#39;

로그인 후 복사

这样就将上面 HTML 文档中的第一个标签名称换成了

标签了。

Tag 对象的属性

在 HTML 页面中，标签可能有不同的属性，例如 class 、id 、style 等。Tag 对象能够以字典的形式访问标签的属性。

atag = soup_atag.a
print atag

로그인 후 복사

也能通过 .attrs 的方式访问到，这样会将所有的属性内容都打印出来：

print atag.attrs
{&#39;href&#39;: u&#39;http://www.glumes.com&#39;}

로그인 후 복사

创建 NavigableString 对象

NavigableString 对象持有 HTML 或 XML 标签的文本内容。这是一个 Unicode 编码的字符串。

我们可以通过 .string 的方式得到标签的本文内容。

navi = atag.string
print type(navi)
print navi.string

로그인 후 복사

小结

代码小结如下：

BeautifulSoup

soup = BeautifulSoup(String)
soup = BeautifulSoup(String,features=”xml”)

Tag

tag = soup.tag
tag.name
tag[‘attribute']

NavigableString

soup.tag.string

总结

위 내용은 Beautiful Soup 모듈이 Python에서 객체를 생성하는 방법 소개의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

본 웹사이트의 성명

본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

핫 AI 도구

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

AI 옷 제거제

Video Face Swap

완전히 무료인 AI 얼굴 교환 도구를 사용하여 모든 비디오의 얼굴을 쉽게 바꾸세요!

뜨거운 도구

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

뜨거운 주제

Gmail 이메일의 로그인 입구는 어디에 있나요?

7859

자바 튜토리얼

1649

Cakephp 튜토리얼

1403

라라벨 튜토리얼

1300

PHP 튜토리얼

1242

Related knowledge

PHP와 Python : 다른 패러다임이 설명되었습니다 Apr 18, 2025 am 12:26 AM

PHP는 주로 절차 적 프로그래밍이지만 객체 지향 프로그래밍 (OOP)도 지원합니다. Python은 OOP, 기능 및 절차 프로그래밍을 포함한 다양한 패러다임을 지원합니다. PHP는 웹 개발에 적합하며 Python은 데이터 분석 및 기계 학습과 같은 다양한 응용 프로그램에 적합합니다.

PHP와 Python 중에서 선택 : 가이드 Apr 18, 2025 am 12:24 AM

PHP는 웹 개발 및 빠른 프로토 타이핑에 적합하며 Python은 데이터 과학 및 기계 학습에 적합합니다. 1.PHP는 간단한 구문과 함께 동적 웹 개발에 사용되며 빠른 개발에 적합합니다. 2. Python은 간결한 구문을 가지고 있으며 여러 분야에 적합하며 강력한 라이브러리 생태계가 있습니다.

Python vs. JavaScript : 학습 곡선 및 사용 편의성 Apr 16, 2025 am 12:12 AM

Python은 부드러운 학습 곡선과 간결한 구문으로 초보자에게 더 적합합니다. JavaScript는 가파른 학습 곡선과 유연한 구문으로 프론트 엔드 개발에 적합합니다. 1. Python Syntax는 직관적이며 데이터 과학 및 백엔드 개발에 적합합니다. 2. JavaScript는 유연하며 프론트 엔드 및 서버 측 프로그래밍에서 널리 사용됩니다.

PHP와 Python : 그들의 역사에 깊은 다이빙 Apr 18, 2025 am 12:25 AM

PHP는 1994 년에 시작되었으며 Rasmuslerdorf에 의해 개발되었습니다. 원래 웹 사이트 방문자를 추적하는 데 사용되었으며 점차 서버 측 스크립팅 언어로 진화했으며 웹 개발에 널리 사용되었습니다. Python은 1980 년대 후반 Guidovan Rossum에 의해 개발되었으며 1991 년에 처음 출시되었습니다. 코드 가독성과 단순성을 강조하며 과학 컴퓨팅, 데이터 분석 및 기타 분야에 적합합니다.

Windows 8에서 코드를 실행할 수 있습니다 Apr 15, 2025 pm 07:24 PM

VS 코드는 Windows 8에서 실행될 수 있지만 경험은 크지 않을 수 있습니다. 먼저 시스템이 최신 패치로 업데이트되었는지 확인한 다음 시스템 아키텍처와 일치하는 VS 코드 설치 패키지를 다운로드하여 프롬프트대로 설치하십시오. 설치 후 일부 확장은 Windows 8과 호환되지 않을 수 있으며 대체 확장을 찾거나 가상 시스템에서 새로운 Windows 시스템을 사용해야합니다. 필요한 연장을 설치하여 제대로 작동하는지 확인하십시오. Windows 8에서는 VS 코드가 가능하지만 더 나은 개발 경험과 보안을 위해 새로운 Windows 시스템으로 업그레이드하는 것이 좋습니다.

Python에서 비주얼 스튜디오 코드를 사용할 수 있습니다 Apr 15, 2025 pm 08:18 PM

VS 코드는 파이썬을 작성하는 데 사용될 수 있으며 파이썬 애플리케이션을 개발하기에 이상적인 도구가되는 많은 기능을 제공합니다. 사용자는 다음을 수행 할 수 있습니다. Python 확장 기능을 설치하여 코드 완료, 구문 강조 및 디버깅과 같은 기능을 얻습니다. 디버거를 사용하여 코드를 단계별로 추적하고 오류를 찾아 수정하십시오. 버전 제어를 위해 git을 통합합니다. 코드 서식 도구를 사용하여 코드 일관성을 유지하십시오. 라인 도구를 사용하여 잠재적 인 문제를 미리 발견하십시오.

메모장으로 파이썬을 실행하는 방법 Apr 16, 2025 pm 07:33 PM

메모장에서 Python 코드를 실행하려면 Python 실행 파일 및 NPPEXEC 플러그인을 설치해야합니다. Python을 설치하고 경로를 추가 한 후 nppexec 플러그인의 명령 "Python"및 매개 변수 "{current_directory} {file_name}"을 구성하여 Notepad의 단축키 "F6"을 통해 Python 코드를 실행하십시오.