python怎么获取html内容

在Python中，获取HTML内容有多种方法，以下是一些常用的方法：

1、使用requests库获取网页内容

requests库是Python中一个非常常用的HTTP请求库，可以用来发送各种类型的HTTP请求，包括GET、POST等，通过requests库，我们可以很容易地获取到网页的HTML内容。

需要安装requests库：

pip install requests

可以使用以下代码获取网页的HTML内容：

import requests
url = 'https://www.example.com'
response = requests.get(url)
html_content = response.text
print(html_content)

2、使用BeautifulSoup库解析HTML内容

BeautifulSoup库是一个用于解析HTML和XML文档的Python库，可以很方便地提取网页中的信息，在使用BeautifulSoup库之前，需要先安装它：

pip install beautifulsoup4

可以使用以下代码获取网页的HTML内容并解析：

from bs4 import BeautifulSoup
import requests
url = 'https://www.example.com'
response = requests.get(url)
html_content = response.text
soup = BeautifulSoup(html_content, 'html.parser')
print(soup.prettify())

3、使用lxml库解析HTML内容

lxml库是一个高性能的Python库，用于处理XML和HTML文档，在使用lxml库之前，需要先安装它：

pip install lxml

可以使用以下代码获取网页的HTML内容并解析：

from lxml import etree
import requests
url = 'https://www.example.com'
response = requests.get(url)
html_content = response.text
parser = etree.HTMLParser()
tree = etree.fromstring(html_content, parser)
print(etree.tostring(tree, pretty_print=True).decode('utf-8'))

4、使用Selenium库模拟浏览器获取HTML内容

Selenium库是一个用于自动化测试的工具，可以模拟用户操作浏览器的行为，通过Selenium库，我们可以很容易地获取到动态加载的网页内容，在使用Selenium库之前，需要先安装它：

pip install selenium

需要下载对应的浏览器驱动程序（如ChromeDriver），并将其添加到系统路径中，接下来，可以使用以下代码获取网页的HTML内容：

from selenium import webdriver
import time
url = 'https://www.example.com'
driver = webdriver.Chrome()   使用Chrome浏览器驱动，如果使用其他浏览器，请替换为相应的驱动名称，如firefox、edge等。
driver.get(url)
time.sleep(5)   等待页面加载完成，根据实际情况调整等待时间。
html_content = driver.page_source   获取网页的HTML内容。
driver.quit()   关闭浏览器驱动。
print(html_content)

以上就是Python中获取HTML内容的几种常用方法，根据实际需求和场景，可以选择合适的方法来获取网页内容。