python3抓取中文网页的方法
作者：文傻理呆
这篇文章主要介绍了python3抓取中文网页的方法,实例分析了Python3页面抓取及编码转换的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下
本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下：
#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))
希望本文所述对大家的Python程序设计有所帮助。
您可能感兴趣的文章:
- 利用Python3分析sitemap.xml并抓取导出全站链接详解
- python3实现抓取网页资源的 N 种方法
- 详解python3百度指数抓取实例
- Python3使用requests包抓取并保存网页源码的方法
- 使用Python3编写抓取网页和只抓网页图片的脚本
- 在Python3中使用asyncio库进行快速数据抓取的教程
- Python使用lxml模块和Requests模块抓取HTML页面的教程
- 用Python程序抓取网页的HTML信息的一个小实例
- python抓取并保存html页面时乱码问题的解决方法
- Python使用urllib2模块抓取HTML页面资源的实例分享
- Python3实现抓取javascript动态生成的html网页功能示例