Python获取基金网站网页内容、使用BeautifulSoup库分析html操作示例

本文实例讲述了Python获取基金网站网页内容、使用BeautifulSoup库分析html操作。分享给大家供大家参考，具体如下：

利用 urllib包 获取网页内容

#引入包
from urllib.request import urlopen
response = urlopen("http://fund.eastmoney.com/fund.html")
html = response.read();
#这个网页编码是gb2312
#print(html.decode("gb2312"))
#把html内容保存到一个文件
with open("1.txt","wb") as f:
f.write(html.decode("gb2312").encode("utf8"))
f.close()

使用BeautifulSoup分析html

from bs4 import BeautifulSoup
# 读取文件内容
with open("1.txt", "rb") as f:
html = f.read().decode("utf8")
f.close()
# 分析html内容
soup = BeautifulSoup(html,"html.parser")
# 取出网页title
print(soup.title) #<title>每日开放式基金净值表 _ 天天基金网</title>
# 基金编码
codes = soup.find("table",id="oTable").tbody.find_all("td","bzdm")
result = () # 初始化一个元组
for code in codes:
result += ({
"code":code.get_text(),
"name":code.next_sibling.find("a").get_text(),
"NAV":code.next_sibling.next_sibling.get_text(),
"ACCNAV":code.next_sibling.next_sibling.next_sibling.get_text()
},)
# 打印结果
print(result[0]["name"])

更多关于Python相关内容感兴趣的读者可查看本站专题：《Python进程与线程操作技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》、《Python+MySQL数据库程序设计入门教程》及《Python常见数据库操作技巧汇总》

希望本文所述对大家Python程序设计有所帮助。

您可能感兴趣的文章:

• 零基础写python爬虫之使用urllib2组件抓取网页内容
• 【Python】Python的urllib模块、urllib2模块批量进行网页下载文件
• Python urllib、urllib2、httplib抓取网页代码实例
• 在Python中使用cookielib和urllib2配合PyQuery抓取网页信息
• python网页请求urllib2模块简单封装代码
• Python3爬虫之urllib携带cookie爬取网页的方法
• python 解析html之BeautifulSoup
• Python使用BeautifulSoup库解析HTML基本使用教程
• python爬虫入门教程--HTML文本的解析库BeautifulSoup（四）
• python网络编程学习笔记(七)：HTML和XHTML解析(HTMLParser、BeautifulSoup)
• Python利用BeautifulSoup解析Html的方法示例
• Python HTML解析器BeautifulSoup用法实例详解【爬虫解析器】

• Python
• 网页内容
• BeautifulSoup
• html