博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
运维学python之爬虫工具篇(六)Pyquery的用法
阅读量:6424 次
发布时间:2019-06-23

本文共 1789 字,大约阅读时间需要 5 分钟。

1 简介

今天介绍的工具是Pyquery,没错,就是jquery的表哥,是用于python的jquery类库。pyquery允许您在xml文档上进行jquery查询。API类似于jquery。pyquery使用lxml进行快速xml和html操作。

2 安装

pip安装

pip install pyquery

pycharm安装看以前的文章能找到(略)

3 初始化

您可以使用PyQuery类从一个字符串、一个lxml文档,从一个文件或一个url四种方式初始化,分别举例:

>>> from pyquery import PyQuery as pq>>> from lxml import etree>>> import urllib>>> d = pq("") # 字符串>>> d = pq(etree.fromstring(""))  # lxml文档>>> d = pq(url='http://google.com/') # url>>> d = pq(filename=path_to_html_file) # 文件

4 快速开始

快速体验

以从一个文件方式初始化,文件名‘index.html’,文件内容如下:

编写程序如下:

# -*- coding: utf-8 -*-from pyquery import PyQuery as pqdoc = pq(filename='index.html')print(doc.html())print(type(doc))li = doc('li')print(type(li))print(li.text())

运行结果如下:

first item second item third item fourth item fifth item

属性操作

p = ''doc = pq(p)print(doc.attr('class', '21'))print(doc.attr('src'))print(doc.remove_attr('src'))print(doc.remove_class('21'))print(doc.add_class('22'))print(doc.css('font-size', '16px'))print(doc.css('backgroupd-color', 'red'))

结果:

http://static.firefoxchina.cn/img/201712/5_5a459650ed4440.jpg

发现和jquery操作基本一样,只不过doc相当于$,而且通过上面例子也可以看出p一直是在原来结果上变化的。

DOM

p = '

I would like to say:

'doc = pq(p)a = doc.append('Hello a')print(a)b = doc.prepend('Hello b')print(b)

DOM 操作也是与 jQuery 一样。

遍历

d = pq('
foo
bar
')print([i.text() for i in d.items('span')])

通过items获取列表内容进行循环,结果如下:

['foo', 'bar']

api

其实要搞好这一章,还是需要去看看jquery,看完之后再回过头来看pyquery,会好很多。

部分内容摘自:

转载于:https://blog.51cto.com/linuxliu/2055848

你可能感兴趣的文章
IT基础架构规划方案之实际网络设计案例
查看>>
Navicat for MySQL 使用SSH方式链接远程数据库(二)
查看>>
poj 1274The Perfect Stall
查看>>
ibm BIP2276E: The flow includes a message flow of node type 'ComIbmFileReadNode'
查看>>
HDU 4720 Naive and Silly Muggles (外切圆心)
查看>>
垂死挣扎还是涅槃重生 -- Delphi XE5 公布会归来感想
查看>>
Ubuntu上运行Blender,在控制台上查看运行结果
查看>>
怎么检查网站的死链接呢?
查看>>
scrapy爬虫框架实例一,爬取自己博客
查看>>
React是UI的未来吗?
查看>>
中国人社部:2018年15个省(区、市)调整最低工资标准
查看>>
手把手教你通过Thrift 访问ApsaraDB for HBase
查看>>
MacOS安装MySQL 报错
查看>>
Java知识点总结(反射-反射操作泛型)
查看>>
Vue+webpack+Element 兼容问题总结
查看>>
《软技能》读书笔记(下)
查看>>
textarea文域高度自适应
查看>>
go语言renderer包代码分析
查看>>
【Scala谜题】成员声明的位置
查看>>
git最最最最...常用命令
查看>>