支持XPath的库有哪些?是否有完整的实现?图书馆是如何使用的?它的网站在哪里?


当前回答

如果你想拥有XPATH的强大功能,同时还能在任何时候使用CSS,你可以使用parsel:

>>> from parsel import Selector
>>> sel = Selector(text=u"""<html>
        <body>
            <h1>Hello, Parsel!</h1>
            <ul>
                <li><a href="http://example.com">Link 1</a></li>
                <li><a href="http://scrapy.org">Link 2</a></li>
            </ul
        </body>
        </html>""")
>>>
>>> sel.css('h1::text').extract_first()
'Hello, Parsel!'
>>> sel.xpath('//h1/text()').extract_first()
'Hello, Parsel!'

其他回答

Libxml2有很多优点:

符合规范 积极发展,社区参与 速度。这实际上是一个C实现的python包装器。 无处不在。libxml2库非常普遍,因此经过了良好的测试。

缺点包括:

严格遵守规范。像默认名称空间处理这样的事情在其他库中更容易。 使用本机代码。根据应用程序的分布/部署方式,这可能会很麻烦。rpm可以在一定程度上缓解这种痛苦。 手工资源处理。注意下面的示例中对freeDoc()和xpathFreeContext()的调用。这不是很Pythonic。

如果您正在做简单的路径选择,请坚持使用ElementTree (Python 2.5中包含了它)。如果您需要完全符合规范或原始速度,并且能够处理本机代码的分发,那么请使用libxml2。

libxml2 XPath使用示例


import libxml2

doc = libxml2.parseFile("tst.xml")
ctxt = doc.xpathNewContext()
res = ctxt.xpathEval("//*")
if len(res) != 2:
    print "xpath query: wrong node set size"
    sys.exit(1)
if res[0].name != "doc" or res[1].name != "foo":
    print "xpath query: wrong node set value"
    sys.exit(1)
doc.freeDoc()
ctxt.xpathFreeContext()

ElementTree XPath使用示例


from elementtree.ElementTree import ElementTree
mydoc = ElementTree(file='tst.xml')
for e in mydoc.findall('/foo/bar'):
    print e.get('title').text

lxml包支持xpath。它似乎工作得很好,尽管我在使用self::轴时遇到了一些麻烦。还有阿玛拉,但我个人没用过。

您可以使用lxml中的简单soupparser

例子:

from lxml.html.soupparser import fromstring

tree = fromstring("<a>Find me!</a>")
print tree.xpath("//a/text()")

使用LXML。LXML使用了libxml2和libxslt的全部功能,但将它们包装在更多的“Python”绑定中,而不是这些库的原生Python绑定。因此,它获得了完整的XPath 1.0实现。Native ElemenTree支持有限的XPath子集,尽管它可能已经足够满足您的需求。

另一个选项是py-dom-xpath,它与minidom无缝合作,是纯Python,所以可以在appengine上工作。

import xpath
xpath.find('//item', doc)