《數(shù)據(jù)采集技術》課件-XPath 解析庫

XPath解析庫Contents知識目標掌握XPath使用方法技能目標提高數(shù)據(jù)采集和處理能力素養(yǎng)目標培養(yǎng)良好的信息素養(yǎng)和道德意識XPath簡介XPath（XMLPath）是一種查詢語言也稱為XML路徑語言，功能：XMLHTML樹狀結構中尋找結點確定XML文檔中某部分位置。XPath簡介XPath使用路徑表達式選?。篨Path（XMLPath）是一種查詢語言中的節(jié)點或者節(jié)點集XML文檔這些路徑表達式代表著從一個節(jié)點到另一個或者一組節(jié)點的順序，并以“/”字符進行分隔。XPath簡介XML文檔中的節(jié)點例子：示例1<?xmlversion="1.0"encoding="UTF-8"?><bookstore><book><titlelang="en">毛澤東選集</title><price>29.99</price></book><book><titlelang="en">LearningXML</title><price>39.95</price></book></bookstore>XML<bookstore>(文檔節(jié)點)<price>29.99</price>(元素節(jié)點)lang="en"(屬性節(jié)點)路徑表達式：/<bookstore>/<book>/<price>XML文檔被作為節(jié)點樹來對待。樹的根被稱為文檔節(jié)點或者根節(jié)點。XPath簡介節(jié)點是通過沿著路徑來選取的。下面列出了常用的路徑表達式：XPath使用路徑表達式在XML文檔中選取節(jié)點表達式說明nodename選取nodename節(jié)點的所有子節(jié)點/從當前節(jié)點選取直接子節(jié)點//從當前節(jié)點選取子孫節(jié)點.選取當前節(jié)點..選取當前節(jié)點的父節(jié)點@選取屬性父節(jié)點表示當前節(jié)點的上一層節(jié)點，子節(jié)點表示當前節(jié)點的下一層節(jié)點。子孫節(jié)點表示當前節(jié)點的所有下層節(jié)點。說明XPath簡介示例2<?xmlversion="1.0"encoding="UTF-8"?><bookstore><book><titlelang="en">HarryPotter</title><price>29.99</price></book><book><titlelang="en">LearningXML</title><price>39.95</price></book></bookstore>XML路徑表達式結果bookstore選取bookstore元素的所有子節(jié)點。/bookstore選取根元素bookstore。注釋：假如路徑起始于正斜杠(/)，則此路徑始終代表到某元素的絕對路徑！bookstore/book選取屬于bookstore的子元素的所有book元素。//book選取所有book子元素，而不管它們在文檔中的位置。bookstore//book選擇屬于bookstore元素的后代的所有book元素，而不管它們位于bookstore之下的什么位置。//@lang選取名為lang的所有屬性。列出一些路徑表達式以及表達式的結果：謂語（Predicates）謂語用來查找某個特定的節(jié)點或者包含某個指定的值的節(jié)點。謂語被嵌在方括號中。謂語（Predicates）路徑表達式結果/bookstore/book[1]選取屬于bookstore子元素的第一個book元素。/bookstore/book[last()]選取屬于bookstore子元素的最后一個book元素。/bookstore/book[last()-1]選取屬于bookstore子元素的倒數(shù)第二個book元素。/bookstore/book[position()<3]選取最前面的兩個屬于bookstore元素的子元素的book元素。//title[@lang]選取所有擁有名為lang的屬性的title元素。//title[@lang='eng']選取所有title元素，且這些元素擁有值為eng的lang屬性。/bookstore/book[price>35.00]選取bookstore元素的所有book元素，且其中的price元素的值須大于35.00。/bookstore/book[price>35.00]//title選取bookstore元素中的book元素的所有title元素，且其中的price元素的值須大于35.00。列出帶有謂語的一些路徑表達式，以及表達式的結果：選取未知節(jié)點XPath通配符可用來選取未知的XML元素通配符描述*匹配任何元素節(jié)點@*匹配任何屬性節(jié)點node()匹配任何類型的節(jié)點列出一些路徑表達式，以及這些表達式的結果：路徑表達式結果/bookstore/*選取bookstore元素的所有子元素//*選取文檔中的所有元素//title[@*]選取所有帶有屬性的title元素選取若干路徑通過在路徑表達式中使用"|"運算符，可以選取若干個路徑。列出一些路徑表達式，以及這些表達式的結果：路徑表達式結果//book/title|//book/price選取book元素的所有title和price元素。//title|//price選取文檔中的所有title和price元素。/bookstore/book/title|//price選取屬于bookstore元素的book元素的所有title元素，以及文檔中所有的price元素。功能函數(shù)當對象僅掌握了其部分特征，需要模糊搜索該類對象時，可使用Xpath中提供的功能函數(shù)進行模糊搜索，具體函數(shù)如表所示。功能函數(shù)

示例說明starts-with//div[starts-with(@id,”co”)]選取id值以co開頭的div節(jié)點contains//div[contains(@id,”co”)]選取id值包含co的div節(jié)點and//div[contains(@id,”co”)andcontains(@id,”en”)]選取id值包含co和en的div節(jié)點text()//li[contains(text(),”first”)]選取節(jié)點文本包含first的div節(jié)點XPath開發(fā)工具Python提供了一些好用的插件或工具，方便開發(fā)者定位和獲取XPath路徑，主要包含如下幾種：1.XMLQuire開源的XPath表達式編輯工具2.XPathHelper適用于Chrome瀏覽器3.XPathChecker使用于Firefox瀏覽器方便網頁分析的工具：實戰(zhàn)案例瀏覽器（以谷歌為例）添加XPathHelper插件使用谷歌瀏覽器，打開設置（Settings）。點擊擴展（Extensions）。打開開發(fā)者模式（Developermode）。加載已解壓的擴展程序。點擊地址欄右側的“”圖標，打開XPathHelper工具。12345本講小結1XPath的介紹、基本使用方法及相關函數(shù)2XPath課程案例實戰(zhàn)課后作業(yè)使用XPath表達式從給定的XML文檔中提取所有訂單號。XML文檔如下：<orders><order><orderNumber>