《各平臺數(shù)據(jù)采集及方法》課件-金融網(wǎng)站數(shù)據(jù)采集

金融網(wǎng)站數(shù)據(jù)采集金融網(wǎng)站的數(shù)據(jù)采集打開實例網(wǎng)址“東方財富網(wǎng)”，單擊“排行”超鏈接進(jìn)入基金排行頁面，如圖所示。采集全部開放基金排行表格內(nèi)的所有內(nèi)容，要求使用XPath軸方式進(jìn)行翻頁。金融網(wǎng)站的數(shù)據(jù)采集新建自定義采集任務(wù)。單擊“主頁”界面中“自定義采集”下的“立即使用”按鈕，新建自定義采集任務(wù)，然后在“網(wǎng)址”輸入框中輸入實訓(xùn)網(wǎng)址，單擊“保存網(wǎng)址”按鈕保存網(wǎng)址，如圖所示。步驟1金融網(wǎng)站的數(shù)據(jù)采集進(jìn)入排行頁面。在瀏覽頁面中單擊基金右側(cè)的“排行”按鈕，在“操作提示”面板中單擊“點擊該鏈接”選項進(jìn)入排行頁面，如圖所示。步驟2金融網(wǎng)站的數(shù)據(jù)采集步驟3：XPath軸翻頁。（1）循環(huán)點擊當(dāng)前頁數(shù)單擊當(dāng)前頁面頁數(shù)即第1頁，在“操作提示”面板中單擊“循環(huán)點擊單個元素”選項，流程圖中生成“循環(huán)翻頁”模塊。金融網(wǎng)站的數(shù)據(jù)采集步驟3：XPath軸翻頁。（2）修改循環(huán)XPath選擇“循環(huán)翻頁”模塊，將循環(huán)方式設(shè)置為“單個元素”，修改XPath為“//LABEL[@class='cur']/following-sibling::label[1]”。金融網(wǎng)站的數(shù)據(jù)采集步驟3：XPath軸翻頁。（3）修改點擊翻頁Ajax超時選擇“點擊翻頁”模塊，由于系統(tǒng)生成為1秒，為防止1秒時間不夠翻頁，設(shè)置“Ajax超時”為3秒。金融網(wǎng)站的數(shù)據(jù)采集循環(huán)提取數(shù)據(jù)。選中表格中整行數(shù)據(jù)，單擊某單元格，在“操作提示”面板中單擊“TR”選項即可選擇整行數(shù)據(jù)，如上圖所示。循環(huán)提取表格，再次進(jìn)行上方的操作，選中第二行某單元格，單擊“操作提示”面板中的“TR”選項，可見八爪魚采集器選中所有行數(shù)據(jù)。單擊“操作提示”面板中的“采集以下元素文本”選項，流程圖中生“成循-環(huán)提取數(shù)據(jù)”模塊，如下圖所示。步驟4金融網(wǎng)站的數(shù)據(jù)采集

修改提取內(nèi)容。選擇“提取數(shù)據(jù)”模塊后，單擊需要提取的內(nèi)容，在“操作提示”面板中選擇“采集該元素的文本”選項，如圖所示，提取所有字段。步驟5金融網(wǎng)站的數(shù)據(jù)采集

開始采集。單擊界面上方的“開始采集”按鈕，單擊“啟動本地采集”按鈕開始采集。步驟6金融網(wǎng)站的數(shù)據(jù)采集

數(shù)據(jù)導(dǎo)出。數(shù)據(jù)采集完成后，單擊“導(dǎo)出數(shù)據(jù)”按鈕，選擇導(dǎo)出方式，單擊“確定”按鈕，選擇存放位置即可。步驟7資料來源：[1]劉寶強