推薦安裝火狐瀏覽器并安裝firebug插件，這樣方便你定位網(wǎng)頁元素，找到“04”這條記錄前面的checkbox控件的id或者xpath，然后調(diào)用webdriver的相應(yīng)方法即可；這時(shí)候最好按idclass name來獲取，如果不唯一，那就遍歷循環(huán)判斷比如先找到父元素再遍歷各個(gè)子元素，雖然程序運(yùn)行效率會(huì)降低一些，但是程序跑起來的時(shí)候不容易掛關(guān)于效率問題其實(shí)也不用太糾結(jié)，我都純用Selenium了我還。

3 配置采集規(guī)則可以使用智能識(shí)別功能，讓八爪魚自動(dòng)識(shí)別頁面的數(shù)據(jù)結(jié)構(gòu)，或者手動(dòng)設(shè)置采集規(guī)則4 如果手動(dòng)設(shè)置采集規(guī)則，可以通過鼠標(biāo)選擇頁面上的數(shù)據(jù)元素，并設(shè)置相應(yīng)的采集規(guī)則，以確保正確獲取所需的數(shù)據(jù)5 設(shè)置翻頁；直接通過tableCellAddress， 語法為 比如 table id 為 foo 則第2行第5列可以使用 來定位下面是selenium關(guān)于table的相關(guān)文檔 Generated from getTabletableCellAddressArguments。

實(shí)現(xiàn)對(duì)“查看更多”的自動(dòng)點(diǎn)擊，目標(biāo)是獲取2020年的文章相關(guān)數(shù)據(jù)蛋肥想法 36氪的數(shù)據(jù)很滿足強(qiáng)迫癥，沒有空格換行，只需篩選出2020年的數(shù)據(jù)保存蛋肥想法 此次重點(diǎn)是學(xué)習(xí)selenium，所以只簡單做一下數(shù)據(jù)可視化；獲取table的行數(shù) rowCount = lendriverfind_elements_by_xpath#39*@id=quotlisttablequottbodytr#39獲取第三列的每一行的值 for i in range2，rowCountprint driverfind_element_by_xpath#39*@id=quotlis。

Selenium是一個(gè)用于Web應(yīng)用程序測試的工具Selenium測試直接在瀏覽器中運(yùn)行，就像真實(shí)用戶所做的一樣Selenium測試可以在WindowsLinux和Macintosh上的InternetExplorerChrome和Firefox中運(yùn)行其他測試工具都不能覆蓋如此多的；可以通過Excel表格東方財(cái)富網(wǎng)的財(cái)務(wù)報(bào)表網(wǎng)頁也是JavaScript動(dòng)態(tài)加載的，本文利用Selenium方法爬取該網(wǎng)站上市公司的財(cái)務(wù)報(bào)表數(shù)據(jù)財(cái)經(jīng)學(xué)習(xí)經(jīng)常要用到上市公司的財(cái)報(bào)，這其中包括PDF格式的年報(bào)季報(bào)，和Excel格式的財(cái)務(wù)報(bào)表分析指標(biāo)。

selenium 獲取表格數(shù)據(jù)

3最后對(duì)應(yīng)上面的json文件，我們就可以直接獲取并解析json了，這里主要用到requests和json這2個(gè)模塊，其中requests用于根據(jù)url地址獲取json文件，json用于解析json文件，提取出我們所需要的信息，即div動(dòng)態(tài)加載的數(shù)據(jù)，測試代碼如下。

導(dǎo)出的操作一般就是瀏覽器會(huì)把Excel下載到本地你需要做的在selenium啟動(dòng)瀏覽器前，為其配置好默認(rèn)下載文件夾 點(diǎn)擊導(dǎo)出后，判斷此默認(rèn)文件夾下是否有這個(gè)文件如果需要判斷Excel內(nèi)容，則需要能夠處理Excel的架包以及用自己。

如果Action的返回頁面還為這個(gè)頁面，那么就還可以把對(duì)應(yīng)的值傳回給這個(gè)iframe，就可以把a(bǔ)ction里面的數(shù)據(jù)直接傳輸?shù)絠frame里面，而不用通過主頁面來傳輸數(shù)據(jù)，這樣就可以實(shí)現(xiàn)iframe的數(shù)據(jù)的獨(dú)立操作而不依賴于主頁面需要等待的。

導(dǎo)出的操作一般就是抄瀏覽器會(huì)把Excel下載到本地你需要做襲的在selenium啟動(dòng)瀏覽器前，為其配置好默認(rèn)下載文件夾 點(diǎn)擊導(dǎo)出百后，判斷此默認(rèn)文件夾下是否有這度個(gè)文件如果需要判斷Excel內(nèi)容知，則需道要能夠處理Excel的。

selenium獲取console內(nèi)容

1、可以使用智能識(shí)別功能，讓八爪魚自動(dòng)識(shí)別頁面的數(shù)據(jù)結(jié)構(gòu)，或者手動(dòng)設(shè)置采集規(guī)則4 如果手動(dòng)設(shè)置采集規(guī)則，可以通過鼠標(biāo)選擇頁面上的數(shù)據(jù)元素，并設(shè)置相應(yīng)的采集規(guī)則，以確保正確獲取所需的數(shù)據(jù)5 設(shè)置翻頁規(guī)則如果需要采集。

2、注意最新版本的selenium已經(jīng)取消了這種格式，取而代之的是你要先導(dǎo)入然后再知識(shí)點(diǎn)掌握 driver對(duì)象定位標(biāo)簽元素獲取標(biāo)簽對(duì)象的方法 代碼實(shí)現(xiàn)，如下，獲取騰訊新聞首頁的新聞標(biāo)簽的內(nèi)容知識(shí)點(diǎn)掌握 元素對(duì)象的操作方法。

3、3如果網(wǎng)頁使用了前端框架如ReactVue等，可以使用相關(guān)的瀏覽器插件來查看前端組件樹，并從中獲取數(shù)據(jù)4如果以上方法均無法獲取數(shù)據(jù)，可以嘗試模擬瀏覽器行為來獲取數(shù)據(jù)，例如使用Selenium自動(dòng)化測試工具，或者使用網(wǎng)絡(luò)。