Quantcast
Channel: ITPUB论坛-专业的IT技术社区
Viewing all articles
Browse latest Browse all 18583

请教用selenium从网站上抓取网页内容问题

$
0
0
通过selenium写了个自动化脚本程序,从某网站上抓取网页信息,因数据量较大,而且要翻页,有1万页,需要执行100小时,执行过程中查找元素,点击会越来越慢,大约执行到30小时左右,IE浏览器内存占用1G多,iedriverserver.exe占用600M,然后就不动了 ,挂了。应该是内存 ...

Viewing all articles
Browse latest Browse all 18583

Trending Articles