您的位置:首页 > Web前端 > JavaScript

图片爬虫工具使用过程中遇到的相关问题(selenium与phantomjs问题)

2020-06-29 04:50 525 查看

一、爬虫工具下载

可参考
【杂谈】深度学习必备,各路免费爬虫一举拿下
https://mp.weixin.qq.com/s/75QDjRTDCKzuM68L4fg5Lg
目前用的图片工具是:
git clone https://github.com/sczhengyabin/Image-Downloader

二、运行爬虫工具

从命令模式进入爬虫工具的目录,并余下

python3 image_downloader_gui.py

三、运行爬虫工具过程中报错

1、缺少 selenium

(1)下载
直接点击网址下载selenium
或者

wget https://pypi.python.org/packages/41/80/268fda78a53c2629128f8174d2952c7f902c93ebaa2062b64f27aa101b07/setuptools-38.2.3.zip#md5=0ae64455d276ff864b40aca9c06ea7c1 #获取安装包

(2)解压

unzip setuptools-38.2.3.zip #解压

(3)进入解压后的文件夹
cd 相应路径
(4)安装文件

python3 setup.py install

2、Message: ‘phantomjs’ executable needs to be in PATH. 需要下载phantomjs,再安装

(1)下载PhantomJS

wget -N https://bitbucket.org/ariya/phantomjs/downloads/phantomjs-2.1.1-linux-x86_64.tar.bz2

(2)解压缩

tar -xvf  phantomjs-2.1.1-linux-x86_64.tar.bz2

(3)进入解压的文件夹的相应路劲后,安装

sudo apt-get install phantomjs

(4)确认安装成功

phantomjs --version

(5)退出
phantom.exit(0)

再次在命令界面运行即可爬虫相关图片了

python3 image_downloader_gui.py
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: 
相关文章推荐