图片爬虫工具使用过程中遇到的相关问题(selenium与phantomjs问题)
2020-06-29 04:50
525 查看
一、爬虫工具下载
可参考
【杂谈】深度学习必备,各路免费爬虫一举拿下
https://mp.weixin.qq.com/s/75QDjRTDCKzuM68L4fg5Lg
目前用的图片工具是:
git clone https://github.com/sczhengyabin/Image-Downloader
二、运行爬虫工具
从命令模式进入爬虫工具的目录,并余下
python3 image_downloader_gui.py
三、运行爬虫工具过程中报错
1、缺少 selenium
(1)下载
直接点击网址下载selenium
或者
wget https://pypi.python.org/packages/41/80/268fda78a53c2629128f8174d2952c7f902c93ebaa2062b64f27aa101b07/setuptools-38.2.3.zip#md5=0ae64455d276ff864b40aca9c06ea7c1 #获取安装包
(2)解压
unzip setuptools-38.2.3.zip #解压
(3)进入解压后的文件夹
cd 相应路径
(4)安装文件
python3 setup.py install
2、Message: ‘phantomjs’ executable needs to be in PATH. 需要下载phantomjs,再安装
(1)下载PhantomJS
wget -N https://bitbucket.org/ariya/phantomjs/downloads/phantomjs-2.1.1-linux-x86_64.tar.bz2
(2)解压缩
tar -xvf phantomjs-2.1.1-linux-x86_64.tar.bz2
(3)进入解压的文件夹的相应路劲后,安装
sudo apt-get install phantomjs
(4)确认安装成功
phantomjs --version
(5)退出
phantom.exit(0)
再次在命令界面运行即可爬虫相关图片了
python3 image_downloader_gui.py
相关文章推荐
- 使用最广泛的Android爬虫指示器PagerSlidingTabStrip遇到的相关问题的解决,并源码修改
- Mac Mini 安装搭建swift开发框架时,使用cocopods第三方库管理工具时,在安装过程中遇到的问题总结了一下!
- 使用selenium过程中遇到的问题(1)
- ubuntu12.04-32位,安装KLEE及使用工具过程中遇到的问题
- Python结巴中文分词工具使用过程中遇到的问题及解决方法
- 使用python+selenium爬虫时遇到的一些问题
- [项目过程中所遇到的各种问题记录]编辑器篇——FCKeditor相关知识及各种常见使用问题
- wampserver使用过程中遇到的问题及相关配置
- selenium使用过程中遇到的问题
- Python爬虫(图片)编写过程中遇到的问题
- selenium 在使用过程在遇到的问题总结
- python爬虫使用Selenium库的过程中遇到的问题
- 在使用 SQL Server 的过程中,用户遇到最多的问题莫过于连接失败了。一般而言,有两种连接SQL Server 的方式,一是利用 SQL Server 自带的客户端工具
- 问题:部署到iis上后Chart图片不显示;结果:使用webchart过程中遇到的一些问题
- 学习testNG过程中遇到使用IntelliJ IDEA工具,在resources中创建的xml文件,点击右键没有run选项,折腾了三个小时,原来一个括号顺序的问题
- mini2440交叉编译工具安装及使用过程中可能会遇到的问题及解决办法
- 使用母板页过程中遇到的图片地址问题
- iOS开发工具-如何使用网络封包分析工具Charles,通过配置proxy对http、https、tcp、udp 等协议的请求响应过程交互信息进行分析、判断、解决我们移动开发中的遇到的各种实际问题。
- [项目过程中所遇到的各种问题记录]编辑器篇——FCKeditor相关知识及各种常见使用问题
- 关于《自己动手写CPU》使用GNU工具过程遇到的问题