说明:爬虫估计很多人知道,可以自动下载一些网站上面的图片,视频,这里说下使用FileManager
和爬虫建立影音、图片库,并分享几个美女站爬虫(1024
/mm131
/91
/mmjpg
)。想看美女的可以爬来看看。至于其他学习资料网站的爬虫,可以去Github
上找找。
提示:91爬虫已失效,现已移除该爬虫脚本。
截图
使用教程
注:以下部分爬虫由Eq博主提供。
爬虫使用python3
+requests
库编写,在Windows
系统和Linux
系统下都可以运行,大部分Ubuntu
、Debian
都含有Python3
,直接安装最新此系统就可以了。而CentOS
需要额外安装Python3
,这里只说下CentOS 7
系统使用方法。
1、安装FileManager网盘
教程参考:利用Caddy扩展快速安装FileManager私人网盘/在线文件管理器。
2、检查Python3并升级
查看Python3
是否安装
python3 -V
如果返回-bash: python3: command not found
,就使用Python 3.6
一键脚本进行安装:
wget https://toot.su/usr/shell/Python3/CentOS_Python3.6.sh && sh CentOS_Python3.6.sh
本脚本包含许多必需库,不会因为缺少依赖而出问题,如果不想用脚本的,也可以手动升级,教程参考:Linux CentOS升级Python 3.6版本方法。
3、安装requests库
pip3 install requests
4、创建文件夹
mkdir /usr/local/caddy/www/file/xx #用来存储文件
cd /usr/local/caddy/www/file/xx
5、下载并运行爬虫
#1024图片爬虫
wget https://toot.su/usr/shell/Python3/1024_spider.py && python3 1024_spider.py
#mm131图片爬虫
wget https://toot.su/usr/shell/Python3/mm131_spider.py && python3 mm131_spider.py
#mmjpg图片爬虫
wget https://toot.su/usr/shell/Python3/mmjpg.py && python3 mmjpg.py
建议使用screen
后台操作,参考:使用screen来实现多任务不断线操作命令。最后进入FileManager
网盘查看即可。
未经允许不得转载:嘟嘟 » 使用FileManager+基于Python3的爬虫程序建立影音图片库
最新评论
请问下,python3 tg_username_update.py都会提示下面这个是因为什么啊 Traceback (most recent call last): File "tg_username_update.py", line 21, in <module> cake = emojize(":cake:", use_aliases=True) TypeError: emojize() got an unexpected keyword argument 'use_aliases'
不可以了
# Install [Debian] [bullseye] [amd64] Downloading... grep: (standard input): binary file matches Error! grub.cfg. root@RRR2:~#
博主你好,请问cloudfront 上传收费这个是事实吧,已经找了几个贴子确认了。 那有什么好办法能够避开这个收费呢?如果不能避开感觉还是cloudflare 比较稳。
来看看
第5步添加自定义主机名进去后等txt验证提示custom hostname does not name to this zone
那没事了,我静态博客。谢谢
为什么缓存键和源请求那里不设置缓存?