全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworksBGVM服务器主机交流
IP归属甄别会员请立即修改密码Sharktech防护
查看: 12434|回复: 77

更有爱的下载mm131全站图片

  [复制链接]
发表于 2019-6-11 19:53:28 | 显示全部楼层 |阅读模式
本帖最后由 Eicky 于 2019-6-20 10:06 编辑

更新了,加入了多线程下载,现在6个类型,每个类型32线程,总共就是6x32,可以自己改,然后加了容错
性感那个类型可能会出错(反爬虫防御吧),如果出错了,可以单独执行xinggan.py,单独下载这个分类

-------------------------

此操作来自前面那位大佬
https://www.hostloc.com/thread-556170-1-1.html


emmm,他的这个方式有点头疼的地方,就是下载下来的图片没有分类,也没有中文名称,全是一串英文,看着就比较难受了,所以用python改造了下,进行了分类,并且都是中文,看着就舒服一点了

地址  :   https://github.com/eicky/mm131

食用方法:
先安装python3还有pip3(具体的安装方法请找度娘)

然后clone 代码到你的服务器  
git clone https://github.com/eicky/mm131.git

然后   
cd mm131

运行py文件
python3  mm131.py

运行报错是因为没有引用库, pip3 install bs4  即可

劣势就是,只开启了6个线程跑,时间略长一点,不过全是中文,并且良好分类
完结,撒花

放一份下好的图片
https://drive.google.com/file/d/1SShq_oJCGts70rE1O4z3lDpLj50l-wbF/view?usp=sharing


中文版在线浏览  https://drive.google.com/drive/folders/1vV8q_j7R9Jr1lQ1WuS7fnrz8Nz3YrMnW?usp=sharing
 楼主| 发表于 2019-6-19 11:28:54 | 显示全部楼层
运行库,报错,有可能是没有引入库。如果是库错误,需要先引入相应的库
pip3 install bs4
pip3 install requests

记得先安装python3和pip3
 楼主| 发表于 2019-6-20 10:06:53 | 显示全部楼层
中文版在线浏览  https://drive.google.com/drive/folders/1vV8q_j7R9Jr1lQ1WuS7fnrz8Nz3YrMnW?usp=sharing
发表于 2019-6-11 21:36:51 | 显示全部楼层
我写的下载和采集是分开的,配合使用;采集的信息里有套图标题、标签、分类,在源站的id,图片链接等等数据,方便导入到typecho或其他程序,导入到typecho时都关联上了分类和标签了。你可以看看我的演示站,http://typecho.coding.ee ,每天放出6套图,也就是每隔4个钟就放出一套
发表于 2019-6-11 20:19:47 | 显示全部楼层
用JAVA写这个,就是大炮打蚊子。。。

点评

你这形容无敌了 哈哈  发表于 2019-6-12 11:11
发表于 2019-6-11 19:55:00 | 显示全部楼层
你TM真是个人才!666
发表于 2019-6-11 19:57:03 | 显示全部楼层
好像很厉害的样子
发表于 2019-6-11 19:57:10 | 显示全部楼层
楼主要是搞个91的,那就爽歪歪了
发表于 2019-6-11 20:05:14 | 显示全部楼层
本帖最后由 dalaoa 于 2019-6-11 20:07 编辑

world天  py的多线程这么简单
两行代码就能搞定 厉害厉害!

楼猪能再接着写一个入typecho库的脚本吗
这样就完美了-_-||

 楼主| 发表于 2019-6-11 20:11:13 来自手机 | 显示全部楼层
dalaoa 发表于 2019-6-11 20:05
world天  py的多线程这么简单
两行代码就能搞定 厉害厉害!


那位大佬写了,我这个只是下载下来自己看着舒服
发表于 2019-6-11 20:12:34 | 显示全部楼层
这么细致的代码注释,楼主用心了。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

小黑屋|手机版|Archiver|全球主机交流论坛

GMT+8, 2019-9-17 14:17 , Processed in 0.096739 second(s), 9 queries , MemCache On.

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表