新！电子社开放书库【附大佬们给出的昨日二社爬取方案】

初夏科技 · 发表于 2020-2-2 09:17:35

电子工业出版社悦系列知识库产品阅读链接 http://yd.51zhy.cn/

另外，昨日发出的机工社、清华社文泉已经有朋友给出采集方案与脚本
【中间的各种其他方案来自于论坛帖子，有研究需求可以去 https://owndiary.cn/dzgycbs1.html 感谢给出方案的大佬们】

并且在GAYHUB上找到Python方案
附上项目链接：https://github.com/gumblex/wqxt_pdf

why? · 发表于 2020-2-2 12:49:11

本帖最后由 why? 于 2020-2-2 13:16 编辑

使用方法
安装python3
pip3 install --upgrade setuptools
pip3 install -r requirements.txt
python3 crawl_wqxt.py 书本id

爬的有的慢

国外jj 爬着可能会time out 还是国内按需下载吧

yuanhua · 发表于 2020-2-2 09:33:42

pdf下载本地打不开显示损坏，加密了的

ljm1447669873 · 发表于 2020-2-2 09:43:21

这贴要火，前排占座

laulzgoay · 发表于 2020-2-2 09:46:08

mark

Init · 发表于 2020-2-2 09:55:58

前排等一个GD连接，忍不住看书了

剁手大队长 · 发表于 2020-2-2 10:21:58

提示: 作者被禁止或删除内容自动屏蔽

爬墙 · 发表于 2020-2-2 10:51:13

等待大佬分享谷歌连接

蓝瘦香菇 · 发表于 2020-2-2 10:51:46

Mark紫薯布丁

sh3dowin · 发表于 2020-2-2 11:05:11

还是微信读书好用。。。

ultramancliub · 发表于 2020-2-2 11:17:03

yuanhua 发表于 2020-2-2 09:33
pdf下载本地打不开显示损坏，加密了的

我这边也是这个问题

		自动登录	找回密码
密码			注册

剁手大队长剁手大队长当前离线积分 1665	发表于 2020-2-2 10:21:58 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
剁手大队长剁手大队长当前离线积分 1665
	回复支持反对举报