昨天坛友让帮忙爬的秀人，今天来分享了

etc小号 · 发表于 2022-5-10 20:09:10

qibinghua 发表于 2022-5-10 20:05
可以球写一个py的采集规则吗

不好意思哈，我用的火车头

py只会很简单的request和bs4，爬这种网站还是很吃力的

wangjianjilei · 发表于 2022-5-10 22:43:37

etc小号发表于 2022-5-10 20:04
大佬你好，带文件结构吗

带的，看代码就知道了

qingseyouran · 发表于 2022-5-10 22:46:18

wangjianjilei 发表于 2022-5-10 19:47
附件为php版本下载图片，自取
运行方式 windows命令行下php ./doall.php，没有环境变量的自己配 ...

单线程速度太慢，能不能弄个多线程的

qingseyouran · 发表于 2022-5-10 22:57:19

qingseyouran 发表于 2022-5-10 22:46
单线程速度太慢，能不能弄个多线程的

把txt分割了，手动10线程

wangjianjilei · 发表于 2022-5-10 23:34:26

qingseyouran 发表于 2022-5-10 22:46
单线程速度太慢，能不能弄个多线程的

不是不行，主要是他的文件有点问题，我下午写的时候没法一次读然后分割，他的分割点好像有点字符乱码，最后我不得以才这么做的，明天无聊的话看看怎么搞

brady_xiong · 发表于 2022-5-11 00:21:55

求问大佬，这个网站有反扒吗，比如下多了图片会自动触发反扒，让你下载都是同一张图片，大佬是怎么处理反扒的。

etc小号 · 发表于 2022-5-11 00:53:11

brady_xiong 发表于 2022-5-11 00:21
求问大佬，这个网站有反扒吗，比如下多了图片会自动触发反扒，让你下载都是同一张图片，大佬是怎么处理反扒 ...

没有，直接爬就行

brady_xiong · 发表于 2022-5-11 10:32:21

求问这个http://mm.hostloc.ltd/ 用的什么主题

uov · 发表于 2022-5-11 10:34:14

秀人全吗才29万张？

etc小号 · 发表于 2022-5-11 10:34:36

brady_xiong 发表于 2022-5-11 10:32
求问这个http://mm.hostloc.ltd/ 用的什么主题

cosy破解版

		自动登录	找回密码
密码			注册