全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 3387|回复: 22
打印 上一主题 下一主题

[Windows VPS] 有老哥能爬豆瓣电影吗?

[复制链接]
跳转到指定楼层
1#
发表于 2020-4-7 21:40:21 | 只看该作者 回帖奖励 |正序浏览 |阅读模式
豆瓣电影的电影 电视剧 综艺 动漫的url或者ID,我再开火车采集。
23#
发表于 2020-4-13 00:07:55 | 只看该作者
yswei 发表于 2020-4-12 23:47
豆瓣的代码里,综艺 动漫都写的电视剧。

直接pm预算吧,预算合适的话可以解决,能保证绝大多数分类的准确
22#
发表于 2020-4-12 23:53:14 | 只看该作者
浏览器 F12-Network(点开加载的文件看看,就知道怎么提取豆瓣的影片URL了)
21#
 楼主| 发表于 2020-4-12 23:47:56 | 只看该作者
爬虫部落 发表于 2020-4-12 23:41
明天回去看看代码,我记得电影电视是一级分类,还有具体所属类型的二级分类。 ...

豆瓣的代码里,综艺 动漫都写的电视剧。
20#
发表于 2020-4-12 23:41:05 来自手机 | 只看该作者
yswei 发表于 2020-4-12 23:39
怎么判断是电影 电视剧 综艺还是动漫呢?

明天回去看看代码,我记得电影电视是一级分类,还有具体所属类型的二级分类。
19#
 楼主| 发表于 2020-4-12 23:39:04 | 只看该作者
爬虫部落 发表于 2020-4-12 23:37
我的数据好像除了短评其他字段都抓了,要是价格合适可以考虑出,或者根据你提供的id抓取需要的字段 ...

怎么判断是电影 电视剧 综艺还是动漫呢?
18#
发表于 2020-4-12 23:37:56 来自手机 | 只看该作者
yswei 发表于 2020-4-12 23:34
不知道怎么获取分类

我的数据好像除了短评其他字段都抓了,要是价格合适可以考虑出,或者根据你提供的id抓取需要的字段
17#
 楼主| 发表于 2020-4-12 23:34:52 | 只看该作者
爬虫部落 发表于 2020-4-12 22:41
价格到了,什么都有

如果你id够全直接去抓内容就行

不知道怎么获取分类
16#
发表于 2020-4-12 23:27:24 | 只看该作者
同求一份,大佬代价pm吧
15#
发表于 2020-4-12 22:53:11 | 只看该作者
豆瓣有api,不过有限制请求频率
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-12-12 12:14 , Processed in 0.068785 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表