全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
123
返回列表 发新帖
楼主: mikasa
打印 上一主题 下一主题

昨天摸索了一天,总算用scrapy把爬虫写好了

[复制链接]
21#
 楼主| 发表于 2021-12-17 16:15:03 | 只看该作者
dragonfsky 发表于 2021-12-17 15:57
什么数据这么大 不会是xjj吧

壁纸网站,打算搭个图片站试试,xjj违法不敢弄
22#
发表于 2021-12-17 16:15:35 | 只看该作者
mikasa 发表于 2021-12-17 16:12
还没学,我看一下文档,等下就上。能不能推荐用什么数据库啊?

使用成本最低的是sqlite,学个建表,查表,增表,几个语句就能直接上了,python原生支持sqlite,import就好了
23#
发表于 2021-12-17 16:15:49 | 只看该作者
这个有啥用?
24#
 楼主| 发表于 2021-12-17 16:17:17 | 只看该作者
luckycat 发表于 2021-12-17 16:15
使用成本最低的是sqlite,学个建表,查表,增表,几个语句就能直接上了,python原生支持sqlite,import就好了 ...


好的,谢谢啦,之前学了点redis,一直拿来当数据库用
25#
发表于 2021-12-17 16:18:27 | 只看该作者
mikasa 发表于 2021-12-17 16:15
壁纸网站,打算搭个图片站试试,xjj违法不敢弄

https://pynative.com/python-sqlite-blob-insert-and-retrieve-digital-data/
存图片看这个教程就好了

点评

看到了  发表于 2021-12-17 16:21
26#
 楼主| 发表于 2021-12-17 17:04:35 | 只看该作者

Scrapy?爬虫框架,大部分内容已经写好了,不用自己再写
27#
发表于 2021-12-17 21:07:17 | 只看该作者
mikasa 发表于 2021-12-17 15:56
低技术力屑作就不现丑了,其实就是临时看文档撸的一个学习练手爬虫

pm下 学习下 上次看sc 看睡着了,……
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-10-30 20:34 , Processed in 0.061652 second(s), 10 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表