全球主机交流论坛

标题: 如果网站只自己访问，会被搜索引擎，或者其他平台收录吗 [打印本页]

作者: 传奇1900 时间: 2022-11-20 18:19
标题: 如果网站只自己访问，会被搜索引擎，或者其他平台收录吗
比如网站的宝塔面板后台，或者，自己搭的 alist 网盘列表，

平常就自己访问，没有向任何地方提交过，会被搜索引擎，或者 archive.org/web 这样的平台，收录走吗

谷歌了一下，Powered by Alist，竟然搜到很多 alist 网站，

作者: wnet 时间: 2022-11-20 18:22
会的

作者: Tou 时间: 2022-11-20 18:23
robots.txt 屏蔽，不守约的还是会抓取，但是已经屏蔽了大部分，也可以自己设白名单ip

作者: 神秘北极圈 时间: 2022-11-20 18:23
会的，如果不要搜索引擎可以禁止蜘蛛爬

作者: DogeLee2 时间: 2022-11-20 18:25
会被扫到的

作者: NiDiPiZiNaFongQ 时间: 2022-11-20 18:25
至少Chrome就会出卖你

作者: qq53988545 时间: 2022-11-20 18:26
不屏蔽的话会的，尤其是谷歌和bing什么都收

主机收录(www.zhujishoulu.com):☛领免费小鸡☚

Send by Discuz x Reader

作者: 西瓜皮 时间: 2022-11-20 18:29
你本地搭建都不安全，别说互联网站点了

作者: 战神赵日天 时间: 2022-11-20 18:31
好像谷歌搜索引擎是从已经注册的域名开始扫的，隔一段时间扫一下，如果发现有网站了，就更加玩命的扫

作者: 东风破 时间: 2022-11-20 18:34
加个访问密码

作者: Tankie 时间: 2022-11-20 18:44
谢谢，随手一搜，居然可以到不少资源。

作者: pjk 时间: 2022-11-20 19:10
提示: 作者被禁止或删除内容自动屏蔽

作者: torvalds 时间: 2022-11-20 19:13
把包含 Googlebot 的 UA 返回 403 就行了

欢迎光临全球主机交流论坛 (https://lilynana.eu.org/)