全球主机交流论坛

标题: 如果网站只自己访问,会被搜索引擎,或者其他平台收录吗 [打印本页]

作者: 传奇1900    时间: 2022-11-20 18:19
标题: 如果网站只自己访问,会被搜索引擎,或者其他平台收录吗
比如网站的宝塔面板后台,或者,自己搭的 alist 网盘列表,

平常就自己访问,没有向任何地方提交过,会被搜索引擎,或者 archive.org/web 这样的平台,收录走吗



谷歌了一下,Powered by Alist,竟然搜到很多 alist 网站,
作者: wnet    时间: 2022-11-20 18:22
会的
作者: Tou    时间: 2022-11-20 18:23
robots.txt 屏蔽,不守约的还是会抓取,但是已经屏蔽了大部分,也可以自己设白名单ip
作者: 神秘北极圈    时间: 2022-11-20 18:23
会的,如果不要搜索引擎可以禁止蜘蛛爬
作者: DogeLee2    时间: 2022-11-20 18:25
会被扫到的
作者: NiDiPiZiNaFongQ    时间: 2022-11-20 18:25
至少Chrome就会出卖你
作者: qq53988545    时间: 2022-11-20 18:26
不屏蔽的话会的,尤其是谷歌和bing什么都收



主机收录(www.zhujishoulu.com):☛领免费小鸡☚
Send by Discuz x Reader

作者: 西瓜皮    时间: 2022-11-20 18:29
你本地搭建都不安全,别说互联网站点了
作者: 战神赵日天    时间: 2022-11-20 18:31
好像谷歌搜索引擎是从已经注册的域名开始扫的,隔一段时间扫一下,如果发现有网站了,就更加玩命的扫
作者: 东风破    时间: 2022-11-20 18:34
加个访问密码
作者: Tankie    时间: 2022-11-20 18:44
谢谢,随手一搜,居然可以到不少资源。
作者: pjk    时间: 2022-11-20 19:10
提示: 作者被禁止或删除 内容自动屏蔽
作者: torvalds    时间: 2022-11-20 19:13
把包含 Googlebot 的 UA 返回 403 就行了











DeepL 账号 | Apple ID 小火箭 | Cloudflare 绑卡号 | TRX钱包激活
圈X成品号 | Github Copilot | 自助购买 https://go.eeit.one





欢迎光临 全球主机交流论坛 (https://lilynana.eu.org/) Powered by Discuz! X3.4