登录阿里云CDN控制台进入"域名管理"页面选择需要设置的加速域名点击"访问控制"选项卡设置Referer防盗链：开启Referer白名单添加允许访问的域名选择是否允许空Referer访问设置IP黑白名单：添加允许/禁止访问的IP或IP段配置鉴权设置：开启URL鉴权选择鉴权类型（A/B/C）设置主/备KEY和有效时间设置带宽封顶

使用百度搜索命令：在百度搜索框输入：site:你的网站域名（例如：site:example.com）查看搜索结果数量，若有结果显示则表示已被收录使用百度站长平台：登录百度站长平台（https://ziyuan.baidu.com）添加并验证你的网站在"索引量"板块查看收录情况检查单个页面收录：在百度搜索框输入完整URL（例如："https://

要查看网站的robots.txt文件，只需在浏览器地址栏中输入网站的域名，后面加上/robots.txt。例如，如果你想查看Google的robots.txt文件，可以输入https://www.google.com/robots.txt。这个文件通常包含网站对搜索引擎爬虫的访问规则，指示哪些页面可以被抓取，哪些页面应该被忽略。

robots.txt 文件中的 Disallow 指令用于告诉搜索引擎爬虫哪些页面或目录不应被访问。例如：这表示所有爬虫 (*) 不应访问 /private/ 目录下的内容。