博客
-

Cloudflare AI 访问例外规则:在不降安全性的前提下放行 AI 抓取
继续阅读:Cloudflare AI 访问例外规则:在不降安全性的前提下放行 AI 抓取Cloudflare AI 访问例外规则应按路径、机器人类型和验证方式分层配置,…
-

Cloudflare IP Access Rules 爬虫白名单:放行 AI 抓取的最小配置
继续阅读:Cloudflare IP Access Rules 爬虫白名单:放行 AI 抓取的最小配置面向 SaaS 官网的 Cloudflare IP Access Rules 爬…
-

DeepSeekBot 日志分析工具:从抓取记录到引用验证
继续阅读:DeepSeekBot 日志分析工具:从抓取记录到引用验证DeepSeekBot 日志分析工具可帮助网站确认 DeepSeek 是否访问、…
-

DeepSeek 引用来源监控:从信源追踪到竞品占比分析
继续阅读:DeepSeek 引用来源监控:从信源追踪到竞品占比分析DeepSeek 引用来源监控不只是查看链接,而是持续记录引用页面、信源占比、竞…
-

DeepSeek 抓取后多久会引用?从日志命中到答案出现的判断方法
继续阅读:DeepSeek 抓取后多久会引用?从日志命中到答案出现的判断方法DeepSeek 抓取后多久会引用并没有官方固定时限:日志命中只证明页面被访问,…
-

Cloudflare WAF skip rule bot:误拦爬虫的最小放行方案
继续阅读:Cloudflare WAF skip rule bot:误拦爬虫的最小放行方案Cloudflare WAF skip rule bot 适合处理搜索、AI 爬…
-

Cloudflare 已知爬虫放行:Verified Bots、AI 爬虫与 WAF 规则配置
继续阅读:Cloudflare 已知爬虫放行:Verified Bots、AI 爬虫与 WAF 规则配置Cloudflare 已知爬虫放行不等于无条件允许所有机器人,关键是区分搜索爬虫…
-

国内大模型爬虫 user agent:识别、核验与放行清单
继续阅读:国内大模型爬虫 user agent:识别、核验与放行清单国内大模型爬虫 user agent 不能只看字符串,应结合日志、IP、频率和引…
-

Kimi 爬虫 UA:识别、robots 配置与日志验证指南
继续阅读:Kimi 爬虫 UA:识别、robots 配置与日志验证指南Kimi 爬虫 UA 不止一个:KimiBot、Kimi-User、Kimi-S…
