12 KiB
12 KiB
2026-04-18 B组9站 蜘蛛回访分析
1. 基本信息
- 日期：
2026-04-18 - 分析人：
Codex / 团队 - 分析范围：
B组 9 站 - 日志时间窗口：
2026-04-17 09:10:03 ~ 2026-04-17 22:20:02 - 关联动作：
- 已提交 sitemap：
B组9站已纳入首批推收录名单，主入口以 /sitemap.xml / sitemap_index.xml / sitemap-main.xml 为准 - 已清缓存域名：
待继续跟进 lcdchq.com / oronorent.com - 已上线模板修复：
详情 slug-only 兜底、HEAD 兼容、sitemap 修复、搜索页 h1 补强、播放页 h1 补强
- 已提交 sitemap：
2. 本轮关注域名
gxhongzhuang.comjpjdxs.comjxxgygy.comlcdchq.comleici1940.comlgyz.netoronorent.compcslcl.comsdxtwnc.com
3. 本轮关注目标
sitemap_index.xml是否开始被抓sitemap-main.xml是否开始被抓- 搜索页是否出现蜘蛛回访
- 详情页是否开始出现命中
- 播放页是否开始出现命中
- 是否出现连续抓取链路：
sitemap -> search -> detailsitemap -> detail -> play
- 是否仍存在旧 404 深链被反复访问
4. 蜘蛛来源概览
百度蜘蛛
- 请求数：
95 - 命中域名：
gxhongzhuang.comjpjdxs.comjxxgygy.comlcdchq.comleici1940.comlgyz.netpcslcl.comsdxtwnc.com
- 主要命中页面类型：
homedetailother
必应蜘蛛
- 请求数：
36 - 命中域名：
gxhongzhuang.comjxxgygy.comlcdchq.comlgyz.net
- 主要命中页面类型：
robotsotherdetail
其他中文搜索蜘蛛
- 请求数：
115 - 命中域名：
jpjdxs.comjxxgygy.comlcdchq.comlgyz.netoronorent.com
- 主要命中页面类型：
homedetailplayother
普通浏览器访问
- 请求数：
本次统计只看蜘蛛 crawl push 数据，不混入普通浏览器访问 - 是否需要与蜘蛛流量区分：
是
5. 各域名命中概览
gxhongzhuang.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- detail：
- 是否命中：
是 - 命中次数：
4 - 典型路径：
/voddetail/xi-xue-gui-ji-nv-184448
- 是否命中：
- play：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- old 404：
- 是否出现：
当前窗口未见明显旧 404 - 典型路径：
无
- 是否出现：
补充观察：
- summary 总请求：
46 - 当前已见：
- 首页
/ => 200 - 详情页
/voddetail/xi-xue-gui-ji-nv-184448 => 200
- 首页
- 当前风险：
googlebot对/robots.txt大量444bingbot对小说 / feed 类路径命中444
jpjdxs.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- detail：
- 是否命中：
是，但当前被归到 other - 命中次数：
2 - 典型路径：
/neirong-154229-xiang-feng-bu-shi-jiu-shi-ren
- 是否命中：
- play：
- 是否命中：
是，但当前被归到 other - 命中次数：
2 - 典型路径：
/bf-154229-xiang-feng-bu-shi-jiu-shi-ren/default-1
- 是否命中：
- old 404：
- 是否出现：
当前窗口未见 - 典型路径：
无
- 是否出现：
- 关注项：
search_header_media.html修复后是否已开始被蜘蛛正常命中：当前窗口还未出现真实搜索页回访，但详情 / 播放样式路径已能被正常抓到 200
补充观察：
- summary 总请求：
20 - 当前已见：
- 首页
/ => 200 /robots.txt => 200- 详情样式路径
200 - 播放样式路径
200
- 首页
jxxgygy.com
- sitemap：
- 是否命中：
是，但为异常命中 - 命中次数：
1 - 典型路径：
/sitemap.xml => 444
- 是否命中：
- search：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- detail：
- 是否命中：
未形成明确 detail 分类，但已有内容页探测 - 命中次数：
若干 - 典型路径：
/vod/ben-zhuo-zhi-ji-de-qian-bei-169019/vod/wo-zai-mo-shi-dang-lao-ban-yuan-gong-quan-shi-ji-sang-shi-dong-tai-man-hua-169368/vod/wu-lian-shen-gong-168705
- 是否命中：
- play：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- old 404：
- 是否出现：
当前窗口未见典型旧 404 深链池 - 典型路径：
无
- 是否出现：
补充观察：
- summary 总请求：
35 - 当前主要层级：
home: 19other: 13
- 当前已见：
- 首页
/ => 17 次 200
- 首页
- 当前风险：
sogou对若干内容路径仍混有301 / 403/sitemap.xml => 444需要后续单独复核
lcdchq.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
仅见测试探针 - 命中次数：
2 - 典型路径：
/get-index?wd=test/get/index?wd=test
- 是否命中：
- detail：
- 是否命中：
是 - 命中次数：
1 - 典型路径：
/movie/154180-yi-gua-ding-qing-yuan-ye-ya-tou-jin-cheng-bei-tuan-chong
- 是否命中：
- play：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- old 404：
- 是否出现：
出现测试入口 404 - 典型路径：
/get-index?wd=test/get/index?wd=test
- 是否出现：
- cache status：
- 普通访问是否仍落后于
?__nocache=1：是，之前已确认属于缓存滞后站 - 当前判断：
优先清缓存，不先继续改模板
- 普通访问是否仍落后于
补充观察：
- summary 总请求：
59 - 当前已见：
- 首页
/ => 200 - 详情页
200
- 首页
- 当前风险：
/admin.php => 301高占比，属于噪音探测/robots.txt混有444 / 301 / 403
leici1940.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- detail：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- play：
- 是否命中：
是，但当前被归到 other - 命中次数：
8 - 典型路径：
/vodbf/qin-mi-da-dang-wu-di-lv-shi-83631-default-1/vodbf/zhong-guo-xi-ju-xing-di-yi-ji-68746-default-1
- 是否命中：
- old 404：
- 是否出现：
当前窗口未见明显旧 404 - 典型路径：
无
- 是否出现：
补充观察：
- summary 总请求：
55 - 当前深页正向样本主要来自百度蜘蛛命中播放样式路径
- 当前首页与 robots 仍以
444为主
lgyz.net
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
仅见测试探针 - 命中次数：
2 - 典型路径：
/get-index?wd=test/get/index?wd=test
- 是否命中：
- detail：
- 是否命中：
是 - 命中次数：
11 - 典型路径：
/voddetail/fan-pai-da-ming-xing-68838/voddetail/mo-shi-chao-neng-li-zhe-dong-tai-man-hua-69869
- 是否命中：
- play：
- 是否命中：
是 - 命中次数：
9 - 典型路径：
/vodplay/ming-zhen-tan-ke-nan-27577-youzhi-542/vodplay/shi-shang-wan-jia-25834-youzhi-475/vodplay/shi-shang-wan-jia-25834-youzhi-444
- 是否命中：
- old 404：
- 是否出现：
出现测试入口 404 - 典型路径：
/get-index?wd=test/get/index?wd=test
- 是否出现：
补充观察：
- summary 总请求：
39 - 当前已见：
- 首页
/ => 200 - 详情页
200 - 播放页已有命中，但混有大量
403
- 首页
- 当前风险：
sogou对播放页仍有大量403/robots.txt状态不够稳定
oronorent.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
仅见测试探针 - 命中次数：
2 - 典型路径：
/get-index?wd=test/get/index?wd=test
- 是否命中：
- detail：
- 是否命中：
是，但当前被归到 other - 命中次数：
1 - 典型路径：
/shipin/154173-yi-gua-ding-qian-kun
- 是否命中：
- play：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- old 404：
- 是否出现：
出现测试入口 404 - 典型路径：
/get-index?wd=test/get/index?wd=test
- 是否出现：
- cache status：
- 普通访问是否仍落后于
?__nocache=1：是，之前已列为缓存滞后站 - 当前判断：
优先清缓存，再继续观察详情层回访
- 普通访问是否仍落后于
补充观察：
- summary 总请求：
18 - 当前已见：
/shipin/154173-yi-gua-ding-qian-kun => 200
- 当前风险：
- 首页与 robots 仍混有
301 / 403 / 444
- 首页与 robots 仍混有
pcslcl.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- detail：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- play：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- old 404：
- 是否出现：
当前窗口未见典型旧 404 - 典型路径：
无
- 是否出现：
补充观察：
- summary 总请求：
218 - 当前几乎全部是
robots.txt => 444 - 当前只拿到极少量首页
200 - 仍处于首页前的 robots 层
sdxtwnc.com
- sitemap：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- search：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- detail：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- play：
- 是否命中：
否 - 命中次数：
0 - 典型路径：
无
- 是否命中：
- old 404：
- 是否出现：
当前窗口未见 - 典型路径：
无
- 是否出现：
补充观察：
- summary 总请求：
32 - 当前已见：
- 首页
/ => 19 次 200
- 首页
- 当前阶段仍属于首页层回访
6. 正向信号判断
- 是否出现
sitemap -> search -> detail：当前窗口未直接看到完整链路 - 是否出现
sitemap -> detail -> play：在 lgyz.net、jpjdxs.com、gxhongzhuang.com、lcdchq.com 已看到不同层级深页 200，但未直接回溯到 sitemap - 是否出现
home -> search -> detail：未形成稳定链路 - 是否出现详情页重复访问：
是，gxhongzhuang.com、lgyz.net、lcdchq.com 已出现 detail 层命中 - 是否出现播放页稳定命中：
是，lgyz.net、jpjdxs.com、leici1940.com 已出现播放样式路径命中
7. 风险信号判断
风险 1
- 域名：
pcslcl.com - 表现：
当前几乎全部停留在 robots 层，214 次 robots 444，仅 1 次首页 200 - 可能原因：
- 仍未进入有效页面发现阶段
- 谷歌探测集中在 robots
- 建议动作：
- 继续提交 sitemap 主入口
- 明日继续观察是否开始进入首页或详情层
风险 2
- 域名：
lcdchq.com - 表现：
已有首页与详情 200，但普通访问与 ?__nocache=1 已知存在缓存滞后 - 可能原因：
- 前端缓存未完全刷新
- 蜘蛛与人工访问可能命中不同 HTML
- 建议动作：
- 优先清缓存
- 清缓存后复查详情页 h1、canonical、播放页链路
风险 3
- 域名：
oronorent.com - 表现：
已见单个详情样式路径 200，但首页 / robots 状态混杂，且属于已知缓存滞后站 - 可能原因：
- 缓存滞后
- 蜘蛛仍在试探旧入口
- 建议动作：
- 优先清缓存
- 继续观察是否从单个详情样本扩展到更多深页
风险 4
- 域名：
jxxgygy.com - 表现：
/sitemap.xml 在当前窗口出现 444 - 可能原因：
- 单次探针异常
- 该时段前端或规则响应不稳定
- 建议动作：
- 单独复测 sitemap 主入口
- 若复测正常，则先视为时间窗异常，不立刻大改
- 建议动作：
8. 缓存相关观察
重点域名：
lcdchq.comoronorent.com
可补充：
- 普通访问结果：
?__nocache=1结果：- 是否一致：
- 当前判断：
9. 本轮结论
10. 下一步动作
- 是否继续补提剩余 sitemap：
- 是否继续清理缓存滞后站：
- 明日优先观察域名：
- 是否需要继续微调模板：