docs: update domestic spider progress for 2026-04-20
This commit is contained in:
www
@@ -258,6 +258,84 @@
|
|||||||
|
|
||||||
必须当天处理：
|
必须当天处理：
|
||||||
|
|
||||||
|
## 11. 2026-04-20 今日复盘补充
|
||||||
|
|
||||||
|
### 今日口径先统一
|
||||||
|
|
||||||
|
今天这轮主线判断，先明确 1 条：
|
||||||
|
|
||||||
|
1. 当前 7 天推收录主线，先只看国内蜘蛛与国内收录目标
|
||||||
|
2. 暂不把 `googlebot / bingbot` 作为今天的优化目标
|
||||||
|
3. 国外蜘蛛相关 `444 / robots / category`，当前只作为噪音参考，不作为今天动作依据
|
||||||
|
|
||||||
|
也就是说，今天不要因为国外蜘蛛日志，再把主线拉回“国外放行优化”。
|
||||||
|
|
||||||
|
### 今日阶段判断
|
||||||
|
|
||||||
|
对照 Day3 / Day4 的主线目标，`2026-04-20` 这轮更准确的阶段定位是：
|
||||||
|
|
||||||
|
1. 主线仍在推进
|
||||||
|
2. 但推进主要集中在少数正向站
|
||||||
|
3. 还没有进入理想的全站放量阶段
|
||||||
|
|
||||||
|
今天的核心结论：
|
||||||
|
|
||||||
|
1. 详情 / 播放层信号没有消失
|
||||||
|
2. `jingxifa.com`、`lgyz.net`、`codohealth.com`、`gxhongzhuang.com` 仍保留正向样本
|
||||||
|
3. 但多数站仍停留在首页或浅层
|
||||||
|
4. 当前不建议继续大面积改 GPT 模板业务代码
|
||||||
|
|
||||||
|
### 今日最值得继续盯的国内正向站
|
||||||
|
|
||||||
|
#### 第一梯队
|
||||||
|
|
||||||
|
1. `jingxifa.com`
|
||||||
|
- 今日仍有 `detail` 和 `play`
|
||||||
|
- 仍是当前最强正向样本
|
||||||
|
2. `lgyz.net`
|
||||||
|
- 今日 `detail`、`play`、`sitemap` 都还有信号
|
||||||
|
- 是今天最接近完整深页链路的站
|
||||||
|
3. `codohealth.com`
|
||||||
|
- 今日仍保留 `detail`
|
||||||
|
- 但比昨天偏弱，属于继续观察站
|
||||||
|
4. `gxhongzhuang.com`
|
||||||
|
- 今日仍保留 `detail`
|
||||||
|
- 深页能力还在，但没有放量
|
||||||
|
|
||||||
|
#### 第二梯队
|
||||||
|
|
||||||
|
1. `cnzhenbang.com`
|
||||||
|
- 今日有轻微 `sitemap` 信号
|
||||||
|
- 但还没转成 `detail / play`
|
||||||
|
2. `oronorent.com`
|
||||||
|
- 今日有轻微 `sitemap` 信号
|
||||||
|
- 仍属于浅层推进站
|
||||||
|
3. `lcdchq.com`
|
||||||
|
- 仍以首页与探针噪音为主
|
||||||
|
- 当前不适合继续改模板，先观察
|
||||||
|
|
||||||
|
### 今日暂不建议做的事
|
||||||
|
|
||||||
|
1. 不建议因为国外蜘蛛 `444` 去改 Nginx 放行策略
|
||||||
|
2. 不建议今天继续大面积改 GPT 模板业务代码
|
||||||
|
3. 不建议把今天的判断扩展到“国外收录推进”
|
||||||
|
|
||||||
|
### 今日建议动作
|
||||||
|
|
||||||
|
1. 继续只看国内蜘蛛回访推进
|
||||||
|
2. 明天优先比较：
|
||||||
|
- 是否新增 `detail / play` 站点
|
||||||
|
- `jingxifa.com` 是否继续保持内容层信号
|
||||||
|
- `lgyz.net` 是否继续保持 `detail / play`
|
||||||
|
- `cnzhenbang.com / oronorent.com / lcdchq.com` 是否从浅层转到深层
|
||||||
|
3. 国外蜘蛛相关日志今天不进入动作清单
|
||||||
|
|
||||||
|
### 今日收口结论
|
||||||
|
|
||||||
|
一句话收口：
|
||||||
|
|
||||||
|
> 当前 7 天主线继续按国内蜘蛛推进，今天先不改 GPT 模板代码，也不做国外蜘蛛放行优化。
|
||||||
|
|
||||||
1. 首页、详情、播放重新出现大面积 `404`
|
1. 首页、详情、播放重新出现大面积 `404`
|
||||||
2. sitemap 主入口无法访问
|
2. sitemap 主入口无法访问
|
||||||
3. `?__nocache=1` 也拿不到新 HTML
|
3. `?__nocache=1` 也拿不到新 HTML
|
||||||
|
|||||||
@@ -258,6 +258,21 @@
|
|||||||
|
|
||||||
1. GitHub 请求层现在会明确记录：
|
1. GitHub 请求层现在会明确记录：
|
||||||
- `HTTP 状态码`
|
- `HTTP 状态码`
|
||||||
|
|
||||||
|
## 11. 2026-04-20 主线补充说明
|
||||||
|
|
||||||
|
这份 `2026-04-19` 复盘文档在今天继续使用时，需要额外补 1 条主线口径，避免误判：
|
||||||
|
|
||||||
|
1. 当前 GPT 模板 7 天主线，先只看国内蜘蛛推进
|
||||||
|
2. 暂不把 `googlebot / bingbot` 相关日志作为今天的优化动作依据
|
||||||
|
3. 所以如果今天看到国外蜘蛛大量 `robots/category => 444`，先不要自动推导成“今天必须改放行策略”
|
||||||
|
|
||||||
|
今天这轮更准确的落地结论是：
|
||||||
|
|
||||||
|
1. GPT 模板线仍有正向推进
|
||||||
|
2. 但推进主要来自少数国内正向样本站
|
||||||
|
3. 今天依旧不建议继续大面积改 GPT 模板业务代码
|
||||||
|
4. 国外蜘蛛相关信号，先从今天的行动项里排除
|
||||||
- 空响应体
|
- 空响应体
|
||||||
- 原始异常信息
|
- 原始异常信息
|
||||||
2. 对 `429 / 500 / 502 / 503 / 504` 已增加自动重试
|
2. 对 `429 / 500 / 502 / 503 / 504` 已增加自动重试
|
||||||
|
|||||||
Reference in New Issue
Block a user