Files
MediaCrawler/mac-agent-os-main/03_knowledge/99_system/protocols/cross-domain.md
T
butubb 2112c1a870
Deploy VitePress site to Pages / build (push) Canceled after 0s
Deploy VitePress site to Pages / Deploy (push) Canceled after 0s
feat(monitor): 抖音 Web 接口客户端 —— 绕开爬虫子进程,直接发 HTTP
移植自 mac-agent-os 的 mediacrawler_adapter:不起子进程、不开页面,用浏览器里那份
登录态直接调抖音 Web 接口。产物键名照抄 store/douyin,所以 ingest 那条链路一个字不用改。

**目前能用的(真环境实测,非推断)**:

    profile/other : 200, 7075 字节  —— 博主主页指标(粉丝/获赞/作品数/昵称)
    aweme/detail  : 200, 45425 字节 —— 单条作品详情(含点赞/评论/收藏/分享)

**目前不能用的:作品列表 `aweme/post`。** 两个互相独立的原因:
  1. 这个接口被抖音单独升级成了真校验:不带 x-tt-argus 回 403「Uifid Not Found」,
     带上 dummy 值回 200 + **空 body**。也就是说「头在不在」骗得过,「真校验」过不了。
     同一套头打 profile/other 和 aweme/detail 都是通的 —— 抖音是挑着接口加保护的,
     挑中的恰好是「批量拉作品列表」这个最敏感的动作。
  2. 改走页面截获也不行:CDP 浏览器打开博主主页会落到「验证码中间页」(当天大量探测的
     代价,过几小时要重测)。

  所以现在的边界是:**已知作品的指标刷新能做,自动发现新作品做不了**。

**排查中控住变量后得到的两条事实**(都写进注释了):
  · `Accept` / `Accept-Language` / `Referer` 才是主页接口能返回真数据的原因 —— 只有
    UA+client hints+Cookie 时是 200 但仅 121 字节的空壳,补上这三个头变 7074 字节。
    (我先前猜的 sec-ch-ua 不是关键。)
  · 因此 UA 与 client hints 必须**成套地取自同一个浏览器**,所以 BrowserIdentity 一次
    从 CDP 取齐 cookie + UA + hints,而不是各自写死。

「200 + 空 body 必须当场报错」也是刻意写死的:放过去它会在下游变成「这个博主没作品」,
把一次失败伪装成一条正常结果 —— 爬虫那条路正是这么栽的,还被翻译成「账号被封」。

测试 +11:cookie 解析、请求头成套性(含 uifid 缺失/回退)、产物键名与 store 对齐、
以及 _get 的三条失败路径(空 body / 403 带网关原话 / 正常返回)。
2026-10-10 17:12:25 +08:00

49 lines
2.0 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# 跨域联想协议
> 文件:99_system/protocols/cross-domain.md
> 触发词:跨界视角、换个角度、类比一下、新视角、别的领域、借鉴一下
> 加载方式:SOUL.md 检测触发词后加载
---
## 检索路径(按序执行,命中即止)
1. **L2 历史洞见**:查询 L2 facts.db,是否有相关问题的历史思考和解决方案?
2. **知识库跨域模型**:检索 03_knowledge/10_concepts/ 下各领域概念,是否有可类比的核心模型?
3. **经典理论参考**:检索 03_knowledge/40_references/,是否有经典理论或案例可引用?
4. **无匹配处理**:以上三步均无高价值发现 → 回复"本次未找到高价值跨域类比",不编造
---
## 跨域联想引擎
- **类比寻找**:"这个问题在结构上,像其他哪个学科的核心模型?"
- **逆向迁移**:"在编程/建筑/生物进化中解决类似矛盾的模式,能否借用过来?"
---
## 强制联想库(思考时激活)
| 源领域 | 目标领域 | 联想触发问题 |
|--------|---------|-------------|
| 经济学/金融学 | 系统设计 | 有什么"激励"和"约束"?是否存在"套利"空间?如何设计"无摩擦"交互? |
| 生物学/进化论 | 组织/产品 | 适者生存的筛选机制是什么?是否存在"共生"关系? |
| 军事理论/博弈论 | 商业竞争 | 战场的"高地"在哪里?对方的核心护城河能否被"侧翼攻击"? |
| 物理学/熵增定律 | 管理 | 系统的混乱度是否正在增加?如何构建"耗散结构"? |
---
## 输出格式
> **跨界视角**:[领域]的[核心概念] → 一句精要解释这个类比如何启发当前问题
仅此一句。不展开科普另一个领域。仅当 ghai 明确追问时,才深入展开细节。
---
## 约束
- 宁缺毋滥。找不到高价值联想就跳过,不编造
- 本协议独立于高阶思维协议,两者可先后触发但分别执行
- 本轮回答结束后,此模块退出上下文