获取 ByteTech 技术文章的元信息、目录结构和正文;通过 Chrome DevTools MCP 直连本地 Chrome,复用登录态抓取 API 数据。触发词:bytetech、字节技术、技术文章、bytetech article、获取 bytetech 文章、整理 bytetech。
通过 Chrome DevTools MCP 连接用户本地 Chrome,复用登录态,抓取 ByteTech 技术文章。
chrome://inspect/#remote-debuggingbash
mcporter call chrome-devtools.list_pages
应返回 Chrome 中打开的页面列表。
bash
# 1. 导航到 bytetech 文章页(在 Chrome 新 tab 中打开)
mcporter call chrome-devtools.new_page url="https://bytetech.info/articles/<ARTICLE_ID>" timeout=30000
# 2. 刷新并抓包
mcporter call chrome-devtools.navigate_page type=reload
# 3. 过滤 XHR/Fetch 请求,找到文章详情 API
mcporter call chrome-devtools.list_network_requests resourceTypes='["xhr","fetch"]'
# 找 reqid 对应 /proxy_tech_api/v1/article/detail
# 4. 获取文章详情响应
mcporter call chrome-devtools.get_network_request reqid=<ID>
文章详情 API 返回完整元信息:
data.article_info.title — 标题data.article_info.en_title — 英文标题data.article_info.summary — 摘要data.article_info.lark_doc_token — 飞书文档 tokendata.article_info.lark_doc_url — 飞书文档 URLdata.article_info.view_cnt — 浏览量data.article_info.dig_cnt — 点赞数data.article_info.collect_cnt — 收藏数data.article_info.coin_cnt — 投币数data.article_info.labels — 标签列表 [{name, en_name, ...}]data.auther — 作者信息 [{name, full_name, email, department_name, ...}]Request Body:
json
{"article_id":"<ARTICLE_ID>","id_type":8}
用 evaluate_script 在 bytetech 页面上下文中直接 fetch:
bash
# 获取文章详情
mcporter call chrome-devtools.evaluate_script function='
async () => {
const resp = await fetch("/proxy_tech_api/v1/article/detail", {
method: "POST",
headers: {"Content-Type": "application/json"},
body: JSON.stringify({article_id: "7619471842051620907", id_type: 8})
});
return await resp.json();
}'
bash
# 获取推荐文章
mcporter call chrome-devtools.evaluate_script function='
async () => {
const resp = await fetch("/proxy_tech_api/v1/article/recommend", {
method: "POST",
headers: {"Content-Type": "application/json"},
body: JSON.stringify({article_id: "7619471842051620907", id_type: 8, limit: 10})
});
return await resp.json();
}'
bash
# 获取团队目录和关联文章
mcporter call chrome-devtools.evaluate_script function='
async () => {
const resp = await fetch("/proxy_tech_api/v2/content/team_account/item_include_info", {
method: "POST",
headers: {"Content-Type": "application/json"},
body: JSON.stringify({item_id: "7619471842051620907", id_type: 8})
});
return await resp.json();
}'
bash
# 获取团队热门文章
mcporter call chrome-devtools.evaluate_script function='
async () => {
const resp = await fetch("/proxy_tech_api/v1/content/team_account/rank/item", {
method: "POST",
headers: {"Content-Type": "application/json"},
body: JSON.stringify({team_id: "<TEAM_ID>", limit: 10})
});
return await resp.json();
}'
bytetech 文章正文存储在飞书文档中。
bash
# 从 bytetech API 获取 lark_doc_token
# 然后用 lark-cli 获取飞书文档内容
lark-cli docs +fetch --as user --doc "<LARK_DOC_TOKEN>"
bash
# 选择 bytetech 页面所在的 browser context(共享 cookies)
# 导航到飞书文档
mcporter call chrome-devtools.navigate_page type=url url="https://bytetech.info/articles/<ID>"
# 等待加载
mcporter call chrome-devtools.wait_for text='["文章"]' timeout=15000
# 提取页面文本
mcporter call chrome-devtools.take_snapshot
bash
mcporter call chrome-devtools.evaluate_script function='
() => {
const title = document.title.replace(/ - 文章 - ByteTech$/, "");
const og = {};
document.querySelectorAll("meta[property^=\"og:\"],meta[name]").forEach(m => {
const k = m.getAttribute("property") || m.getAttribute("name");
og[k] = m.content || "";
});
return JSON.stringify({title, description: og["og:description"] || og["description"]});
}'
bash
# 在 bytetech 页面中搜索
mcporter call chrome-devtools.navigate_page type=url url="https://bytetech.info"
mcporter call chrome-devtools.wait_for text='["ByteTech"]' timeout=15000
mcporter call chrome-devtools.take_snapshot
# 找到搜索框 uid 后 fill
mcporter call chrome-devtools.fill uid="<SEARCH_UID>" value="AI Coding"
mcporter call chrome-devtools.press_key key=Enter
mcporter call chrome-devtools.wait_for text='["搜索结果"]' timeout=10000
mcporter call chrome-devtools.take_snapshot
bash
# 导航到目标页面
mcporter call chrome-devtools.navigate_page type=reload
# 列出所有 API 请求
mcporter call chrome-devtools.list_network_requests resourceTypes='["xhr","fetch"]'
# 查看具体请求详情(含完整 headers 和 body)
mcporter call chrome-devtools.get_network_request reqid=<ID>
# 保存响应到文件(大响应)
mcporter call chrome-devtools.get_network_request reqid=<ID> responseFilePath=/tmp/response.json
APIMethod用途Request Body/proxy_tech_api/v1/article/detailPOST文章详情(标题、摘要、标签、作者、飞书token){article_id, id_type:8}``/proxy_tech_api/v1/article/recommendPOST推荐文章列表{article_id, id_type:8, limit}``/proxy_tech_api/v2/content/team_account/item_include_infoPOST团队目录和关联文章{item_id, id_type:8}``/proxy_tech_api/v1/content/team_account/rank/itemPOST团队热门文章排行{team_id, limit}``/proxy_tech_api/v1/content/item_detail_inclusionPOST文章详细关联信息{item_id, id_type:8}``/proxy_tech_api/v2/label/treePOST标签树{}``/proxy_tech_api/v2/search/hotwordsGET热搜词-/proxy_tech_api/v1/loginPOST登录检查{}``/api/v1/lark/component_authPOST飞书组件鉴权{url}
bytetech 使用以下 Cookie 进行鉴权:
gateway_sid — 网关 sessionbytetech=bytetech-user — 用户标识csrf_session_id — CSRF 防护通过 Chrome DevTools MCP 的 --autoConnect 直连用户 Chrome,自动继承所有 Cookie,无需额外处理。
先通过推荐 API 或团队排行 API 获取一批文章 ID:
bash
# 推荐文章(基于某篇文章)
mcporter call chrome-devtools.evaluate_script function='
async () => {
const resp = await fetch("/proxy_tech_api/v1/article/recommend", {
method: "POST",
headers: {"Content-Type": "application/json"},
body: JSON.stringify({limit: 10})
});
const data = await resp.json();
return JSON.stringify(data.data.map(i => ({
article_id: i.article_info.article_id,
title: i.article_info.title,
author: i.auther.name,
summary: (i.article_info.generated_summary || i.article_info.summary || "").substring(0, 200),
lark_doc_token: i.article_info.lark_doc_token,
views: i.article_info.view_cnt,
likes: i.article_info.dig_cnt,
collects: i.article_info.collect_cnt
})));
}'
bash
# 团队热门文章
mcporter call chrome-devtools.evaluate_script function='
async () => {
const resp = await fetch("/proxy_tech_api/v1/content/team_account/rank/item", {
method: "POST",
headers: {"Content-Type": "application/json"},
body: JSON.stringify({team_id: "<TEAM_ID>", limit: 10})
});
return await resp.json();
}'
拿到 article_id 列表后,逐个调用 article/detail 获取完整元信息(标题、摘要、标签、作者、数据)。
如果需要正文内容(不仅仅是摘要),逐个用 lark-cli 获取飞书文档:
bash
lark-cli docs +fetch --as user --doc "<LARK_DOC_TOKEN>" 2>&1
注意:
data.markdown 字段包含 markdown 格式的完整正文<lark-td> 等),需要清洗lark-cli 返回的飞书文档 markdown 包含大量飞书自定义标签,需要清洗:
bash
lark-cli docs +fetch --as user --doc "<TOKEN>" 2>&1 | node -e "
let d='';process.stdin.on('data',c=>d+=c);process.stdin.on('end',()=>{
const r=JSON.parse(d);
let md = r.data.markdown;
// 清洗飞书自定义标签
md = md.replace(/<\/?lark-[a-zA-Z0-9_-]+>/g, '');
md = md.replace(/<\/?grid[^>]*>/g, '');
md = md.replace(/<\/?column[^>]*>/g, '');
md = md.replace(/<mention-doc[^>]*>.*?<\/mention-doc>/g, '');
md = md.replace(/<quote-container>.*?<\/quote-container>/gs, '');
md = md.replace(/<image[^>]*\/>/g, '');
// 保留标准 markdown 格式
console.log(md);
})"
根据获取到的数据,生成结构化总结,包括:
https://bytetech.info/articles/<article_id>https://bytetech.info/articles/<article_id>https://bytetech.info/articles/<article_id>#<lark_doc_token>注意:ByteTech 文章需要飞书 OAuth 登录后才能查看,未登录会跳转登录页。
8 — 文章24 — 其他类型(视频等)