用 AI Agent 做过内容或数据采集的都知道，抓网页是最脏最累的活。

我平时工作流里靠 Chrome cookie 抓数据，cookie 过期就废；遇到 Cloudflare 或反爬严格的站点直接 403；X 的内容更别提，登录态动不动失效，API 额度用完就得换方案。一个链接进来，得准备三四层兜底，经常跑到最后一层还是抓不到。花在"让数据进来"上的精力，比"用数据做事"还多。
试了下 XCrawl，给我的 OpenClaw bot 装了它的 skill。
第一个测试——跟 bot 说"抓一下 的内容"，几十个预测市场的赔率、成交量、截止时间，全部结构化 markdown 回来了。JS 动态渲染的页面，一个请求搞定。
第二个测试更狠——丢了一条自己的 X Article 链接进去。几千字的长文连 views、likes、bookmarks 都一起回来了。X 的内容是出了名的难抓，之前要单独写一套逻辑，现在一句话的事。
看了下消耗，每次请求 1-2 个 credit。内置住宅代理和 JS 渲染，不用自己搭基建。输出的 markdown 直接喂 LLM 或者存数据库，不用二次清洗。
API 有五种模式——单页抓取、全站爬取、站点地图、搜索、SERP，基本覆盖了日常采集场景。OpenClaw 用户装个 skill 就能用，注册送 1000 credits 够跑一阵。
说实话，数据采集这层基建早该有人做成服务了。自己搭的成本太高，维护更累。按需调用，省下来的时间去做真正有价值的分析和决策。