开源:解决LLM抓取痛点,Lightfeed推出稳健网站数据提取库

针对网页数据提取中传统CSS选择器维护难、直接使用LLM解析成本高且易出错(如JSON格式乱码、噪音消耗Token)等痛点,Lightfeed开源了其TypeScript库——Lightfeed Extractor。该库封装了从HTML清洗、Markdown转换到LLM调用及Zod模式验证的完整流水线。其核心优势在于能够从损坏的LLM输出中恢复部分数据,并集成Playwright进行浏览器自动化,显著提升了构建Agent和数据管道的稳定性与效率。

原文链接:Hacker News

C code80.ai · AI 编码 API 聚合 Claude / GPT 多模型统一接入,稳定不限速,按量计费,几行配置接入 Claude Code。 了解一下 ›

抢沙发

评论前必须登录!

立即登录   注册