数据集合并和去重工具

01KP86Y74J2ZECDY04PV8GKTVT

数据集去重采集器是一款功能强大的工具，用于合并多个 JSON/JSONL 文件中的数据集并进行数据去重。该工具针对 CafeScraper 平台完成全面优化，附加增强功能，并具备完善的异常处理机制。

by Odin Kael

4.7

13次运行

最后更新:2026-04-20

免费试用

免费 2,000 条结果

输入参数 Schema

通过提供以下输入参数来配置采集工具。必填字段用星号 (*) 标记。

示例输入

{
  "mode": "profile",
  "url": "@username",
  "maxResults": 100,
  "extractComments": false,
  "usePremiumProxy": false
}

字段参考

暂无输入参数元数据。

最佳实践提示

使用较小的 maxResults 值测试您的配置
如果遇到限流，请启用优质代理
提取评论会显著增加处理时间和成本
使用特定话题或用户名获取更精准的结果

价格预估

结果上限

101,000 条结果

预估：

~$0.30

100 条结果 × $0.003。仅为成功结果付费。

立即运行

立即购买

快捷提示

新用户可获得 2,000 个免费结果
失败请求免费
支持导出 JSON 或 CSV 结果

你可能也喜欢

探索商店中更多热门采集工具

查看全部采集工具

谷歌搜索结果（SERP）抓取API

by CoreClaw

通过关键词请求，返回结构化的搜索结果摘要，包括最终搜索参数、自然结果、相关搜索以及 People Also Ask 数据。

4.6

133 次运行

低至 $3/结果

Google Sheets 导入导出工具

by Odin Kael

一款功能强大的 Google Sheets 数据导入导出工具，专用于实现 Google Sheets 与外部系统的数据同步、备份和集成。支持三种操作模式、两种认证方式、批量处理、数据去重、自动备份等功能。

4.8

2 次运行

低至 $3/结果

Cheerio网页抓取

by Odin Kael

一款基于 Cheerio 的高速静态页面爬虫工具，专为静态 HTML 页面设计。使用 Cheerio 进行 HTML 解析，速度比完整浏览器渲染快 10-50 倍。

4.9

3 次运行

低至 $3/结果

Playwright 网页抓取

by Odin Kael

一款使用 Playwright 进行完整浏览器渲染的强大跨浏览器网页爬虫工具。支持 Chromium、Firefox 和 WebKit 三大浏览器引擎。完美适用于动态页面、单页应用（SPA）、无限滚动页面以及跨浏览器测试场景。