一键抓取 Coursera 与 EDX在线课程完整信息,包含课程名称、讲师、评分、时长、大纲、报名人数与价格,无需代码,快速导出课程数据。
一个强大的在线课程爬虫,支持从 Coursera、EDX 和 LinkedIn Learning 平台提取课程信息。专为 CoreClaw 平台构建,支持并发任务分割。
| 参数 | 类型 | 必填 | 默认值 | 描述 |
|---|---|---|---|---|
| platforms | array | 是 | ["coursera", "edx", "linkedin"] | 要爬取的平台 (输入 coursera/edx/linkedin) |
| startPage | integer | 否 | 1 | 起始页码 (Coursera, EDX) |
| numPages | integer | 否 | 3 | 爬取页数 (Coursera, EDX) |
| keywords | array | 否 | ["python", "javascript"] | LinkedIn Learning 搜索关键词 |
| maxResultsPerKeyword | integer | 否 | 20 | 每个关键词最大结果数 (LinkedIn Learning) |
| 字段 | 描述 |
|---|---|
| platform | 课程平台名称 |
| title | 课程标题 |
| partner | 课程提供方/合作伙伴 |
| instructor | 课程讲师 (仅 LinkedIn Learning) |
| rating | 课程评分 (仅 Coursera) |
| duration | 课程时长 (仅 LinkedIn Learning) |
| level | 课程级别 (仅 EDX) |
| skills | 课程涵盖的技能 (仅 Coursera) |
| metadata | 额外的课程元数据 |
| link | 课程链接 |
| page | 发现该课程的页码 (Coursera, EDX) |
| keyword | 搜索关键词 (仅 LinkedIn Learning) |
本爬虫专为 CoreClaw 平台设计:
platforms 字段 (复选框) 作为并发键 (b 字段)["edx"] 和单字符串 "edx" 两种格式| 平台 | 方法 | 提取字段 |
|---|---|---|
| Coursera | 分页 | title, partner, rating, skills, metadata, link |
| EDX | 分页 | title, partner, link |
| LinkedIn Learning | 关键词搜索 | title, link, duration, instructor |
探索商店中更多热门采集工具
by vew5uoxb
获取商品基础信息、商品价格信息、商品图片、商品规格属性、商品 SKU 信息、商品评分及评论信息、评论对应 SKU 信息、店铺基础信息。
by mn06pz6r
1688商品详情爬取
by Eric Lozaga
获取Thumbtack的评论及评论数据
by mn06pz6r
根据用户screen_name或user_id游客获取所有推文