crap

话题找到数量

firecrawl/firecrawl

面向AI的网页数据API——将整个网站转换为LLM就绪的Markdown或结构化数据🔥

108k
7k
224
+726
排名 #11
4月12日
查看详情

scrapy/scrapy

Scrapy:Python 快速高级网页爬取与抓取框架

60k
11k
208
+150
排名 #5
3月2日
查看详情

Mintplex-Labs/anything-llm

内置RAG、AI智能体、无代码智能体构建器、MCP兼容等功能的桌面与Docker一体化AI应用

57k
6.2k
295
+2.3k
排名 #16
4月5日
查看详情

huginn/huginn

创建可监控并代您执行的智能体。您的智能体随时待命!

49k
4.2k
203
+231
排名 #23
4月5日
查看详情

NaiboWang/EasySpider

易采集:一个可视化无代码/免编程的网络爬虫工具,支持通过图形化界面设计和执行采集任务。别名:ServiceWrapper面向Web应用的智能化服务封装系统。

44k
5.4k
243
+9
排名 #12
3月21日
查看详情

D4Vinci/Scrapling

🕷️ 一个自适应网络爬虫框架,能够处理从单个请求到大规模爬取的所有任务!

36k
3.1k
226
+2k
排名 #14
4月11日
查看详情

dgtlmoon/changedetection.io

最优秀且简洁的网站变更检测、网页监控与网站变动提醒工具。完美适用于内容变更追踪、价格下降提醒、补货通知及网站篡改监控——完全免费或选择我们的SaaS方案!

30k
1.7k
165
+32
排名 #7
4月4日
查看详情

assafelovic/gpt-researcher

一个能够利用任何大型语言模型提供商对任意数据进行深度研究的自主智能体。

25k
3.3k
279
+36
排名 #6
1月26日
查看详情

apify/crawlee

Crawlee——一个用于构建可靠爬虫的Node.js网络爬取和浏览器自动化库。支持JavaScript与TypeScript。可为人工智能、大语言模型、检索增强生成或GPT提取数据。从网站下载HTML、PDF、JPG、PNG等文件。兼容Puppeteer、Playwright、Cheerio、JSDOM及原始HTTP请求。支持有头模式与无头模式。提供代理轮换功能。

22k
1.3k
191
+36
排名 #11
3月11日
查看详情

getmaxun/maxun

✨ The open-source no-code platform for web scraping, crawling, search and AI data extraction • Turn websites into structured APIs in minutes ✨

14k
1.2k
213
+170
排名 #11
2月14日
查看详情

yusufkaraaslan/Skill_Seekers

将文档网站、GitHub仓库和PDF文件转换为Claude AI技能,并具备自动冲突检测功能。

12k
1.2k
218
+264
排名 #15
4月3日
查看详情

pystardust/ani-cli

用于浏览和播放动漫的命令行工具

12k
742
250
+598
排名 #16
4月12日
查看详情

apify/crawlee-python

Crawlee——用于构建可靠爬虫的 Python 网页抓取与浏览器自动化库。为 AI、大语言模型、检索增强生成或 GPT 提取数据,支持从网站下载 HTML、PDF、JPG、PNG 等文件。兼容 BeautifulSoup、Playwright 及原始 HTTP 请求,支持有头模式和无头模式,具备代理轮换功能。

8.5k
662
134
+79
排名 #11
3月10日
查看详情

lorien/awesome-web-scraping

用于网络爬虫与数据处理的库、工具及API列表。

7.8k
881
91
+48
排名 #14
4月1日
查看详情

tabulapdf/tabula

Tabula是一款用于从PDF文件中提取表格数据的工具

7.3k
683
141
排名 #11
3月4日
查看详情

daijro/camoufox

🦊 反检测浏览器

7.1k
606
190
+479
排名 #21
4月12日
查看详情

firecrawl/firecrawl-mcp-server

🔥 官方 Firecrawl MCP 服务器 - 为 Cursor、Claude 及其他 LLM 客户端添加强大的网络爬取功能

5.3k
590
202
+9
排名 #10
1月26日
查看详情

tiagozip/cap

面向现代网络的隐私优先、自托管验证码解决方案。

5.1k
343
152
+27
排名 #10
3月26日
查看详情

gosom/google-maps-scraper

从谷歌地图抓取数据。提取每个地点的名称、地址、电话号码、网站URL、评分、评论数量、经纬度、评论内容、电子邮件等信息。

3.6k
484
217
+526
排名 #8
4月12日
查看详情

Virtual-Browser/VirtualBrowser

免费反指纹浏览器,指纹浏览器,隐私浏览器,防识别浏览器,反识别浏览器,防关联浏览器,免费的 Web3 空投专用指纹浏览器 https://vbhub.net/?src=github

2.6k
456
194
+29
排名 #18
3月15日
查看详情

codingforentrepreneurs/30-Days-of-Python

在接下来的30天左右学习Python。

2.4k
1.4k
206
+41
排名 #7
2月8日
查看详情

builtbybel/CrapFixer

崩溃修复工具

2.2k
108
164
+1
排名 #9
2月10日
查看详情

AhmadIbrahiim/Website-downloader

💡 使用Node.js下载任意网站的完整源代码(包含所有资源文件)。[ JavaScript文件、样式表、图像 ]

2.1k
699
176
+45
排名 #3
1月27日
查看详情

Tanu-N-Prabhu/Python

本仓库帮助您从零开始学习Python和机器学习

2k
899
218
+49
排名 #5
2月15日
查看详情
助手