MediaCrawler-开源小红书抖音微博爬虫工具【网盘下载】

MediaCrawler是一个开源的在线爬虫工具，主要针对小红书、抖音、微博等社交媒体平台。它能够抓取这些平台上的视频、图片、评论、点赞、转发等信息。通过使用playwright搭桥，它能够在登录成功的上下文浏览器环境中执行JS表达式，从而获取一些加密参数，免去了复现核心加密JS代码的过程，降低了逆向的难度。

关于如何使用MediaCrawler，您也给出了详细的步骤：

1. 创建并激活python虚拟环境。这是为了避免与系统全局的python环境产生冲突，保证项目的依赖库版本与运行环境的一致性。
2. 安装依赖库。通过pip3命令安装requirements.txt文件中列出的所有依赖库。
3. 安装playwright浏览器驱动。这是MediaCrawler运行所必需的浏览器驱动。
4. 运行爬虫程序。可以通过命令行参数指定要爬取的平台、登录方式、爬取类型等信息。例如，可以通过--platform参数指定要爬取的平台，--lt参数指定登录方式，--type参数指定爬取类型等。
5. 数据保存。MediaCrawler支持将爬取到的数据保存到关系型数据库、csv文件或json文件中。

需要注意的是，使用爬虫工具需要遵守相关法律法规和平台的使用协议，不得用于非法用途。同时，由于社交媒体平台的反爬虫机制不断更新，MediaCrawler的使用可能会受到一定的影响，需要不断更新和调整才能保持其有效性。

免费网盘下载地址：