Appearance
基于 NanmiCoder/MediaCrawler 源码的架构设计分析
统一爬虫接口,支持小红书、抖音、快手、B站、微博、百度贴吧、知乎 7 大平台
查看详情
基于 asyncio 的异步架构,支持高并发爬取,数据高效流转
CSV、JSON、JSONL、SQLite、MySQL、MongoDB、Excel 多种存储方式自由切换
二维码登录、手机号登录、Cookie 登录三种认证方式适配不同场景
CDP 模式、代理 IP 池、请求签名等多层反爬策略
工厂模式 + 抽象基类,平台实现解耦,易于扩展新平台