-
-
Notifications
You must be signed in to change notification settings - Fork 1.4k
Home
Hatcat123 edited this page Aug 8, 2019
·
5 revisions
Welcome to the ECommerceCrawlers wiki!
这是一个开源的爬虫项目，项目中的内容多为实用的技巧。同时整理借鉴了多为爬虫博客的精华。得到爬虫大牛的start······
贡献内容包含且不仅限于：优秀的爬虫项目、对本项目中爬虫的优化、对本项目中爬虫添加详细说明或文档。
添加贡献的方法：贡献方法
爬虫作用
网页介绍
Roobots协议
获取数据
模拟获取数据
re
beautifulsoup
xpath
yquery
css
小规模数据存储（文本）
- txt文本
- csv
- excel
大规模数据存储（数据库）
- mysql
- redis
- mongodb
反爬
反反爬
多线程
多进程
异步协程
scrapy框架
flask Web
django Web
tkinter
echarts
electron