Python网络爬虫练习,主要技术路线:Requests + bs4 。练习包含两个库(Requests + bs4)常用用法,re语法,4个定向爬虫实例,Scrapy简单入门。
- Windows 10
- Python 3.7.5
- Requests
- Beautiful Soup
common_requests.py
save_files.py
parser_html.py
search_engine.py
Crawl_Univ_Ranking.py
Crawl_Douban_Book.py
Crawl_BiliBili_Video_Info.py
Crawl_Taobao_Price.py
学习笔记位于Notes
文件夹。
-
Requests + bs4 爬取豆瓣图书top250信息保存到 json
-
将 json上传到七牛云对象存储空间
-
Vue.js + Vue-resource 开发前端页面
/Douban_Reading_List