GitHub - zhaoxizxzx/WebCrawler

Branches Tags

Name		Name	Last commit message	Last commit date
Latest commit History 2 Commits
Templates		Templates
static		static
ContactRatio.py		ContactRatio.py
FollowersPage.py		FollowersPage.py
database.py		database.py
douban.py		douban.py
followers.py		followers.py
readme.txt		readme.txt
test.db		test.db

Repository files navigation

任务：
1、将某个 Up 主的粉丝数用爬虫的方法抓取下来，并且每小时重新爬取一次，可视化出来。
2、选三部豆瓣电影，分别爬取其评论用户，用合理的算法给出大致正确的重合度，给出算法时间复杂度，估计算法所用的空间内存。

运行环境：win10,  python3.8, Flask1.1.2, pip 21.0.1, beautifulsoup4 4.9.3, urllib3 1.26.3, requests 2.25.1
步骤：
1、启动FollowersPage.py, followers.py
2、启动ContactRatio.py