This website works better with JavaScript
首頁
探索
說明
登入
Server
/
crawler_shipinhao
關注
10
讚好
0
複刻
0
檔案
問題管理
0
合併請求
0
Wiki
视频号爬虫
79
提交歷史
1
分支列表
0
版本發佈
目錄樹:
52cb38fd19
分支列表
標籤列表
master
crawler_ship...
HTTP
SSH
ZIP
TAR.GZ
wangkun
52cb38fd19
update
2 年之前
.idea
9619456898
update
2 年之前
chlsfiles
11a41fa4e0
update
2 年之前
logs
fd49420ba3
first commit
2 年之前
main
b94d972fc4
update
2 年之前
videos
91074e7135
update
2 年之前
.DS_Store
91074e7135
update
2 年之前
.gitignore
f5c453484d
first push
2 年之前
README.md
52cb38fd19
update
2 年之前
README.md
crawler_shipinhao
git:
https://git.yishihui.com/Server/crawler_shipinhao.git
需求:
https://w42nne6hzg.feishu.cn/docx/doxcny2B80x9h5B6iu4a36jsiDc
爬虫表:
https://w42nne6hzg.feishu.cn/sheets/shtcn9rOdZRAGFbRkWpn7hqEHGc
介绍
视频号爬虫项目
软件架构
python==3.10
Appium_Python_Client==2.6.1
loguru==0.6.0
oss2==2.15.0
psutil==5.9.2
requests==2.27.1
selenium==4.4.3
urllib3==1.26.9
使用说明
cd crawler_shipinhao
python3 ./main/run_shipinhao_recommend.py
需求
2022/10/18
运行时间调整: 10:00:00 - 16:00:00 (包含)
2022/10/12
同一账号下的作品最多连续抓取两条视频
2022/10/11
推荐榜,每日入库条数限制:100
2022/9/27
新增按照话题抓取
2022/9/14
修改视频时长>=30s
2022/9/13
视频时长>=10s
点赞>=1000
运行时间: 10:00:00 - 20:00:00
上传账号: [20631278, 20631279]