Skip to content

小红书爬虫 2023年2月版本(仅供个人研究)

Notifications You must be signed in to change notification settings

willwill85/XHS_Crawler

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

3 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

小红书爬虫

文件说明

——————————————————————

爬虫机

xhsuser.py

负责爬指定用户的相关信息 数据从服务中获得

feed.py

feed流获得用户列表增加到云端数据

proxy.py

获得代理服务器ip

webapi.py

云端接口

——————————————————————

服务器

webapp.py

云端的服务器,提供4个接口,利用Web.py框架实现

  1. 添加用户
  2. 更新用户
  3. 获得需要爬的用户
  4. 获得一个符合投放条件的用户

db.py

数据库服务 SQLite

list.html

前端展示页面

db

db数据库,SQLite

表结构SQL: CREATE TABLE USERS ( id TEXT, name TEXT, fans INTEGER, p1 INTEGER, p2 INTEGER, p3 INTEGER, p4 INTEGER, ND INTEGER , "desc" TEXT);

About

小红书爬虫 2023年2月版本(仅供个人研究)

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published