# spider

**Repository Path**: webusi/spider

## Basic Information

- **Project Name**: spider
- **Description**: AI内容生成，一键发布 公众号/抖音/小红书/快手/知乎，网络爬虫，电商数据，媒体数据，论坛数据，搜索引擎数据
- **Primary Language**: Python
- **License**: MIT
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 1
- **Forks**: 1
- **Created**: 2025-10-11
- **Last Updated**: 2025-11-07

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

<p align="center">
	<img alt="logo" src="favicon.png">
</p>
<h1 align="center" style="margin: 30px 0 30px; font-weight: bold;">spider v0.0.1</h1>
<h4 align="center">网络爬虫</h4>
<p align="center">
	<a href="https://gitee.com/webusi/spider/blob/master/LICENSE"></a>
</p>

## 平台简介
内容运营系统：支持一键发布

网络爬虫，你想要的数据都有，助力产品调研，舆情监测<p/>
淘宝数据, 京东数据, 头条数据, 抖音数据, B站数据, 拼多多数据, 百度数据, 等等

技术栈<br>
* Python3.9+、Selenium。

## 团队产品
https://www.webusi.net

## 使用方法
git clone https://gitee.com/webusi/spider.git <br>
cd spider <br>
python -m venv spider <br>
source spider/bin/activate <br>
pip install -r requirements.txt <br>
python api.py <br>

启动结果：<br>
 * Running on http://127.0.0.1:5000 <br>

调用接口：<br>
curl --location --request POST 'http://127.0.0.1:5000/taobao/search' \ <br>
--header 'Content-Type: application/json' \ <br>
--data-raw '{"text": "雨衣"}' <br>

第一次调用时，会弹出淘宝页面后，等待自动打开登录页，然后用淘宝app扫码登录，然后等待返回结果即可

## 微信交流
<tr>
    <td><img width="200" height="200" src="code.png"/></td>
</tr>

## 更新日志
### 0.0.1 2025-11-7
1.  增加上传图片/音频/视频接口

### 0.0.1 2025-11-4
1.  增加公众号素材接口
2.  优化设置数据库
3.  优化设置公众号密钥

### 0.0.1 2025-11-2
1.  增加读写sqlite
2.  增加调微信公众号接口

### 0.0.1 2025-10-12
1.  抓取淘宝数据: 搜索商品，抓取搜索结果数据