# pyspider-python

**Repository Path**: xutao6936/pyspider-python

## Basic Information

- **Project Name**: pyspider-python
- **Description**: python爬虫
- **Primary Language**: Python
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 1
- **Forks**: 0
- **Created**: 2020-02-17
- **Last Updated**: 2021-12-29

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

| 平台                   | 网址                                                         | 区域   | 备注                                            |
| ---------------------- | ------------------------------------------------------------ | ------ | ----------------------------------------------- |
| 浙江省政府采购网       | http://zfcg.czt.zj.gov.cn/purchaseNotice/index.html?_=1581390900549 | 浙江   | 已完成                                          |
| 全国公共资源交易平台   | http://deal.ggzy.gov.cn/ds/deal/dealList.jsp                 | 全国   | 已完成                                          |
| 中国招投标公共服务平台 | http://www.cebpubservice.com/                                | 全国   | 已完成                                          |
| 北京公共资源交易中心   | https://www.bidcenter.com.cn/zhaobiao/area_1050_313_1/       | 全国   | 全国公共资源交易平台已包含                      |
| 政采云                 | https://www.zcygov.cn/                                       | 全国   |                                                 |
| 杭州市财税网           | http://czj.hangzhou.gov.cn/                                  | 杭州市 | **确认是否是杭州市财政网 跳转到浙江政府采购网** |
| 各子公共资源交易中心   |                                                              |        | 全国公共资源交易平台已包含                      |

### python 安装pyspider 

python  3.5.4 

1. 安装python 

2. 命令行执行 

   ```python
   pip install pyspider
   python -m pip install --upgrade pip
   ```

3. **ValueError: Invalid configuration: - Deprecated option 'domaincontroller': use 'http_authenticator**

   此报错由于WsgiDAV版本过高导致 解决办法：

   ```
   python -m pip  uninstall wsgidav     # 卸载
   python -m pip install werkzeug==2.4.1     #安装2.4.1版本
   ```

   ​

4.  安装成功后，重启启动pyspider依旧报错：

   **run from werkzeug.wsgi import DispatcherMiddleware**
   **ImportError: cannot import name 'DispatcherMiddleware'**

   werkzeug的版本为1.0.0，这个版本中没有DispatcherMiddleware方法，所以还是降低版本  解决办法：

   ```
   python -m pip  uninstall werkzeug # 卸载
   python -m pip install werkzeug==0.16.1   #安装0.16.1版本
   ```

   ​

5.  执行 pyspider all  启动成功  浏览器打开http://localhost:5000/

   ​