# python爬虫实现对自己网站收录访问 **Repository Path**: Junior-L/baidu_crawl ## Basic Information - **Project Name**: python爬虫实现对自己网站收录访问 - **Description**: 我们刚搭建的网站提交到百度收录,排名十分靠后,无法获取资源。我们通过爬虫去爬取关键字,然后再用爬虫自动进行访问,来增加我们网站关键词的访问量。 - **Primary Language**: Python - **License**: MulanPSL-2.0 - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 2 - **Forks**: 1 - **Created**: 2022-07-12 - **Last Updated**: 2023-08-16 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # python爬虫实现对自己网站收录访问 #### 介绍 我们刚搭建的网站提交到百度收录,排名十分靠后,无法获取资源。我们通过爬虫去爬取关键字,然后再用爬虫自动进行访问,来增加我们网站关键词的访问量。 #### 运行环境 python3.8 #### 安装教程 1. copy代码到本地,调整环境为python3.8.即可 ### 项目说明 1. 可以支持自定义代理 2. 使用了任务调度器,可以支持多个关键字同时爬取 3. 日志记录每次爬取关键词所产生的搜索结果 ### TOOD 1. 增加免费代理爬取,取代手动设置代理