# collect_v3

**Repository Path**: ReviewClouds/collect_v3

## Basic Information

- **Project Name**: collect_v3
- **Description**: No description available
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2020-09-22
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

目录结构 

```

├── collect                   //采集程序
├── collect_data_main.py      //主程序
├── conf                      //配置目录
├── docs                      //文档
├── requirements.txt          //pip依赖
└── utils                     //工具类/函数

```



v3.20200706
- bugfix mysql状态采集

v3.20200702
- ips采集bugfix
- 每日心跳计算bugfix
- 密码文件检测
- 任务阻塞退出采集

v3.20200628
- 增加ips和cdn采集

v3.20200623Patch01
- requests请求增加超时

v3.20200623
- 心跳图线数据

v3.20200619
- 10.1 采集目录优化
- check 优化

v3.20200617
- 10.1 采集启动时间
- 单车打点日志采集
- vpn自修复

v3.20200611
- 灰度出现问题，全量发布

v3.20200611Gray01
- ips 日志采集
- diskmode 采集
- check 优化
- sim卡优化

v3.20200605Patch03
- dns 导致102采集不了修复
- 历史数据上传文件不存在问题修复
- 创建/run/filebeat_log2目录

v3.20200605Patch02
- check 修复
- 历史数据上传bug修复

v3.20200605Patch01
- 四方车挂载状态修复 

v3.20200605
- 修复同一个单车两个ap状态反掉的问题
- 历史数据上传
- 中心车可写判断
- 10.2 到10.1 ping20个包延迟采集

v3.20200528Patch03
- 华为新接口适配
- java log 按照类型告警

v3.20200528Patch02
- 单车nginxTypeMatch 改成 nginx_type

v3.20200528Patch01
- 根据ap的变动修改check

v3.20200528
- 更改ap在线的判断方式

v3.20200521
- 灰度测试未发现问题，全量

v3.20200520Gray01
- 中心车juno 单车cdn的情况判断     
- ips 日志采集 (暂时去掉)
- ap_ping 移到ap_status     

bugfix:
- 由于单车命令执行失败(ssh通) 导致的单车采集失败    
- 10.1 无法ping通时不采集10.1 服务信息   
- 10.2 vpn分三个线程ping


v3.20200512Patch01
- bugfix: 修复ping和user_info定时任务出错的问题

v3.20200512
- 连接用户信息采集
- cdn相关日志上传到kafka

v3.20200507Patch2
- 华为ap采集

v3.20200507Patch1
- boottime 回滚为/home/logs下日志
- carriage_info 偶尔有重复的

v3.20200507 
- 退出采集逻辑: 采集版本有更新退出采集，开机时间不到10分钟退出采集
- sim卡获取方式: 去掉特殊列表，完全按照厂商判断
- java_log 计算开网成功率
- 增加博兴瑞通和众通的双dns监控
- 增加apk软链接监控
- boottime 改成硬盘上的时间


v3.20200423     
- 软件版本采集