# dongchedi-scraper **Repository Path**: zee0525/dongchedi-scraper ## Basic Information - **Project Name**: dongchedi-scraper - **Description**: 懂车帝纯正文抓取脚本:支持自动滚动加载与手动翻页,高效提取并导出评论数据。 - **Primary Language**: Unknown - **License**: MIT - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 0 - **Forks**: 0 - **Created**: 2026-07-22 - **Last Updated**: 2026-07-22 ## Categories & Tags **Categories**: Uncategorized **Tags**: tampermonkey ## README # 🚀 懂车帝抓取 v3.0 (纯正文版) > **简介**:一款专为懂车帝车型口碑/评分页面定制的 Tampermonkey 油猴脚本。 > **核心功能**:精准提取评论纯文本,自动过滤评分、车型、时间等无关信息,支持"滚动加载 + 手动翻页"的高效采集模式。 ## ✨ 核心特性 * **🎯 极简数据清洗**:智能识别并剔除冗余信息,仅保留用户评论的核心正文内容。 * **🔄 稳定抓取机制**:采用"自动滚动加载当前页 + 手动控制翻页"的交互逻辑,有效规避全自动脚本被反爬或卡顿的风险。 * **🛡️ 智能防重去噪**:内置哈希去重算法,防止在无限滚动加载时重复抓取同一条评论;自动过滤无效短文本与广告。 * **📊 可视化控制面板**:右下角悬浮控制台,实时显示抓取状态、已抓数量及当前页码,操作直观便捷。 * **💾 一键导出 CSV**:支持将清洗后的数据导出为标准 CSV 格式,完美兼容 Excel/WPS,方便后续数据分析。 ## 🛠️ 安装教程 1. **前置准备**:确保浏览器已安装 [Tampermonkey](https://www.tampermonkey.net/) 或 Violentmonkey 扩展插件。 2. **获取脚本**:点击本仓库中的 `懂车帝抓取.user.js` 文件。 3. **一键安装**:脚本管理器会自动识别并弹出安装确认页,点击 **"安装"** 按钮即可生效。 ## 📖 使用说明 ### 1. 启动脚本 访问懂车帝任意车型的口碑/评分页面(URL 包含 `/auto/series/score/`),页面右下角会出现悬浮控制面板。 ### 2. 抓取流程 * **开始抓取**:点击 `▶ 开始`,脚本将自动滚动至页面底部,加载并提取所有可见评论。 * **暂停/继续**:如需临时中断,点击 `⏸ 暂停`;再次点击即可恢复。 * **翻页操作**:当前页抓取完毕后,点击 `📄 翻页` 进入下一页,随后再次点击 `▶ 开始` 继续抓取。 * **停止任务**:点击 `⏹ 停止` 可彻底终止当前抓取任务。 ### 3. 导出数据 抓取完成后,点击 `💾 导出` 按钮,数据将自动保存为 `懂车帝正文_时间戳.csv` 文件。 ## ⚙️ 技术细节 * **匹配地址**:`*://www.dongchedi.com/auto/series/score/*` * **清洗逻辑**:通过正则表达式定位评分标记与结束符(如"查看完整点评"),精准截取中间段落。 * **去重策略**:基于评论内容前 60 个字符生成哈希值进行比对,兼顾效率与准确性。 ## 📝 更新日志 * **v1.1 (当前版本)** * 重构 UI 面板,增加分页显示与状态反馈。 * 优化翻页逻辑,支持多种分页组件样式。 * 增强正文清洗算法,适配新版懂车帝页面结构。 * 初始版本发布,实现基础抓取与导出功能。 --- ## 🤝 参与贡献 欢迎 Fork 本仓库并提交 PR! 1. Fork 本仓库 2. 新建 Feat_xxx 分支 3. 提交代码 4. 新建 Pull Request --- **免责声明**:本脚本仅供个人学习与研究使用,请勿用于商业用途或高频恶意抓取,遵守网站 Robots 协议。