# 数据仓库 **Repository Path**: Job_Wang/data-warehouse ## Basic Information - **Project Name**: 数据仓库 - **Description**: No description available - **Primary Language**: Unknown - **License**: Not specified - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 1 - **Forks**: 0 - **Created**: 2026-11-05 - **Last Updated**: 2026-11-13 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # 电商交易数仓系统的设计与实现 本项目用于四人协作完成数据仓库课程作业。已提供最小流水线与看板代码;订单、订单明细和商品三份 Olist CSV 随仓库提供,已用真实数据跑通流水线。 建议技术路线:Python、DuckDB、SQL、Streamlit。采用 Olist 真实公开数据,正式使用前核对下载页面许可并记录版本和日期。 - [运行说明](docs/运行说明.md) - [四人任务书](docs/四人任务书.md) - [数据与模块接口](docs/数据与模块接口.md) - [第一轮操作指南](docs/第一轮操作指南.md) ## 目录约定 ```text data/raw/ 三份原始 CSV 与来源说明 data/warehouse/ 本地 DuckDB 文件,不提交 Git src/ 数据导入及统一执行脚本 sql/ods/ 原始层建表 sql/dim/ 维度加工 sql/dwd/ 明细加工 sql/dws/ 公共汇总 sql/ads/ 看板指标 checks/ 数据质量检查 SQL dashboard/ Streamlit 看板 docs/ 数据字典、指标、设计、报告素材 ``` 目录已包含首轮基础代码。所有人独立生成本地数据库,不共享正在写入的数据库文件。 首轮只完成订单与订单商品明细到月度趋势图的链路。阶段接口见 docs;扩展配送、评价与地区分析之前先复核粒度。 ## 品类排行链路 三份原始 CSV 进入 ODS 后,`dim.product` 按商品编号建立商品维度。 `dwd.order_items` 以订单商品项为粒度,通过左关联补充品类,缺失品类归为「未知」,保留原明细行。 `dws.trade_monthly_category` 按下单月份、品类汇总已送达订单的商品金额(不含运费), `ads.monthly_category_sales` 将结果提供给看板。看板先累计所选区间各品类金额,再取前十; 质量检查逐月对照所有品类(含未知)的金额和月度总览金额。 升级已有项目时,先关闭看板并重新执行 `python -m src.run_pipeline`,再打开看板; 仅拉取代码不会更新本地 DuckDB。