第六学期实践项目|连锁书店销售分析
日期:2026-07-28 13:18:30 作者:李行健 胡卿源 来源: 浏览量:0
项目成员:李行健 胡卿源
作品简介:业务分析指标方面,构建了6大主题的完整指标体系,覆盖销售总览、门店排名、品类分析、会员价值、销售趋势和渠道对比,包含同环比、排名占比、移动平均、累计值、复购率等多种分析维度,能够从门店、品类、渠道、会员等多角度洞察销售情况,为业务决策提供全面的数据支撑。
自动化调度方面,实现了Sqoop全量同步和增量同步两套数据采集方案,增量同步基于时间戳水位线机制,支持断点续传和失败重试。基于DolphinScheduler构建工作流调度,采用层间串行、层内并行的DAG设计,DWS和ADS层多表并行计算,有效提升整体调度效率,实现数据处理全流程自动化。
数据质量方面,建立了标准化的数据治理体系,DWD层实现完整的数据清洗流程,包括格式标准化、枚举值编码、空值填充和异常数据过滤。新增数据质量标记字段,可追溯每条数据的清洗状态。每环节设置数据量校验机制,确保数据流转的完整性和准确性,从源头保障分析结果的可靠性。
新技术:Sqoop + Hive + HDFS + MapReduce + DolphinScheduler
![]()
![]()
