2.12假期记录
今日继续个人项目开发,完成实时模块与预测模块的整合。实时模块基于 Spark Streaming+Kafka,模拟药品销售实时数据写入 Kafka,通过 Direct 方式读取数据,实现实时销量统计与热销药品预警,将实时结果推送到前端页面(简易 Flask 页面)。预测模块集成 MLlib 的线性回归算法,读取历史销量数据,训练销量预测模型,实现未来一周药品销量的预测,将预测结果写入数据库。测试两个模块的联动性,确保实时数据与历史数据的分析结果能同步展示。解决了模型训练耗时的问题,通过 RDD 持久化优化训练效率。
浙公网安备 33010602011771号