Data Engineering on Chen Kai Bloghttps://www.chenk.top/zh/tags/data-engineering/Recent content in Data Engineering on Chen Kai BlogHugozh-CNThu, 24 Jul 2025 09:00:00 +0000系统设计（七）：数据管道——批处理、流处理与 Lambda 架构https://www.chenk.top/zh/system-design/07-data-pipelines/Thu, 24 Jul 2025 09:00:00 +0000https://www.chenk.top/zh/system-design/07-data-pipelines/<p>每秒，一家大型电商平台都会生成数千个数据点：页面浏览、搜索查询、加入购物车事件、下单、库存变更、价格更新、配送状态变化。这些原始数据未经处理时毫无价值——散落在数十个服务中，以不同格式存储，且到达速率不可预测。而将这类原始数据转化为可操作洞察的系统——实时仪表盘、个性化推荐、欺诈检测告警、业务报表——正是<strong>数据管道（Data Pipeline）</strong>。</p>