想快速判断数据工程最近在忙什么,不必逐篇追踪公司博客。Data Engineering Weekly 第288期把本周值得留意的实践集中到一处:数据平台不仅要把数据存好、算好,还要开始适应 AI、实时变化和系统故障。
本期延续数据平台基础电子书的主线,同时加入几组更具体的生态信号。Joanna He 讨论如何让 AI 智能体先通过受控入口读取指标定义、业务关系和权限,再执行查询,避免直接面对原始表格和未记录的规则。Airbnb 介绍用 Chronon 根据用户刚刚浏览或搜索的内容更新推荐画像;Canva 让队列工作进程在依赖服务报错增多时自动降速;Booking.com 则把 Kafka 消费者的容量测试自动化。另有 Orb 用 DuckDB 直接查询 S3 中的客户文件,排查计费数据为何未通过校验。它不是一次重大事件的深挖,更像一张本周地图:AI 可治理性、实时处理和系统韧性,正在同时成为数据团队的现实课题。