Data Engineer 数据工程师

1\. 数据采集与处理 搭建数据采集流程从多个平台/业务系统中采集结构化与非结构化数据 编写 ETL/ELT 流程将数据清洗、标准化、入库 对接游戏服务、支付系统、用户行为日志、投放数据等 2\. 数据仓库建设 设计并开发数据仓库模型如ODS、DWD、DWS、ADS分层 优化数据表结构提升查询性能 维护数据字典和元数据管理系统。 3\. 数据中台与接口开发 构建统一数据中台为数据分析师、BI、算法团队提供接口 提供API或数据服务支持运营、风控、BI平台等系统调用。 4\. 实时计算与流式处理 处理实时数据流如实时投注、下注、充值等 构建实时告警机制和实时数据看板。 精通 SQL熟悉主流数据库MySQL、PostgreSQL、ClickHouse、Greenplum等 熟悉 Hadoop/Spark/Flink/Kafka 等大数据生态组件 精通 Python/Java/Scala 中至少一种编程语言 有良好的数据建模经验 熟悉 ETL 工具如 Airflow、DataX、NiFi、Glue 等 熟悉 CI/CD 流程与数据质量监控系统。 行业理解博彩方向加分 理解博彩系统的数据流用户、游戏、交易、返点、风控等 熟悉博彩行业中的“用户生命周期指标”、“充值行为分析”、“高危用户识别”等模型所需数据结构 有处理海量日志数据PV、UV、投注日志等经验。 工作地点阿尔巴尼亚 福利优厚的薪资、餐食、住宿和带薪年假