自己紹介
経験
大数据工程师
某二线交易所 - - 今
职位: 大数据工程师 | 时间段: 2024/8 – 至今 | 工作内容: 梳理技术架构,构建基于Doris+Seatunnel+DolphinScheduler+Grafana的技术架构体系。数据源层整合了MySQL业务数据库、Kafka实时数据和外部链上数据;通过Seatunnel CDC方式进行实时数据同步;计算层以Doris数仓作为核心,采用标准的数据分层模型(ODS->DWD->DWS->DWM->ADS); 调度系统由DolphinSchedule负责工作流调度,并建立完整的数据质量监控体系;通过Grafana提供自助报表分析能力。该架构有效支撑了交易所的精细化运营、实时风控和业务决策需求。
大数据架构师
火必HTX - - 今
职位: 大数据架构师 | 时间段: 2022/3 – 2024/8 | 工作内容: 制定流程和技术规范,包括需求管理规范、开发规范与指引、数据仓库设计规范等。优化数据仓库,调度系统,数据治理平台;主导数据架构迭代,从15个主题域,64个模块,100+个业务过程出发进行数据域集市建模和指标开发。运用维度建模方法论,制定数据仓库开发计划,根据所提出功能需求设计数据仓库开发方案,梳理、设计并不断优化整体架构,细化数据开发特征表。
资深研发工程师
美团 - - 今
职位: 资深研发工程师 | 时间段: 2017/8 – 2022/3 | 工作内容: 负责摩拜单车调度系统的设计和开发,设计红包车功能增加车辆的使用频率,根据车辆和用户的数量关系匹配调度资源。负责摩拜单车大数据平台的建设工作,完成数据从生产、加工到使用的过程。负责美团打车业务数据仓库(离线、实时)建设。深度参与美团数据中台产品的建设,DQC、SLA、琅琊榜等项目。梳理指标,建立全局的指标管理规范;对模型进行重构、整合和迁移。
研发工程师
顺丰优选 - - 今
职位: 研发工程师 | 时间段: 2010/7 – 2017/5 | 工作内容: 负责顺丰优选商城业务订单系统平台搭建;生鲜物流配送系统搭建;用户画像系统和个性化推荐系统的平台化建设工作。参与搭建基于Hadoop、Spark大数据平台的整体规划和设计,制定数据处理的相关规范,参与维护大数据平台并能高效的解决问题。负责公司广告监测系统平台优化;大数据集群的规划和维护;制定底层数据处理标准。


