Available to hire
Senior Data Engineer with 11+ years of experience in end-to-end data engineering, data governance, and platform operations. Deep involvement in trading (MT4/MT5) data quality, reconciliation, risk/control reporting, and cross-system pipeline migration using modern data stacks.
Strong expertise across Hadoop/Spark/Flink, SQL, and streaming/batch pipelines, with a solid production mindset. Also capable of leading overseas data governance projects and collaborating effectively across cultures, supported by professional English writing and communication skills.
Experience Level
Expert
Expert
Expert
Expert
Expert
Expert
Expert
Expert
Expert
Intermediate
Intermediate
Intermediate
Intermediate
Intermediate
Beginner
Beginner
Language
English
Advanced
Work Experience
Senior Data Engineer（数据研发方向） at Doo Group Limited – FinPoints Global Limited
October 1, 2025 - Present深度参与 MT5 交易数据全链路治理与风控、资金出金业务体系建设。主导 MT5 业务线数据研发全流程，从需求对接、链路设计、代码实现到生产运维；完成交易数据修复、校验、优化与自动化报表开发。牵头对冲数据修复、交易表重构、Live3 环境兼容适配，解决数据重复/缺失/视图性能瓶颈等问题。主导风控出金审核自动化报表与出金数据导出能力，实现风控流程线上化标准化并提升效率与合规性。承担 Dagster 数据管道迁移与用户数据链路修复等任务，处理跨平台跨业务数据异常与兼容性问题，保障交易平台长期稳定运行；多次应急处理时区适配、校验与补全需求，确保业务连续性。
Senior Data Engineer - 数据研发方向 at Doo Group Limited – FinPoints Global Limited（新加坡）
October 1, 2025 - Present深度参与 MT5（MetaTrader 5）交易数据全链路治理与风控/资金出金体系建设。主导交易数据修复、校验、优化与自动化报表开发，构建覆盖交易、风控、营销全场景的数据质量保障与指标体系。统筹 MT5 业务线数据研发全流程：需求对接、链路设计、代码实现与生产运维；推动对冲数据修复、交易表重构、Live3 兼容适配，解决重复/缺失/视图与性能瓶颈问题。牵头风控出金审核自动化报表与出金数据导出，推动风控流程线上化标准化。承担 Dagster 数据管道迁移与用户数据链路修复等任务，保障跨平台跨业务的数据异常与兼容性问题快速定位解决。多次作为“业务救火队长”处理时区适配、数据校验、营销侧补全等紧急需求。
技术专家 - 数据研发 at 上海逸迅信息科技有限公司（杭州）
December 1, 2019 - August 31, 2025参与数据中台 DIPC、物联网平台 XIot 与数据治理平台 XGOV 的架构设计与开发，构建数据管理机制、指标体系与业务理解体系。作为团队技术 Leader 统筹数据研发全生命周期：顶层方案、资源调配、代码质量把控与生产稳健运维，持续引入自动化开发/测试机制以减少冗余工作量并进行项目风险预警。
承担集群与工作流运维与故障定位，作为“项目救火队长”跨项目解决复杂技术问题。主导美国数据治理项目（海外交付），负责技术调研、平台部署、会议记录、业务梳理、客户访谈与规则建立等工作，并以英文呈现完成关键技术对接。
主导大型爱建信托数字化转型项目，推动提前交付并实现业务流程优化与数据价值挖掘，取得较高收益。负责日常平台治理与持续优化，保障长期稳定运行。
技术专家（数据研发方向） at 上海逸迅信息科技有限公司
December 1, 2019 - August 31, 2025参与数据中台 DIPC、物联网平台 XIot 与数据治理平台 XGOV 的架构设计与开发，从技术专家视角构建高效稳定的数据管理与指标体系。统筹数据研发全生命周期，包括顶层方案、团队资源调配、代码质量把控与生产稳健运维。创新引入自动化开发与测试机制，削减 30% 以上冗余工作量，并进行项目风险预警规避超时交付。承担集群运维与工作流运维，快速定位解决技术难题。主导美国数据治理项目（参与调研、部署、会议纪要、业务梳理、客户访谈、规则建立等），多项目表现获认可并负责海外高要求交付。主导大型爱建信托数字化转型项目，推动提前 20% 交付并提升年度收益。
技术专家 - 数据研发方向 at 杭州/上海逸迅信息科技有限公司
December 1, 2019 - August 31, 2025参与数据中台 DIPC、物联网平台 XIot 与数据治理平台 XGOV 的架构设计与开发。担任技术 Leader 时统筹数据研发全生命周期：方案顶层设计、团队资源调配、代码质量把控与生产稳健运维；引入自动化开发与测试机制，减少 30% 以上冗余工作量，并进行项目风险预警以规避超时交付风险。承担集群运维与工作流运维，快速定位并解决技术难题。主导海外数据治理项目（格林威尔国际维生素公司）：负责技术调研、平台部署、会议记录、业务梳理、客户访谈与规则建立。主导爱建信托数字化转型项目，采用技术方案与项目管理模式推动提前 20% 交付，并实现业务流程优化与数据价值挖掘。
高级数据研发工程师 at 杭州数澜科技有限公司
March 1, 2019 - October 31, 2019负责数据研发工作，参与业内“数栖平台”数据中台架构设计与开发。围绕工作流搭建，涉及 Spark/Spark SQL/Flink/Shell/Python/Java/Scala/Hive 等。作为技术负责与核心成员参与兴业银行信用卡中心、华泰证券大数据平台、绍兴银行实时计算等项目，支持企业构建大数据能力以提升精准决策、用户洞察、业务创新、效率与风险管控。
Java&大数据开发工程师 at 中国软通动力（外派：阿里巴巴 EMR 计算平台事业部）
December 1, 2018 - March 31, 2019参与阿里云 EMR 计算平台增值业务设计、开发、测试与运维，涉及 EMR Open API、EMR-ETL 等相关能力。
在阿里 EMR（基于 Hadoop/Spark 生态）场景下完成业务扩展与平台化实现，支撑用户在 Hive/HBase 等周边系统上完成数据分析处理，并支持数据导出/导入到云存储与数据库系统等能力。
Java & 大数据开发工程师 at 中国软通动力（外派 阿里巴巴 EMR 计算平台事业部）
December 1, 2018 - December 31, 2018参与 EMR 计算平台增值业务设计、开发、测试与运维，涉及 EMR Open API、EMR-ETL 等能力。基于阿里云 EMR 的 Hadoop/Spark 生态进行相关功能交付与维护。
Java&大数据开发工程师 at 中国软通动力外派 阿里巴巴 EMR 计算平台事业部
December 1, 2018 - December 31, 2018参与阿里云 EMR 计算平台增值业务设计、开发、测试与运维，涉及 EMR Open API、EMR-ETL 等能力。围绕 Hadoop/Spark 生态与周边组件（如 Hive、HBase 等）在平台侧的集成与增强开展工作。
Java&数据研发工程师 at 中视科华有限公司（北京）
January 1, 2018 - December 31, 2018使用第三方 Java API 与大数据技术对直播转播素材进行检测与检查，并使用广电视频技术专用工具协助演播室对节目拍摄。参与导播室维护与开发工作，承担视频流质量审查、网络直播与转播相关支持。
涉及多个大型电视节目转播与宣传项目的相关技术工作。
Java & 数据研发工程师 at 中视科华有限公司
January 1, 2018 - December 31, 2018使用第三方 Java API 与大数据技术对直播转播素材进行检查，并借助广电视频技术专用工具协助演播室拍摄。参与第一导播室 2018 年电视节目视频流质量审查、网络直播与转播、主页开发维护等工作（包括大型晚会/歌会等）。
Java&数据研发工程师 at 中视科华有限公司
January 1, 2018 - December 31, 2018使用第三方 Java API 与大数据技术对直播转播素材进行检查，并使用广电视频技术专用工具协助演播室拍摄。参与第一导播室节目视频流质量审查、网络直播/转播以及主页开发维护，支持大型电视节目录制与宣传类项目。
Java&数据研发工程师 at 尊嘉资产管理有限公司（北京）
May 1, 2014 - January 31, 2016使用证券相关第三方 Java API 与用户 Web/APP 操作日志进行数据采集，参与数据管道（Pipeline Architecture）设计与数据库建模。
对采集数据进行探索、清洗、分析与数据挖掘并开展数据可视化；利用任务调度框架将部分 Pipeline 离线化；参与企业大数据平台架构设计及运维工作。
Java & 数据研发工程师 at 尊嘉资产管理有限公司
May 1, 2014 - January 31, 2016使用证券相关第三方 Java API 与用户 Web/APP 操作日志进行数据采集；参与数据管道（Pipeline Architecture）设计与数据库建模。完成数据探索、清洗、分析、挖掘与可视化；对部分 Pipeline 进行任务调度框架离线化。参与企业大数据平台架构设计与运维工作。
Java&数据研发工程师 at 尊嘉资产管理有限公司
May 1, 2014 - January 31, 2016使用证券相关第三方 Java API 与用户在 Web/App 的日志进行数据收集。参与数据管道（Pipeline Architecture）设计与数据库建模，开展数据探索、清洗、分析与挖掘并进行可视化；部分管道任务离线化。参与企业大数据平台架构设计与运维。
Java&数据开发工程师 at 热云金融（重庆）
October 1, 2012 - May 31, 2014针对用户数据快速增长导致传统数据库处理困难与多数据库联合使用复杂的问题，建设 Hadoop 集群并将传统数据迁移到数据湖环境；搭建 Spark 环境支持多数据库联合处理。
搭建企业级数据湖以支撑后续二次挖掘。使用 log4j 收集 Java Web 操作日志并写入指定目录，通过 Flume 监听目录并以流方式传输到 Kafka，再使用 Spark 进行数据处理并写入 MySQL 或直接入库。
Java & 数据开发工程师 at 热云金融
October 1, 2012 - May 31, 2014为应对用户数据快速增长导致传统数据库难以处理的问题，推动多数据库联合使用与二次挖掘方案落地。搭建 Hadoop 集群将传统数据库数据迁移至数据湖，搭建 Spark 环境支持多库联合处理。使用 log4j 收集 Java Web 日志，Flume 监听指定目录并流式传输到 Kafka，再通过 Spark 处理并写入 MySQL 或直接入库。
Java&数据开发工程师 at 热云金融
October 1, 2012 - May 31, 2014针对用户数据急速增长导致传统数据库难以处理、联合使用复杂与二次挖掘困难的问题，搭建 Hadoop 集群将传统数据迁移到大数据环境，并在 Hadoop 上搭建 Spark 以支持多数据库联合处理与企业级数据湖建设。使用 Java Web 日志收集（log4j）到指定文件夹，通过 Flume 采集并流式传输到 Kafka，再由 Spark 处理并写入 MySQL 或直接进入 MySQL，实现从日志采集到计算与落库的链路贯通。
Education
硕士 at 格拉斯哥大学 计算机科学院
August 1, 2016 - December 31, 2017本科 at 哈尔滨理工大学 远东学院 计算机学院
September 1, 2008 - July 31, 2012硕士 at 格拉斯哥大学 计算机科学院
August 1, 2016 - December 31, 2017本科 at 哈尔滨理工大学 远东学院
September 1, 2008 - July 31, 2012硕士 at 格拉斯哥大学 计算机科学院
August 1, 2016 - December 31, 2017本科 at 哈尔滨理工大学 远东学院 计算机学院
September 1, 2008 - July 31, 2012Qualifications
雅思成绩（IELTS）
January 1, 2016 - August 20, 2026Industry Experience
Software & Internet, Financial Services, Computers & Electronics, Professional Services, Government
Experience Level
Expert
Expert
Expert
Expert
Expert
Expert
Expert
Expert
Expert
Intermediate
Intermediate
Intermediate
Intermediate
Intermediate
Beginner
Beginner
Hire a Data Engineer
We have the best data engineer experts on Twine. Hire a data engineer today.