Job Description
数据平台工程师/中文工作环境
■ Job Title
Data Engineer
■ Company Overview
国际化加密货币交易所,分布全球。
■ Your Role and Responsibilities
负责在加密资产交易所业务中,推进全公司范围的数据应用与数据基础设施建设,涵盖设计、构建及运维。
• 设计、构建并运维数据仓库(DWH)及数据湖
(AWS Redshift、StarRocks 等)
• NoSQL / NewSQL 产品的技术验证、导入及运维管理
(Apache Doris、ClickHouse、TiDB 等)
• 负责从各业务系统进行数据采集、加工的 ETL / ELT 数据管道的开发与运维
(AWS DMS、Flink 等)
• 与 BI 工具(QuickSight、Superset 等)及分析型数据库进行数据对接,并进行性能优化
• 基于个人信息保护与安全策略,设计并落地数据治理方案
■ Experience and Qualifications
• 金融行业中的数据处理经验
(如报表制作、审计对应等)
• 使用 SQL 进行数据抽取、加工及分析的实务经验
(具备复杂查询的编写能力)
• 使用 Python / Java / Scala / Go 等语言进行数据处理批任务或脚本开发的经验
• 在 AWS 等公有云环境中,构建并运维数据分析平台
(数据仓库 / 数据湖)的经验
• ETL / ELT 数据管道的构建与运维经验
■ Additional Preferred Qualifications
• 大数据处理框架使用经验
(Spark、Flink、Hadoop 等)
• 流式数据处理系统的构建经验
(Flink CDC、Kafka 等)
• 使用 IaC(Terraform 等)进行基础设施管理的经验
• BI 工具的导入、运维及数据看板制作经验
• 使用 DBT(data build tool)进行数据转换的经验
■ Good Reasons to Join
• 国际化工作团队。
• 接触区块链以及加密货币最新技术。
■ Work Location
Tokyo
■ Salary
negotiable
■ Contract term (we need to give a very detailed description if it’s a fixed-term contract!)
Details will be provided during the meeting.