关键词:Web3 数据架构、实时数据管道、数据仓库建模、OKX 大数据、区块链数据集星、Singapore 招聘、Spark 优化、Flink 实时流
在区块链与 AI 融合的大时代,数据不再只是“仓库存货”,而是重塑金融体系的血液。如果你想成为将50+TB 级交易链路与链下行为数据,转译为可扩容、可解释、可实时决策的智能引擎的那个人,下文一定会点燃你的职业好奇心。
岗位全景:为什么是“未来级”机会?
- 业务高速迭代
OKX 产品线横跨现货、合约、DEX、NFT、DeFi 一站式入口,数据量级每年以 3-4 倍跳跃式攀升。传统的 T+1 离线报表已远远跟不上做市风控、推荐算法、用户增长的需求,必须用实时数据管道将延迟压到毫秒级。 - 技术栈全面
Alicloud DataWorks、AWS Spark、Databricks、StarRocks、开源 Flink 社区最新特性——你可以像在“技术游乐园”中无限刷副本。 - 新加坡主场优势
目前优先录用已具备新加坡合法工作权限的候选人,当地 Web3 友好政策+超低资本利得税+全家医疗覆盖,幸福指数直接拉满。
核心职责:从蓝图到落地的全链路主导
1. 数据仓库建模
- 宏观视角:面向交易、风控、营销 3 大业务域,抽象出 10 层以上维度模型 (ODS → DWD → DWS → ADS)。
- 微观细节:将撮合链路与链上析构日志整合为“毫秒级一致性快照”,保证 DEX 订单簿可被 AI 高频做市算法毫秒调用。
案例:早期模型割裂造成风控延迟 50 ms,导致套利窗口未能及时封堵;重构后延迟压缩至 3 ms,每年挽回千万级“流动性税”。
2. 实时数据管道构建
- 技术线路图
![类比示意] 交易撮合 → Kafka → Flink CEP → Iceberg → StarRocks 秒级可用层 → AI 模型在线推理 - 性能指标
端到端延迟 ≤ 5 秒、 checkpoint 成功率 ≥ 99.99%、乱序数据误差率 ≤ 0.001%。
3. 跨职能协同与团队赋能
- 和工程师:用 Fluent BI 语义层统一数仓元数据,消除“同名不同义”灾难。
- 和财务/法务:引入差异加密/可验证计算,满足监管对敏感交易日志的“可控可见”要求。
- 和算法科学家:将流式特征工程模块化封装,新人可从模板 10 分钟上线一条新特征。
理想画像:我们在寻找怎样的你?
| 必备技能 | 进阶加分 |
|---|---|
| 5 年以上数据仓库架构设计,主导过 ≥100 节点集群 | Solidity 或 Rust 链上数据读取 |
| 深入理解 Flink State Backend & Checkpoint 机制 | 有应用 Iceberg / Delta Lake 跨云迁移经验 |
| 强跨团队沟通,能以“业务 ROI 角度”描述技术方案 | 发表过实时流处理相关专利或顶会 Paper |
职场福利:写在 Offer 之外的幸福
- 薪酬结构:Base + Token 激励双轨,年度总包对标一线互联网 P9。
- 学习补贴:官方覆盖阿里云、Databricks、Confluent 官方认证,最高 5,000 USD/人/年。
- 灵活办公:全球 40+ 办公室可选,居家 + 联合工位组合无上限。
- 家庭关怀:配偶及子女医疗险终身续保,孩子教育津贴每年 10,000 SGD。
场景化案例:一分钟让你读懂“价值”
业务场景:当 BTC 价格在 3 秒内瞬间跳水 8%
传统延迟:报表 T+1 才能发现问题,用户已爆仓。
你的引擎:
- Iceberg 秒级写入最新 Tick;
- 实时风控规则在 Flink 引擎中 50 ms 预警;
- Spot & Futures 产品自动配资熔断,平台零穿仓。
这就是数据工程师给千万级用户带来的“隐形安全气囊”。
常见疑问速答 FAQ
Q1:岗位对区块链经验是否硬性要求?
A:没有硬性壁垒。你只需对链上日志、Merkle Tree、事件 Topic 有基础概念即可;剩下的 OKX 技术学院 2 周带你通关。
Q2:Flink 社区版本更新极快,内部如何跟上节奏?
A:每月一次“源码圆桌”,由 contributor 直接拆解 PR & Ticket,最新特性 4 周内就可在测试集群灰度。
Q3:Token 激励部分如何兑现?
A:季度归属,绑定市值及业务 KPI;已建立第三方托管与实时公示,锁仓机制透明可查。
Q4:团队规模多大?向谁汇报?
A:目前数据平台团队 45 人(6 位架构师、15 位实时流工程师、其余为数据治理与 BI)。你将与世界级数据 VP 双线汇报:一条业务、一条技术。
Q5:英语必须流利吗?
A:邮件与 MR 使用英语,但日常沟通中/英文皆可;公司提供线上商务英语课补贴用不完。
Q6:是否支持 Remote?
A:首年需在新加坡完成 Onboarding,确保与安全、财务、法务高频对接;后续可协商 50% Remote。
申请方式
请将 GitHub / 博客链接与简历合并为一份 PDF,命名格式:Name_DataArchitect_Singapore.pdf,投递至官方邮箱并在主题标注“Web3 数据引擎”。我们在一周内完成技术面邀,与未来的你携手打造数据高度自治的 Web3 新世界!