任务详情
1.岗位概述
我们正在寻找一位经验丰富的区块链数据工程师，负责构建和维护链上数据监控系统，包括多链数据采集、Telegram数据监控、浏览器行为数据清洗等核心功能。该职位将在我们的AI驱动交易系统中发挥关键作用。
2.核心职责
2.1链上数据监控
设计并实现多链（ETH、SOL等主流公链）实时数据监控系统
开发交易事件捕获与解析功能，支持Buy/Sell/Swap/Send/Receive/Mint等操作
构建地址标签管理系统，实现地址到实体名称的映射
监控和分析token价格变动、流动性变化等关键指标
优化数据采集性能，确保低延迟和高可靠性
2.2Telegram数据监控
开发Telegram群组/频道数据抓取系统
实现关键词监控和情感分析功能
构建社交媒体数据与链上数据的关联分析
设计反垃圾信息和数据去重机制
2.3浏览器数据处理
开发Web3浏览器数据采集工具
实现用户行为数据清洗和标准化
构建数据质量监控和异常检测系统
优化数据存储和查询性能
2.4系统集成与优化
与AI推荐系统集成，提供清洗后的高质量数据
建立数据流水线监控和告警机制
优化数据处理流程，提升系统整体性能
参与系统架构设计和技术方案评审
3.任职要求
3.1 必备技能
1-3年以上区块链数据处理或相关经验
精通Python/JavaScript/Go/Java等编程语言
熟悉Ethereum、Solana等主流区块链的数据结构和API
具备Web3.js、ethers.js等区块链开发库使用经验
熟练使用PostgreSQL/MongoDB等数据库
掌握Redis、Kafka等中间件技术
具备RESTful API和WebSocket开发经验
3.2区块链专业要求
深度理解DeFi协议机制（Uniswap、Pancakeswap等）
熟悉智能合约事件监听和交易解析
具备多链数据同步和跨链分析经验
理解gas费用优化和交易时序分析
3.3 数据处理能力
熟练使用pandas、numpy等数据处理库
具备大数据处理经验（Spark/Flink优先）
掌握数据清洗、去重、标准化等技术
了解时间序列数据分析和异常检测
