Web studio MCODLAB
企业
有限责任合伙
数据工程师 ID: 253
工作经验:: 超过6年
就业类型: 充分就业
教育程度: 更高
工作时间: 全天
职责
设计,建立和支持数据收集,存储和处理基础设施. 优化ETL流程,以有效处理大数据. 设置和监控数据库 (Data Lakes, Data Warehouses). 开发和支持数据输送系统,以确保数据的完整性和可用性. 处理大量数据并确保系统的高性能. 合作分析师和数据科学团队,以创建易于使用的解决方案. 确保数据质量,设置监控和警报系统.
要求
具有2年数据工程师工作经验. 具有深入的数据库设计和管理知识 (SQL,NoSQL). 具有使用ETL (Airflow,Talend,Apache NiFi) 工具的经验. 具有大数据 (Hadoop,Spark) 的经验. 经验云平台 (AWS,GCP,Azure). 容器和管弦乐 (Docker,Kubernetes) 技能. 了解实时数据处理和集成的原理 (Kafka,RabbitMQ). 能够使用版本管理系统 (Git).
条件
工作在一家领先的科技公司,拥有创新项目. 灵活的时间表和远程工作. 竞争性工资和奖金. 职业发展和认证机会. 参与国际项目和与大型客户合作. 获得先进的技术和设备.
关键技能
ETL 流程
Hadoop