{"code":"200","data":{"id":"15096","name":"酷狗大数据开发工程师","setid":"TME02","job_sub_func":"DS","job_function":"T","jobf_descr":"技术类","position_nbr":104408,"position_nbr_descr":"数据工程","work_city_code":"440100","work_city":"广州","need_num":1,"duty":"1. 大数据开发：开展大数据离线、实时数据处理开发工作，涵盖数据采集、清洗、建模、计算等业务场景，完成代码编写、调试与性能优化，保障数据任务高效稳定运行。\n2. 大数据平台建设：重点参与大数据集群全链路日常建设、监控告警、故障排查与调优，协助完成集群部署、扩容、版本升级、资源调度等工作，保障平台7×24小时稳定运行。\n3. PB级数据处理优化：重点参与PB级海量数据整合、计算与存储优化工作，协同解决数据倾斜、任务超时、资源浪费等海量数据场景核心问题，助力提升集群整体数据处理效率与资源利用率。\n4. AI Agent场景落地：结合大数据业务需求，重点参与AI智能体的搭建、调试与流程编排，协助落地智能故障排查、数据异常分析、任务自动化调度等功能，推动大数据平台智能化升级。\n5. 架构迭代与业务支撑：重点参与大数据全链路架构优化升级，梳理数据流程、协助沉淀标准化技术规范；对接业务需求，配合输出技术解决方案，参与攻坚复杂场景下的技术难点，支撑业务数据赋能。","requirement":"1. 3年以上大数据相关工作经验，深度参与过PB级海量数据处理、大型大数据集群建设项目，有中大型企业平台搭建优化经验者优先。\n2. 大数据全栈技术：精通大数据完整技术链路，熟练运用Hadoop、Hive、Spark、Flink、Kafka、HBase、Starrocks等主流组件，精通数据采集、存储、计算、调度、监控全流程原理与实操。\n3. 大数据建设能力：具备扎实的大数据集群建设能力，可独立排查处理集群宕机、任务异常、性能瓶颈等各类线上问题，熟练配合完成集群扩容、权限管理、资源优化等相关工作。\n4. AI Agent应用能力：熟悉AI Agent智能体搭建与场景落地流程，可配合团队完成大数据场景下的智能化改造、自动化运维、智能数据分析等功能落地，有AI+大数据融合项目经验者优先。\n5. 综合技能与素养：熟练掌握SQL、数据建模与数据治理知识，熟悉Linux系统及Shell脚本编写；具备较强的逻辑思维、问题排查与技术攻坚能力。\n6. 基础要求：本科及以上学历，计算机、大数据、人工智能等相关专业优先，工作严谨负责，具备良好的抗压能力与团队协作意识。\n\n有以下任意经验优先\n1. 有PB级集群优化、海量数据治理、实时数仓搭建项目实战经历；\n2. 参与过AI智能运维、大模型+大数据落地相关项目；\n3. 熟悉大数据云原生架构、平台自动化建设体系；\n4. 参与过大数据项目方案设计、落地交付、迭代优化全流程。","status":3,"is_open":true,"deliver_rate":"0：1","date":"1天前","status_descr":"在招","applier_num":0,"company":"","company_set":"酷狗音乐","job_class":["T"],"sub_flag":"","user_status":{"apply":false,"favorite":false,"nickname":"","interest_setid":[],"interest_setid_allocate":1,"is_doctor_lvl":false,"has_resume":false}},"msg":"操作完成"}