数据仓库的sql workload转化成spark

您的位置：首页 > 任务详情

招标模式数据仓库的sql workload转化成spark

雇主：mike
截止时间：2025-02-11
分类：软件开发

¥ 1000

免责声明该外包需求信息来源于站外平台，本站仅提供公开信息部分字段展示与订阅服务，更多请查看免责声明。

立即投稿发布类似任务

任务详情

一，需求描述：现状：现在有一些ETL是跑在GCP BigQuery上，现在需要迁移到Spark上，Spark集群运行在Google Kubernetes Engine。进度: 还在需求确认阶段，哪些需要迁移，哪些不需要功能：需要整合数据源，有文本，csv，json，xml等等。按照sql的逻辑，将etl变成spark，以提升速度。二、人才要求：必须：sql，spark，对spark调优有基础认识三、合作方式：开发方式：远程开发。开发周期：2天