• 手机版

    扫码体验手机版

  • 微信公众号

    扫码关注公众号

国内首家协议开发

软芯音视解码保护平台

在线
客服

发布
需求

在线
聊天

天盟
APP

天盟APP下载

关注
微信

微信扫一扫访问
顶部

[二次开发] Airflow跑批与项目私有化部署

ak***发布 已通过手机认证
任务编号:519908 悬赏任务10000元 悬赏任务 : 按雇主需求进行任务后提交稿件,被采纳后即获得佣金。

Airflow跑批与项目私有化部署

距截止: 00天00时00分00秒 雇主已托管赏金:10000
雇主发布需求 雇主托管佣金 服务商投稿 雇主开始选稿 任务完成

任务大厅共需1个合格投稿 | 每稿将获得10000| 每人交稿次数不限 可多次任务

投诉举报 联系Ta 我来承接 已有1 个投稿 | 已采纳0 稿 | 拒绝0 稿 | 目前中标名额已满

任务需求:
配合Web端应用开发工程师,实现部分业务的Ariflow任务调度、跑批。

Airflow 任务主要包含三个方面:

文件上传:
airflow里面创建 文件上传 DAG,里面包含1个task,写k8s 的job yaml 并运行 调用OCR的docker image(现有离线镜像)进行计算,并且监控任务状态,任务进度。任务完毕或者失败后更新相应的状态。

场景初始化:
airflow里面创建 场景初始化 DAG,里面包含1个task,写k8s 的job yaml 并运行 调用NER的docker image(现有离线镜像)进行计算,并且监控任务状态,任务进度。任务完毕或者失败后更新相应的状态(将状态同步至业务数据)。

跑批:
airflow里面创建 跑批 DAG,里面包含2个task,第一个task 写k8s 的job yaml 并运行 调用NER的docker image进行计算,并且监控任务状态,任务进度。任务完毕或者失败后更新相应的状态。
第二个task 是根据NER的结果完成规则的计算。并更新数据库状态。

项目私有化部署:
借助 ansible 一键部署至 k8s集群。

精通K8S、Airflow跑批、Docker、私有化部署、ansible。熟悉Python语言。

使用道具 举报

全部参与1

未采纳

使用道具 举报

发新帖

发布任务需求已有1031274位用户正在使用天盟网服务

发布分类: *
任务预算: *
需求内容: *
手机号码: *
任务商家报价为
  • 预算价 :
  • 成交价 :
  • 完工期 :
  • 质保期 :

* 最终任务项目以服务商报价、双方协商为准!