写点什么

国产 ETL 工具 etl-engine

作者:weigeonlyyou
  • 2023-01-02
    吉林
  • 本文字数:350 字

    阅读完需:约 1 分钟

国产 ETL 工具 etl-engine

什么是 etl-engine

  • 产品由 etl-engine 引擎和 etl-designer 云端设计器及 crontab 调度组成,

  • etl-engine 引擎负责解析 etl 配置文件并执行 etl 任务,

  • etl-designer 云端设计器通过拖拉拽的方式生成 etl-engine 引擎可识别的 etl 任务配置文件,

  • crontab 调度设计器负责按时间周期执行指定的 etl 任务,crontab 调度还提供了查询 etl 任务执行日志功能,

  • 三部分组成了 etl 解决方案,可集成到任意使用场景。

如何使用

run_graph(etl-engine)

  1. 使用手册


github.com/hw2499/etl-engine
复制代码


  1. 命令行执行样本


etl_engine -fileUrl <配置文件> -logLevel trace
复制代码

run_crontab(集成 etl-designer 和 etl-crontab)

  1. 使用手册


github.com/hw2499/etl-engine/wiki/etl-crontab%E8%B0%83%E5%BA%A6
复制代码


  1. 命令行执行样本


etl_crontab -fileUrl <配置文件>
复制代码

如何下载

选择最版本使用


github.com/hw2499/etl-engine/releases
复制代码


用户头像

weigeonlyyou

关注

还未添加个人签名 2022-12-26 加入

还未添加个人简介

评论

发布
暂无评论
国产 ETL 工具 etl-engine_postgresql_weigeonlyyou_InfoQ写作社区