四、Azkaban调度Shell脚本

我会带着你远行 2023-06-03 03:57 16阅读 0赞

需求：通过Azkaban 调用 shell脚本，将当前时间追加到指定目录的date.txt文件中

1、Liux下创建shell脚本

mkdir azkaban_schedule
     cd azkaban_schedule/
     vim shell_az.sh

#!/bin/bash
    date >> /root/azkaban_schedule/date.txt

2、在 Windows 本地编写 Azkaban job 文件 shell\_1.job

type=command
    command=sh /root/azkaban_schedule/shell_az.sh

将 shell\_1.job文件打包成 shell\_1.zip

3、打开Azkaban 的Web客户端

（1）创建 project

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3MyOTQ4NzgzMDQ_size_16_color_FFFFFF_t_70][]

（2）进入创建好的project，将job文件 upload到Azkaban

（3）点击 Excute Flow，然后点击 Schedule，创建定时任务，可以选择距离当前时间最近的分钟

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3MyOTQ4NzgzMDQ_size_16_color_FFFFFF_t_70 1][]

（5）等到指定时间后，去Liux目录下查看是否将date追加到了指定目录下的date.txt文件中

cd /root/azkaban_schedule
    ls
    vim date.txt

显示内容为

Tue Sep 10 02:10:30 PDT 2019

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3MyOTQ4NzgzMDQ_size_16_color_FFFFFF_t_70]: /images/20230601/d5354bee31aa4bd69c533d1b4d9a87df.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3MyOTQ4NzgzMDQ_size_16_color_FFFFFF_t_70 1]: /images/20230601/56cbbccfc27348b88b48f0c182db3c86.png

发表评论取消回复

表情：

评论列表（有 0 条评论，16人围观）

还没有评论，来说两句吧...

相关阅读

相关三、Azkaban调度Shell脚本

求：通过Azkaban 调用 shell脚本，将当前时间追加到指定目录的date.txt文件中 1、Liux下创建shell脚本 mkdir azkaban_...

雨点打透心脏的1/2处/ 2024年04月18日 18:48/ 0 赞/ 91 阅读

相关四、Azkaban调度Shell脚本

需求：通过Azkaban 调用 shell脚本，将当前时间追加到指定目录的date.txt文件中 1、Liux下创建shell脚本 mkdir azkaban_sc

本是古典何须时尚/ 2023年06月03日 03:57/ 0 赞/ 35 阅读

相关四、Azkaban调度Shell脚本

需求：通过Azkaban 调用 shell脚本，将当前时间追加到指定目录的date.txt文件中 1、Liux下创建shell脚本 mkdir azkaban_sc

我会带着你远行/ 2023年06月03日 03:57/ 0 赞/ 17 阅读

相关 Azkaban自动化调度

1、准备执行的SQL文件（扩展名=.sql） 2、上传SQL文件到Azkaban下的自定义目录 /opt/module/azkaban/pg_sqldir 3、创

不念不忘少年蓝@/ 2022年12月22日 09:22/ 0 赞/ 196 阅读

相关工作流调度器azkaban

一、Azkaban概述 `Azkaban`是由`Linkedin`公司推出的一个批量工作流任务调度器，主要用于在一个工作流内以一个特定的顺序运行一组工作和流程，它的配置是

我会带着你远行/ 2022年12月18日 02:56/ 0 赞/ 177 阅读

相关 shell 脚本更新azkaban job

shell 脚本更新azkaban job !/bin/bash set -e zip_name=clear_nginx_logs.zi

深碍√TFBOYSˉ_/ 2022年04月13日 08:58/ 0 赞/ 158 阅读

相关 shell脚本杂记（四）

1，wget是一个用于文件下载的命令行工具，选项繁多且用法灵活，wget可以下载网页或远程文件，命令： wget url \[code="java"\]\ wget htt

心已赠人/ 2022年04月12日 03:09/ 0 赞/ 220 阅读

相关工作调度器Azkaban 01

1. 概述 [Azkaban官网][Azkaban] 1.1 为什么需要工作调度系统一个完整的数据分析系统通常都是由大量任务单元组成： she

小灰灰/ 2022年02月27日 04:37/ 0 赞/ 338 阅读

相关 Shell脚本(四)数组

平时写脚本还没有用到过数组，暂时先记录下用法。 !/bin/bash array1=(1 2 3 4 5) array1_leng

我会带着你远行/ 2022年01月05日 10:45/ 0 赞/ 756 阅读

相关 Azkaban调度全过程

![20200729100519483.png][] 数据处理过程：Oracle通过ogg推到kafka 然后通过公司自研框架从kafka同步到kudu的ods库， ku

妖狐艹你老母/ 2021年07月26日 22:29/ 0 赞/ 399 阅读