linux部署kettle增量调度
1.第一步肯定是先把咱们的kettle上传至linux
我是习惯直接把文件夹扔上去,需要解压则上传后解压。
/softdata/data-integration/
2.检查是否安装jdk
java-version
3.上传工程至linux
我是放在这个文件夹下
/softdata/kettle_job/kettle_job_new/bijob
4.编写增量调度脚本
vi bijob_all.sh
echo "java process not exist,run......" source /etc/profile echo 'date'":starting real_time_bi!" today=`date +%y%m%d` echo 'date' /softdata/data-integration/kitchen.sh -file=/softdata/kettle_job/kettle_job_new/bijob/bitotaljob.kjb -level=error -log=/softdata/log/bitotaljob$today.log #file后边跟着的就是需要执行的kjb 之后的也就是日志 echo 'date'":finish real_time_bi!" echo "java process exist,run......"
5.赋予权限
这里有两个地方需要给权限
1.kettle中的kitchen.sh
2.调度脚本以及所有的kjb
chmod -r 777 xxx #将xxx文件夹下所有的文件及文件夹赋予权限
6.定时任务
crontab -e
*/30 * * * * . /softdata/kettle_job/kettle_job_new/bijob/bijob_all.sh
总结
以上为个人经验,希望能给大家一个参考,也希望大家多多支持代码网。
发表评论