Quellcode durchsuchen

feat:修改定时任务脚本

zhaohaipeng vor 11 Monaten
Ursprung
Commit
7159cc71cf
1 geänderte Dateien mit 8 neuen und 1 gelöschten Zeilen
  1. 8 1
      ad/01_ad_model_update_everyday.sh

+ 8 - 1
ad/01_ad_model_update_everyday.sh

@@ -16,6 +16,10 @@ OSS_PATH=oss://art-recommend.oss-cn-hangzhou.aliyuncs.com/zhangbo/
 max_hour=17
 max_minute=00
 
+export SPARK_HOME=/opt/apps/SPARK2/spark-2.4.8-hadoop3.2-1.0.8
+export PATH=$SPARK_HOME/bin:$PATH
+export HADOOP_CONF_DIR=/etc/taihao-apps/hadoop-conf
+export JAVA_HOME=/usr/lib/jvm/java-1.8.0
 
 # 1 判断依赖的数据表是否生产完成
 source /root/anaconda3/bin/activate py37
@@ -146,4 +150,7 @@ awk -F " " '{
 #fi
 
 # 7.3 本地保存最新的线上使用的模型,用于下一次的AUC验证
-cp ${MODEL_PATH}/${model_name}_${today_early_1}.txt ${MODEL_PATH}/model_online.txt
+cp ${MODEL_PATH}/${model_name}_${today_early_1}.txt ${MODEL_PATH}/model_online.txt
+
+
+# 32 16 * * * cd /root/zhangbo/recommend-emr-dataprocess && /bin/sh ./ad/01_ad_model_update_everyday.sh > logs/01_update_eventday$(date +\%Y-\%m-\%d_\%H).log 2>&1