소스 검색

feat:修改删除文件脚本

zhaohaipeng 9 달 전
부모
커밋
8a22804095
1개의 변경된 파일7개의 추가작업 그리고 1개의 파일을 삭제
  1. 7 1
      ad/03_delete_timer_file.sh

+ 7 - 1
ad/03_delete_timer_file.sh

@@ -39,9 +39,15 @@ delete_hdfs_origin_data_5d_ago() {
     FIVE_DAYS_AGO=$(date -d "5 days ago" +%s)
 
 
-    $HADOOP fs -ls $HDFS_DIR | grep '^d' | awk '{print $6, $8}' | while read line
+    $HADOOP fs -ls $origin_data_hdfs_dir | while read line
     do
         echo "${line}"
+        dir=$(echo $line | awk '{print $8}')
+        modified_date=$(echo $line | awk '{print $6}')
+
+        echo "dir=${dir}"
+        echo "modified_date=${modified_date}"
+
     done
 
 }