Преглед на файлове

feat:添加分析脚本

zhaohaipeng преди 2 месеца
родител
ревизия
6f0b51cb36
променени са 1 файла, в които са добавени 1 реда и са изтрити 0 реда
  1. 1 0
      src/main/scala/com/aliyun/odps/spark/examples/makedata_recsys/makedata_recsys_45_feature_cover_degree.scala

+ 1 - 0
src/main/scala/com/aliyun/odps/spark/examples/makedata_recsys/makedata_recsys_45_feature_cover_degree.scala

@@ -31,6 +31,7 @@ object makedata_recsys_45_feature_cover_degree {
     // 过滤无效数据(以 tab 分割后长度不为 3)
     val validData = data.filter(_.split("\t").length == 3)
     println("问题数据数量:" + (data.count() - validData.count()))
+    println(s"正常数据量: ${validData.count()}")
 
     // 统计 feature 出现且 > 0 的次数
     val featureCounts = validData.map { line =>