config.py 53 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558559560561562563564565566567568569570571572573574575576577578579580581582583584585586587588589590591592593594595596597598599600601602603604605606607608609610611612613614615616617618619620621622623624625626627628629630631632633634635636637638639640641642643644645646647648649650651652653654655656657658659660661662663664665666667668669670671672673674675676677678679680681682683684685686687688689690691692693694695696697698699700701702703704705706707708709710711712713714715716717718719720721722723724725726727728729730731732733734735736737738739740741742743744745746747748749750751752753754755756757758759760761762763764765766767768769770771772773774775776777778779780781782783784785786787788789790791792793794795796797798799800801802803804805806807808809810811812813814815816817818819820821822823824825826827828829830831832833834835836837838839840841842843844845846847848849850851852853854855856857858859860861862863864865866867868869870871872873874875876877878879880881882883884885886887888889890891892893894895896897898899900901902903904905906907908909910911912913914915916917918919920921922923924925926927928929930931932933934935936937938939940941942943944945946947948949950951952953954955956957958959960961962963964965966967968969970971972973974975976977978979980981982983984985986987988989990991992993994995996997998999100010011002100310041005100610071008100910101011101210131014101510161017101810191020102110221023102410251026102710281029103010311032103310341035103610371038103910401041104210431044104510461047104810491050105110521053105410551056105710581059106010611062106310641065106610671068106910701071107210731074107510761077107810791080108110821083108410851086108710881089109010911092109310941095109610971098109911001101110211031104110511061107
  1. # coding:utf-8
  2. import os
  3. # from log import Log
  4. # log_ = Log()
  5. class BaseConfig(object):
  6. # 产品标识
  7. APP_TYPE = {
  8. 'VLOG': 0, # vlog
  9. 'LOVE_LIVE': 4, # 票圈视频
  10. 'LONG_VIDEO': 5, # 内容精选
  11. 'SHORT_VIDEO': 6, # 票圈短视频
  12. 'WAN_NENG_VIDEO': 17, # 万能影视屋
  13. 'LAO_HAO_KAN_VIDEO': 18, # 老好看视频
  14. 'ZUI_JING_QI': 19, # 票圈最惊奇
  15. 'APP': 13, # 票圈视频APP
  16. 'PIAO_QUAN_VIDEO_PLUS': 21, # 票圈视频+
  17. }
  18. # 数据存放路径
  19. DATA_DIR_PATH = './data'
  20. # oss 目标Bucket
  21. BUCKET_NAME = 'ali-recommend'
  22. # ODPS服务配置
  23. ODPS_CONFIG = {
  24. 'ENDPOINT': 'http://service.cn.maxcompute.aliyun.com/api',
  25. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  26. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  27. }
  28. # 飞书机器人配置
  29. FEISHU_ROBOT = {
  30. 'server_robot': {
  31. # webhook地址
  32. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/8de4de35-30ed-4692-8854-7a154e89b2f2',
  33. # 自定义关键词key_word
  34. 'key_word': '服务报警'
  35. },
  36. 'feature_monitor_robot': {
  37. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/0ca66b89-5e2b-4e89-a04a-a01fda31cc89',
  38. 'key_word': 'ROV特征监控'
  39. }
  40. }
  41. # 训练数据截止时间距当前日期间隔天数
  42. TRAIN_DIFF = 7
  43. # 训练数据所需数据范围天数
  44. TRAIN_DELTA_DAYS = 30
  45. # 训练数据表名
  46. TRAIN_PROJECT = 'usercdm'
  47. TRAIN_TABLE = 'rov_feature_add_v1'
  48. # 训练数据文件存放路径
  49. TRAIN_DATA_FILENAME = 'train_data.pickle'
  50. # 预测数据截止时间距当前日期间隔天数
  51. PREDICT_DIFF = 1
  52. # 预测数据所需数据范围天数
  53. PREDICT_DELTA_DAYS = 1
  54. # 预测数据表名
  55. PREDICT_PROJECT = 'usercdm'
  56. PREDICT_TABLE = 'rov_predict_table_add_v1'
  57. # 预测数据文件存放路径
  58. PREDICT_DATA_FILENAME = 'predict_data.pickle'
  59. # 模型存放文件
  60. MODEL_FILENAME = 'model.pickle'
  61. # 运营给定App小时级更新数据表名
  62. APP_OP_PROJECT = 'loghubods'
  63. APP_OP_TABLE = 'category_video_list_test1'
  64. # 小程序小时级规则参数
  65. RULE_PARAMS = {
  66. # 'rule1': {'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  67. # 'rule2': {'return_count': 20, 'score_rule': 0.001}, # 下线
  68. # 'rule3': {'view_type': 'pre-view', 'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  69. # 'rule4': {'cal_score_func': 2, 'return_count': 20, 'score_rule': 0}, # 下线
  70. # 'rule5': {'cal_score_func': 3, 'return_count': 20, 'score_rule': 0}, # 下线
  71. 'rule6': {'view_type': 'video-show', 'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  72. }
  73. # app_type: [18, 19]预测表名
  74. PREDICT_PROJECT_18_19 = {
  75. '18': 'loghubods', # 老好看
  76. '19': 'loghubods', # 最惊奇
  77. }
  78. PREDICT_TABLE_18_19 = {
  79. '18': 'haokan_video_list_each_hour_update', # 老好看
  80. '19': 'amazed_video_list_each_hour_update', # 最惊奇
  81. }
  82. # 预测数据文件存放路径
  83. PREDICT_DATA_FILENAME_18_19 = {
  84. '18': 'predict_data_18.pickle',
  85. '19': 'predict_data_19.pickle'
  86. }
  87. # 天级规则更新使用数据
  88. PROJECT_DAY = 'loghubods'
  89. TABLE_DAY = 'video_data_each_day_dataset'
  90. # 小程序天级规则参数
  91. RULE_PARAMS_DAY = {
  92. # 'rule1': {'return_count': 200},
  93. 'rule2': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001},
  94. }
  95. REGION_CODE = {
  96. '北京': '110000', '天津': '120000', '河北省': '130000', '山西省': '140000', '内蒙古': '150000',
  97. '辽宁省': '210000', '吉林省': '220000', '黑龙江省': '230000',
  98. '上海': '310000', '江苏省': '320000', '浙江省': '330000', '安徽省': '340000', '福建省': '350000', '江西省': '360000', '山东省': '370000',
  99. '河南省': '410000', '湖北省': '420000', '湖南省': '430000', '广东省': '440000', '广西': '450000', '海南省': '460000',
  100. '重庆': '500000', '四川省': '510000', '贵州省': '520000', '云南省': '530000', '西藏': '540000',
  101. '陕西省': '610000', '甘肃省': '620000', '青海省': '630000', '宁夏': '640000', '新疆': '650000',
  102. '台湾省': '710000', '香港': '810000', '澳门': '820000',
  103. 'None': '-1'
  104. }
  105. CITY_CODE = {
  106. '广州': '440100', '深圳': '440300', '成都': '510100',
  107. }
  108. REGION_CITY_MAPPING = {
  109. REGION_CODE['广东省']: [CITY_CODE['广州'], CITY_CODE['深圳'], ],
  110. REGION_CODE['四川省']: [CITY_CODE['成都'], ]
  111. }
  112. # 地域分组天级规则更新使用数据
  113. PROJECT_REGION_DAY = 'loghubods'
  114. TABLE_REGION_DAY = 'video_each_day_update_province'
  115. # 地域分组天级规则参数
  116. RULE_PARAMS_REGION_DAY = {
  117. 'rule1': {'view_type': 'pre-view', 'return_count': 21, 'score_rule': 0},
  118. }
  119. # ##### 区分appType数据
  120. DATA_PARAMS = {
  121. 'data1': {APP_TYPE['VLOG']: 0}, # vlog
  122. 'data2': {APP_TYPE['VLOG']: 0.5, APP_TYPE['LONG_VIDEO']: 0.5}, # [vlog, 内容精选]
  123. 'data3': {APP_TYPE['VLOG']: 0.5, APP_TYPE['LOVE_LIVE']: 0.5}, # [vlog, 票圈视频]
  124. 'data4': {APP_TYPE['VLOG']: 0.5, APP_TYPE['SHORT_VIDEO']: 0.5}, # [vlog, 票圈短视频]
  125. # 'data5': [APP_TYPE['VLOG'], APP_TYPE['ZUI_JING_QI']], # [vlog, 最惊奇]
  126. 'data6': {APP_TYPE['VLOG']: 0.25, APP_TYPE['LOVE_LIVE']: 0.25, APP_TYPE['SHORT_VIDEO']: 0.25,
  127. APP_TYPE['LONG_VIDEO']: 0.25},
  128. 'data7': {APP_TYPE['VLOG']: 0.5, APP_TYPE['APP']: 0.5}, # [vlog, 票圈视频APP]
  129. 'data8': {APP_TYPE['VLOG']: 0.7, APP_TYPE['LONG_VIDEO']: 0.3}, # [vlog, 内容精选]
  130. 'data9': {APP_TYPE['VLOG']: 0.3, APP_TYPE['LONG_VIDEO']: 0.7}, # [vlog, 内容精选]
  131. 'data10': {APP_TYPE['VLOG']: 0.2, APP_TYPE['LOVE_LIVE']: 0.8}, # [vlog, 票圈视频]
  132. 'data11': {APP_TYPE['VLOG']: 0.3, APP_TYPE['LOVE_LIVE']: 0.7}, # [vlog, 票圈视频]
  133. 'data12': {APP_TYPE['VLOG']: 0.4, APP_TYPE['SHORT_VIDEO']: 0.6}, # [vlog, 票圈短视频]
  134. 'data13': {APP_TYPE['VLOG']: 0.3, APP_TYPE['SHORT_VIDEO']: 0.7}, # [vlog, 票圈短视频]
  135. 'data14': {APP_TYPE['VLOG']: 0.78, APP_TYPE['LOVE_LIVE']: 0.11, APP_TYPE['SHORT_VIDEO']: 0.08,
  136. APP_TYPE['LONG_VIDEO']: 0.03},
  137. }
  138. # 小时级更新过去48h数据 loghubods.video_data_each_hour_dataset_48h_total_apptype
  139. PROJECT_48H_APP_TYPE = 'loghubods'
  140. TABLE_48H_APP_TYPE = 'video_data_each_hour_dataset_48h_total_apptype'
  141. # 小时级更新过去48h数据规则参数
  142. RULE_PARAMS_48H_APP_TYPE = {
  143. 'rule_params': {
  144. 'rule1': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001, 'view_type': 'preview'},
  145. },
  146. 'data_params': {
  147. 'data1': [APP_TYPE['VLOG'], ],
  148. },
  149. 'params_list': [
  150. {'data': 'data1', 'rule': 'rule1'},
  151. ],
  152. }
  153. # 天级更新过去30天数据 loghubods.video_data_30days_dataset_total_apptype
  154. PROJECT_30DAY_APP_TYPE = 'loghubods'
  155. TABLE_30DAY_APP_TYPE = 'video_data_30days_dataset_total_apptype'
  156. # 天级更新过去30天数据规则参数
  157. RULE_PARAMS_30DAY_APP_TYPE = {
  158. 'rule_params': {
  159. 'rule1': {'top': 500, 'view_type': 'preview'},
  160. },
  161. 'data_params': DATA_PARAMS,
  162. 'params_list': [
  163. {'data': 'data1', 'rule': 'rule1'},
  164. ]
  165. }
  166. # 小时级更新过去24h数据 loghubods.video_data_each_hour_dataset_24h_total_apptype
  167. PROJECT_24H_APP_TYPE = 'loghubods'
  168. TABLE_24H_APP_TYPE = 'video_data_each_hour_dataset_24h_total_apptype'
  169. # 小时级更新过去24h数据规则参数
  170. RULE_PARAMS_24H_APP_TYPE = {
  171. 'rule_params': {
  172. 'rule3': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001,
  173. 'view_type': 'preview'},
  174. 'rule4': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001,
  175. 'view_type': 'preview', 'merge_func': 2},
  176. # # 无回流人群
  177. # 'rule5': {'return_count': 100, 'platform_return_rate': 0.001,
  178. # 'view_type': 'preview', 'click_score_rate': 0.7},
  179. # 'rule7': {'return_count': 100, 'platform_return_rate': 0.001,
  180. # 'view_type': 'preview', 'click_score_rate': 0.8},
  181. # # 有回流人群
  182. # 'rule6': {'return_count': 100, 'platform_return_rate': 0.001,
  183. # 'view_type': 'preview', 'back_score_rate': 0.7},
  184. # 'rule8': {'return_count': 100, 'platform_return_rate': 0.001,
  185. # 'view_type': 'preview', 'back_score_rate': 0.8},
  186. },
  187. 'data_params': DATA_PARAMS,
  188. 'params_list': [
  189. {'data': 'data1', 'rule': 'rule3', 'notify_backend': True},
  190. # {'data': 'data2', 'rule': 'rule3'},
  191. {'data': 'data2', 'rule': 'rule4'},
  192. # {'data': 'data3', 'rule': 'rule4'},
  193. # {'data': 'data4', 'rule': 'rule4'},
  194. # {'data': 'data6', 'rule': 'rule4'},
  195. {'data': 'data7', 'rule': 'rule4'},
  196. # {'data': 'data1', 'rule': 'rule5'},
  197. # {'data': 'data1', 'rule': 'rule6'},
  198. # {'data': 'data8', 'rule': 'rule4'},
  199. # {'data': 'data9', 'rule': 'rule4'},
  200. {'data': 'data10', 'rule': 'rule4'},
  201. # {'data': 'data11', 'rule': 'rule4'},
  202. # {'data': 'data12', 'rule': 'rule4'},
  203. # {'data': 'data13', 'rule': 'rule4'},
  204. # # {'data': 'data14', 'rule': 'rule4'},
  205. # {'data': 'data1', 'rule': 'rule7'},
  206. # {'data': 'data1', 'rule': 'rule8'},
  207. ]
  208. }
  209. # 地域分组小时级更新24h使用数据 loghubods.video_each_day_update_province_24h_total_apptype
  210. PROJECT_REGION_24H_APP_TYPE = 'loghubods'
  211. TABLE_REGION_24H_APP_TYPE = 'video_each_day_update_province_24h_total_apptype'
  212. # 地域分组小时级更新24h规则参数
  213. RULE_PARAMS_REGION_24H_APP_TYPE = {
  214. 'rule_params': {
  215. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  216. 'platform_return_rate': 0.001},
  217. # 'rule3': {'view_type': 'preview', 'return_count': 21, 'score_rule': 0,
  218. # 'platform_return_rate': 0.001},
  219. 'rule4': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  220. 'platform_return_rate': 0.001, 'merge_func': 2},
  221. 'rule5': {'view_type': 'preview', 'return_count': 21, 'score_rule': 0,
  222. 'platform_return_rate': 0.001, 'merge_func': 2},
  223. # # 无回流人群
  224. # 'rule6': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  225. # 'platform_return_rate': 0.001, 'click_score_rate': 0.7},
  226. # 'rule8': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  227. # 'platform_return_rate': 0.001, 'click_score_rate': 0.8},
  228. # # 有回流人群
  229. # 'rule7': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  230. # 'platform_return_rate': 0.001, 'back_score_rate': 0.7},
  231. # 'rule9': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  232. # 'platform_return_rate': 0.001, 'back_score_rate': 0.8},
  233. },
  234. 'data_params': DATA_PARAMS,
  235. 'params_list': [
  236. {'data': 'data1', 'rule': 'rule2'},
  237. # {'data': 'data2', 'rule': 'rule2'},
  238. {'data': 'data2', 'rule': 'rule4'},
  239. # {'data': 'data3', 'rule': 'rule4'},
  240. # {'data': 'data4', 'rule': 'rule4'},
  241. # {'data': 'data6', 'rule': 'rule4'},
  242. {'data': 'data7', 'rule': 'rule5'},
  243. # {'data': 'data1', 'rule': 'rule6'},
  244. # {'data': 'data1', 'rule': 'rule7'},
  245. # {'data': 'data8', 'rule': 'rule4'},
  246. # {'data': 'data9', 'rule': 'rule4'},
  247. {'data': 'data10', 'rule': 'rule4'},
  248. # {'data': 'data11', 'rule': 'rule4'},
  249. # {'data': 'data12', 'rule': 'rule4'},
  250. # {'data': 'data13', 'rule': 'rule4'},
  251. # {'data': 'data14', 'rule': 'rule4'},
  252. # {'data': 'data1', 'rule': 'rule8'},
  253. # {'data': 'data1', 'rule': 'rule9'},
  254. ]
  255. }
  256. # 地域分组小时级规则更新使用数据
  257. PROJECT_REGION_APP_TYPE = 'loghubods'
  258. TABLE_REGION_APP_TYPE = 'video_each_hour_update_province_apptype'
  259. # 地域分组小时级规则参数
  260. RULE_PARAMS_REGION_APP_TYPE = {
  261. 'rule_params': {
  262. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  263. # 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  264. # 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  265. 'rule4': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  266. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3'},
  267. # 涉政视频过滤
  268. 'rule4-1': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  269. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', 'political_filter': True},
  270. # 'rule6': {'view_type': 'preview', 'platform_return_rate': 0.001,
  271. # 'region_24h_rule_key': 'rule3', '24h_rule_key': 'rule2'},
  272. 'rule7': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  273. 'region_24h_rule_key': 'rule4', '24h_rule_key': 'rule4', 'merge_func': 2},
  274. 'rule7-1': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  275. 'region_24h_rule_key': 'rule4', '24h_rule_key': 'rule4', 'merge_func': 2,
  276. 'political_filter': True},
  277. 'rule8': {'view_type': 'preview', 'platform_return_rate': 0.001,
  278. 'region_24h_rule_key': 'rule5', '24h_rule_key': 'rule4', 'merge_func': 2},
  279. # 'rule9': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  280. # 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', '30day_rule_key': 'rule1'},
  281. # # 无回流人群
  282. # 'rule10': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  283. # 'region_24h_rule_key': 'rule6', '24h_rule_key': 'rule5', 'click_score_rate': 0.7},
  284. # 'rule13': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  285. # 'region_24h_rule_key': 'rule8', '24h_rule_key': 'rule7', 'click_score_rate': 0.8},
  286. # # 有回流人群
  287. # 'rule11': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  288. # 'region_24h_rule_key': 'rule7', '24h_rule_key': 'rule6', 'back_score_rate': 0.7},
  289. # 'rule14': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  290. # 'region_24h_rule_key': 'rule9', '24h_rule_key': 'rule8', 'back_score_rate': 0.8},
  291. # # 20点地域小时级列表中增加7点-19点地域小时级的优质视频
  292. # 'rule12': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  293. # 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', 'add_videos_in_20h': True},
  294. # 地域小时级列表中增加 前6小时 地域小时级的优质视频
  295. 'rule15': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  296. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', 'add_videos_with_pre6h': True},
  297. },
  298. 'data_params': DATA_PARAMS,
  299. 'params_list': [
  300. {'data': 'data1', 'rule': 'rule4'}, # 095 vlog
  301. {'data': 'data1', 'rule': 'rule4-1'}, # 095-1
  302. # {'data': 'data2', 'rule': 'rule4'},
  303. {'data': 'data2', 'rule': 'rule7-1'}, # 121 内容精选
  304. # {'data': 'data3', 'rule': 'rule7'},
  305. # {'data': 'data4', 'rule': 'rule7'},
  306. # {'data': 'data6', 'rule': 'rule7'},
  307. {'data': 'data7', 'rule': 'rule8'}, # 票圈视频APP 10003.110156
  308. # {'data': 'data1', 'rule': 'rule9'},
  309. # {'data': 'data1', 'rule': 'rule10'},
  310. # {'data': 'data1', 'rule': 'rule11'},
  311. # {'data': 'data8', 'rule': 'rule7'},
  312. # {'data': 'data9', 'rule': 'rule7'},
  313. {'data': 'data10', 'rule': 'rule7'}, # 144 票圈视频
  314. # {'data': 'data11', 'rule': 'rule7'},
  315. # {'data': 'data12', 'rule': 'rule7'},
  316. # {'data': 'data13', 'rule': 'rule7'},
  317. # {'data': 'data1', 'rule': 'rule12'},
  318. # {'data': 'data14', 'rule': 'rule7'}, # 159
  319. # {'data': 'data1', 'rule': 'rule13'}, # 161
  320. # {'data': 'data1', 'rule': 'rule14'}, # 162
  321. {'data': 'data1', 'rule': 'rule15'}, # 200 vlog
  322. ],
  323. }
  324. # 老好看宗教实验数据
  325. LHK_RULE_PARAMS = {'data': 'lhk_data', 'rule': 'lhk_rule'}
  326. # 不区分地域数据使用相对48h数据
  327. RULE_PARAMS_REGION_APP_TYPE_48H = {
  328. 'rule_params': {
  329. 'rule5': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  330. 'region_24h_rule_key': 'rule2', '48h_rule_key': 'rule1'},
  331. },
  332. 'data_params': {
  333. 'data1': [APP_TYPE['VLOG'], ],
  334. },
  335. 'params_list': [
  336. {'data': 'data1', 'rule': 'rule5'},
  337. ],
  338. }
  339. # 老视频更新使用数据
  340. OLD_VIDEOS_PROJECT = 'loghubods'
  341. OLD_VIDEOS_TABLE = 'xcx_test_video'
  342. # 完整电影更新使用数据
  343. WHOLE_MOVIES_PROJECT = 'loghubods'
  344. WHOLE_MOVIES_TABLE = 'whole_movies'
  345. # 完整影视资源更新结果存放 redis key 前缀,完整格式:'com.weiqu.video.recall.whole.movies.item.{date}.{h}'
  346. RECALL_KEY_NAME_PREFIX_WHOLE_MOVIES = 'com.weiqu.video.recall.whole.movies.item.'
  347. # 小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:rov:applet:{date}
  348. RECALL_KEY_NAME_PREFIX = 'recall:item:score:rov:applet:'
  349. # 小程序小时级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.h.{rule_key}.{date}.{h}
  350. RECALL_KEY_NAME_PREFIX_BY_H = 'com.weiqu.video.recall.item.score.h.'
  351. # 小程序相对24h数据更新结果与 小程序小时级更新结果 去重后 存放 redis key前缀,
  352. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.24h.h.{rule_key}.{date}.{h}
  353. RECALL_KEY_NAME_PREFIX_DUP_24H_H = 'com.weiqu.video.recall.hot.item.score.dup.24h.h.'
  354. # 小程序离线ROV模型结果与 小程序小时级更新结果/小程序相对24h数据更新结果 去重后 存放 redis key前缀,
  355. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.h.{rule_key}.{date}.{h}
  356. RECALL_KEY_NAME_PREFIX_DUP_H = 'com.weiqu.video.recall.hot.item.score.dup.h.'
  357. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.{rule_key}
  358. H_VIDEO_FILER = 'com.weiqu.video.filter.h.item.'
  359. # 小程序天级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.day.{rule_key}.{date}
  360. RECALL_KEY_NAME_PREFIX_BY_DAY = 'com.weiqu.video.recall.item.score.day.'
  361. # 小程序离线ROV模型结果与小程序天级更新结果去重后 存放 redis key前缀,
  362. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.day.now.{rule_key}.{date}
  363. RECALL_KEY_NAME_PREFIX_DUP_DAY_NOW = 'com.weiqu.video.recall.hot.item.score.dup.day.now.'
  364. # 使用前一天小程序离线ROV模型结果与小程序天级更新结果去重后 存放 redis key前缀,
  365. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.day.pre.{rule_key}.{date}
  366. RECALL_KEY_NAME_PREFIX_DUP_DAY_PRE = 'com.weiqu.video.recall.hot.item.score.dup.day.pre.'
  367. # 小程序小时级48h数据更新结果存放 redis key前缀,
  368. # 完整格式:recall:item:score:48h:{data_key}:{rule_key}:{date}:{h}
  369. RECALL_KEY_NAME_PREFIX_BY_48H = 'recall:item:score:48h:'
  370. # 小程序小时级48h数据 筛选后的剩余数据 更新结果存放 redis key前缀,
  371. # 完整格式:recall:item:score:48h:other:{data_key}:{rule_key}:{date}:{h}
  372. RECALL_KEY_NAME_PREFIX_BY_48H_OTHER = 'recall:item:score:48h:other:'
  373. # 小程序小时级24h数据更新结果存放 redis key前缀,
  374. # 完整格式:recall:item:score:24h:{data_key}:{rule_key}:{date}:{h}
  375. RECALL_KEY_NAME_PREFIX_BY_24H = 'recall:item:score:24h:'
  376. # 小程序小时级24h数据 筛选后的剩余数据 更新结果存放 redis key前缀,
  377. # 完整格式:recall:item:score:24h:other:{data_key}:{rule_key}:{date}:{h}
  378. RECALL_KEY_NAME_PREFIX_BY_24H_OTHER = 'recall:item:score:24h:other:'
  379. # 小程序离线ROV模型结果与小程序小时级24h更新结果去重后 存放 redis key前缀,
  380. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.24h.{rule_key}.{date}.{h}
  381. RECALL_KEY_NAME_PREFIX_DUP_24H = 'com.weiqu.video.recall.hot.item.score.dup.24h.'
  382. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.apptype.h.item.24h.{appType}.{data_key}.{rule_key}
  383. H_VIDEO_FILER_24H = 'com.weiqu.video.filter.apptype.h.item.24h.'
  384. # 小程序相对30天数据天级更新结果存放 redis key前缀,
  385. # 完整格式:recall:item:score:30day:{data_key}:{rule_key}:{date}
  386. RECALL_KEY_NAME_PREFIX_30DAY = 'recall:item:score:30day:'
  387. # 小程序地域分组小时级更新结果存放 redis key前缀,
  388. # 完整格式:recall:item:score:region:h:{region}:{data_key}:{rule_key}:{date}:{h}
  389. RECALL_KEY_NAME_PREFIX_REGION_BY_H = 'recall:item:score:region:h:'
  390. # 小程序地域分组天级更新结果与小程序地域分组小时级更新结果去重后 存放 redis key前缀,
  391. # 完整格式:com.weiqu.video.recall.hot.item.score.dup1.region.day.h.{region}.{rule_key}.{date}.{h}
  392. RECALL_KEY_NAME_PREFIX_DUP1_REGION_DAY_H = 'com.weiqu.video.recall.hot.item.score.dup1.region.day.h.'
  393. # 小程序地域分组小时级更新24h结果与小程序地域分组小时级更新结果去重后 存放 redis key前缀,
  394. # 完整格式:recall:item:score:region:dup1:region24h:{region}:{data_key}:{rule_key}:{date}:{h}
  395. RECALL_KEY_NAME_PREFIX_DUP1_REGION_24H_H = 'recall:item:score:region:dup1:region24h:'
  396. # 小程序天级更新结果与 小程序地域分组天级更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  397. # 完整格式:com.weiqu.video.recall.hot.item.score.dup2.region.day.h.{region}.{rule_key}.{date}.{h}
  398. RECALL_KEY_NAME_PREFIX_DUP2_REGION_DAY_H = 'com.weiqu.video.recall.hot.item.score.dup2.region.day.h.'
  399. # 小程序24h更新结果与 小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  400. # 完整格式:recall:item:score:region:dup2:24h:{region}:{data_key}:{rule_key}:{date}:{h}
  401. RECALL_KEY_NAME_PREFIX_DUP2_REGION_24H_H = 'recall:item:score:region:dup2:24h:'
  402. # 小程序小时级24h数据 筛选后的剩余数据 更新结果 与 小程序24h更新结果/小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  403. # 完整格式:recall:item:score:region:dup3:24h:{region}:{data_key}:{rule_key}:{date}:{h}
  404. RECALL_KEY_NAME_PREFIX_DUP3_REGION_24H_H = 'recall:item:score:region:dup3:24h:'
  405. # 小程序48h更新结果与 小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  406. # 完整格式:recall:item:score:region:dup2:48h:{region}:{data_key}:{rule_key}:{date}:{h}
  407. RECALL_KEY_NAME_PREFIX_DUP2_REGION_48H_H = 'recall:item:score:region:dup2:48h:'
  408. # 小程序小时级48h数据 筛选后的剩余数据 更新结果 与 小程序48h更新结果/小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  409. # 完整格式:recall:item:score:region:dup3:48h:{region}:{data_key}:{rule_key}:{date}:{h}
  410. RECALL_KEY_NAME_PREFIX_DUP3_REGION_48H_H = 'recall:item:score:region:dup3:48h:'
  411. # 小程序离线ROV模型结果与 小程序天级更新结果/小程序地域分组天级更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  412. # 完整格式:recall:item:score:region:dup4:rov:{region}:{data_key}:{rule_key}:{date}:{h}
  413. RECALL_KEY_NAME_PREFIX_DUP_REGION_H = 'recall:item:score:region:dup4:rov:'
  414. # 地域分组小时级视频状态不符合推荐要求的列表 redis key,
  415. # 完整格式:com.weiqu.video.filter.apptype.region.h.item.{region}.{appType}.{data_key}.{rule_key}
  416. REGION_H_VIDEO_FILER = 'com.weiqu.video.filter.apptype.region.h.item.'
  417. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.24h.{region}.{rule_key}
  418. # H_VIDEO_FILER_24H = 'com.weiqu.video.filter.h.item.24h.'
  419. # 小程序地域分组天级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.region.day.{region}.{rule_key}.{date}
  420. RECALL_KEY_NAME_PREFIX_REGION_BY_DAY = 'com.weiqu.video.recall.item.score.region.day.'
  421. # 小程序地域分组小时级更新24h结果存放 redis key前缀,
  422. # 完整格式:recall:item:score:region:24h:{region}:{data_key}:{rule_key}:{date}:{h}
  423. RECALL_KEY_NAME_PREFIX_REGION_BY_24H = 'recall:item:score:region:24h:'
  424. # 小程序天级更新结果与 小程序地域分组小时级更新24h结果 去重后 存放 redis key前缀,
  425. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.region.day.24h.{region}.{rule_key}.{date}.{h}
  426. RECALL_KEY_NAME_PREFIX_DUP_REGION_DAY_24H = 'com.weiqu.video.recall.hot.item.score.dup.region.day.24h.'
  427. # 小程序离线ROV模型结果与 小程序天级更新结果/小程序地域分组小时级更新24h结果 去重后 存放 redis key前缀,
  428. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.region.24h.{region}.{rule_key}.{date}.{h}
  429. RECALL_KEY_NAME_PREFIX_DUP_REGION_24H = 'com.weiqu.video.recall.hot.item.score.dup.region.24h.'
  430. # 地域分组小时级更新24h视频状态不符合推荐要求的列表 redis key,
  431. # 完整格式:com.weiqu.video.filter.apptype.region.h.item.24h.{region}.{appType}.{data_key}.{rule_key}
  432. REGION_H_VIDEO_FILER_24H = 'com.weiqu.video.filter.apptype.region.h.item.24h.'
  433. # 小程序老视频更新结果存放 redis key 前缀,完整格式:'com.weiqu.video.recall.old.item.{date}'
  434. RECALL_KEY_NAME_PREFIX_OLD_VIDEOS = 'com.weiqu.video.recall.old.item.'
  435. # app应用 小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:rov:app:{date}
  436. RECALL_KEY_NAME_PREFIX_APP = 'recall:item:score:rov:app:'
  437. # app应用 运营提供的小时级数据存放 redis key前缀,完整格式:com.weiqu.video.app.op.item.score.{date}.{h}
  438. APP_OP_VIDEOS_KEY_NAME_PREFIX = 'com.weiqu.video.app.op.item.score.'
  439. # app应用 小时级数据更新最终结果存放 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.app.{date}.{h}
  440. APP_FINAL_RECALL_KEY_NAME_PREFIX = 'com.weiqu.video.recall.hot.item.score.app.'
  441. # appType:[18, 19]小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:{appType}:{date}:{h}
  442. RECALL_KEY_NAME_PREFIX_APP_TYPE = 'recall:item:score:'
  443. # appType = 6, ROV召回池redis key前缀,完整格式:com.weiqu.video.recall.hot.apptype.h.item.score.{appType}.{h}
  444. # RECALL_KEY_NAME_PREFIX_APP_TYPE = 'com.weiqu.video.recall.hot.apptype.h.item.score.'
  445. # 流量池离线模型结果存放 redis key前缀,完整格式 flow:pool:item:score:{appType}
  446. FLOWPOOL_KEY_NAME_PREFIX = 'flow:pool:item:score:'
  447. # 快速曝光流量池数据存放 redis key前缀,完整格式 flow:pool:quick:item:score:{appType}:{flowPool_id}
  448. QUICK_FLOWPOOL_KEY_NAME_PREFIX = 'flow:pool:quick:item:score:'
  449. # 快速曝光流量池分发概率 redis key前缀,完整格式 flow:pool:quick:distribute:rate:{flowPool_id}
  450. QUICK_FLOWPOOL_DISTRIBUTE_RATE_KEY_NAME_PREFIX = 'flow:pool:quick:distribute:rate:'
  451. # 本地记录视频的可分发数,控制分发,完整key格式:flow:pool:local:distribute:count:{videoId}:{flowPool}
  452. LOCAL_DISTRIBUTE_COUNT_PREFIX = 'flow:pool:local:distribute:count:'
  453. # 兜底视频redis存储key
  454. BOTTOM_KEY_NAME = 'bottom:videos'
  455. # 兜底视频数量
  456. BOTTOM_NUM = 1000
  457. # 首页兜底视频json存储 redis-key
  458. BOTTOM_JSON_KEY_NAME = 'com.weiqu.video.homepage.bottom.info.json.item'
  459. # 兜底视频redis存储key-方案2:采用流量池视频作为兜底视频
  460. BOTTOM2_KEY_NAME = 'bottom2:videos'
  461. # 修改ROV的视频 redis key
  462. UPDATE_ROV_KEY_NAME = 'update:rov:item:score:applet'
  463. UPDATE_ROV_KEY_NAME_APP = 'update:rov:item:score:app'
  464. # 生效中的置顶视频列表 redis key
  465. TOP_VIDEO_LIST_KEY_NAME = 'top:item:score:area:applet'
  466. TOP_VIDEO_LIST_KEY_NAME_APP = 'top:item:score:area:app'
  467. # rovScore公差
  468. ROV_SCORE_D = 0.001
  469. # width : height > 1 的视频列表 redis key, zset存储,value为videoId,score为w_h_rate
  470. W_H_RATE_UP_1_VIDEO_LIST_KEY_NAME = {
  471. 'rov_recall': 'com.weiqu.video.rov.w.h.rate.1.item', # rov召回池视频
  472. 'bottom_last': 'com.weiqu.video.bottom.last.w.h.rate.1.item' # 二次兜底视频
  473. }
  474. # 头部视频对应运营强插的相关视频 redis 存储 key 前缀, 完整key格式:com.weiqu.video.relevant.videos.item.{videoId}
  475. RELEVANT_VIDEOS_WITH_OP_KEY_NAME = 'com.weiqu.video.relevant.videos.item.'
  476. # 有设置运营强插相关视频的头部视频id redis存储key
  477. RELEVANT_TOP_VIDEOS_KEY_NAME = 'com.weiqu.video.relevant.top.video_ids'
  478. # 按位置排序redis存储key
  479. RECALL_POSITION1_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.1'
  480. RECALL_POSITION2_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.2'
  481. SIM_N_19 = 4
  482. # 最惊奇电影类视频相关推荐列表存放 redis key前缀,完整格式: com.weiqu.movie.relevant.list.item.{videoId}
  483. MOVIE_RELEVANT_LIST_KEY_NAME_PREFIX = 'com.weiqu.movie.relevant.list.item.'
  484. # 特殊mid 及 指定视频 数据
  485. SPECIAL_MID_VIDEOS_PROJECT = {
  486. 'mid': 'loghubods',
  487. 'videos': 'loghubods'
  488. }
  489. SPECIAL_MID_VIDEOS_TABLE = {
  490. 'mid': 'shielded_mid',
  491. 'videos': 'shielded_video_list'
  492. }
  493. # 特殊mid更新结果存放 redis key ,完整格式:'special:mid'
  494. KEY_NAME_SPECIAL_MID = 'special:mid'
  495. # 特殊mid对应指定视频列表更新结果存放 redis key 前缀,完整格式:'special:videos:item:{date}'
  496. KEY_NAME_PREFIX_SPECIAL_VIDEOS = 'special:videos:item:'
  497. # 限流视频集合存放 redis key前缀,完整格式:'limit:videos:{date}'
  498. KEY_NAME_PREFIX_LIMIT_VIDEO_SET = 'limit:videos:'
  499. # 限流视频最大分发数记录 redis key,完整格式:'limit:video:max:distribute:count'
  500. KEY_NAME_PREFIX_LIMIT_VIDEOS = 'limit:video:max:distribute:count'
  501. # 限流视频分发数记录 redis key前缀,完整格式:'limit:video:distribute:count:{videoId}'
  502. KEY_NAME_PREFIX_LIMIT_VIDEO_DISTRIBUTE_COUNT = 'limit:video:distribute:count:'
  503. # 本山祝福视频列表,在北京+重庆+无地域划分表中屏蔽
  504. PROJECT_BENSHAN_ZHUFU = 'loghubods'
  505. TABLE_BENSHAN_ZHUFU = 'benshanzhufu_videolist'
  506. # 本山祝福视频redis存储key
  507. BENSHAN_ZHUFU_KEY_NAME = 'benshanzf:videos'
  508. # 小年糕视频列表,在北京+无地域划分表中屏蔽
  509. PROJECT_XNG = 'loghubods'
  510. TABLE_XNG = 'xng_videos'
  511. # 小年糕视频redis存储key
  512. XNG_KEY_NAME = 'xng:videos'
  513. # 特殊地区屏蔽危险视频列表,在广州+深圳+成都+无地域划分表中屏蔽
  514. PROJECT_SPECIAL_AREA_LIMIT = 'loghubods'
  515. TABLE_SPECIAL_AREA_LIMIT = 'special_area_recommend_limit'
  516. # 特殊地区屏蔽危险视频redis存储key
  517. SPECIAL_AREA_LIMIT_KEY_NAME = 'special:area:limit:videos'
  518. # 屏蔽视频配置 key:region_code, value:videos key list
  519. SHIELD_CONFIG = {
  520. REGION_CODE['北京']: [XNG_KEY_NAME, ],
  521. REGION_CODE['None']: [SPECIAL_AREA_LIMIT_KEY_NAME, XNG_KEY_NAME, ],
  522. CITY_CODE['广州']: [SPECIAL_AREA_LIMIT_KEY_NAME, ],
  523. CITY_CODE['深圳']: [SPECIAL_AREA_LIMIT_KEY_NAME, ],
  524. CITY_CODE['成都']: [SPECIAL_AREA_LIMIT_KEY_NAME, ],
  525. }
  526. # 涉政视频列表,除票圈vlog、票圈视频、票圈视频APP外其他端都屏蔽
  527. PROJECT_POLITICAL_VIDEOS = 'loghubods'
  528. TABLE_POLITICAL_VIDEOS = 'shielded_politics_videolist'
  529. # 涉政视频列表redis存储key
  530. POLITICAL_VIDEOS_KEY_NAME = 'political:videos'
  531. # 涉政视频可分发的端
  532. POLITICAL_RECOMMEND_APP_TYPE_LIST = [
  533. APP_TYPE['VLOG'], # vlog
  534. APP_TYPE['LOVE_LIVE'], # 票圈视频
  535. APP_TYPE['APP'], # 票圈视频APP
  536. ]
  537. # 宗教视频更新使用数据
  538. RELIGION_VIDEOS_PROJECT = 'loghubods'
  539. RELIGION_VIDEOS_TABLE = 'religion_video'
  540. # 宗教视频列表更新结果存放 redis key 前缀,完整格式:'religion:videos:item:{date}'
  541. KEY_NAME_PREFIX_RELIGION_VIDEOS = 'religion:videos:item:'
  542. # 广告模型数据
  543. ad_model_data = {
  544. 'user_group': {
  545. 'project': 'loghubods',
  546. 'table': 'user_share_return_admodel'
  547. },
  548. 'users_share_rate': {
  549. 'project': 'loghubods',
  550. 'table': 'usergroup_sharerate_admodel'
  551. },
  552. 'videos_share_rate': {
  553. 'project': 'loghubods',
  554. 'table': 'video_sharerate_admodel'
  555. },
  556. }
  557. # 调用广告模型appType列表
  558. AD_APP_TYPE_LIST = [
  559. APP_TYPE['VLOG'], # 票圈vlog
  560. APP_TYPE['PIAO_QUAN_VIDEO_PLUS'], # 票圈视频+
  561. APP_TYPE['LOVE_LIVE'], # 票圈视频
  562. APP_TYPE['SHORT_VIDEO'], # 票圈短视频
  563. APP_TYPE['LONG_VIDEO'], # 内容精选
  564. APP_TYPE['LAO_HAO_KAN_VIDEO'], # 老好看视频
  565. APP_TYPE['ZUI_JING_QI'], # 票圈最惊奇
  566. ]
  567. # 广告模型视频数据
  568. AD_VIDEO_DATA_PARAMS = {
  569. 'data1': APP_TYPE['VLOG'], # vlog
  570. 'data2': APP_TYPE['LOVE_LIVE'], # 票圈视频
  571. 'data3': APP_TYPE['LONG_VIDEO'], # 内容精选
  572. 'data4': APP_TYPE['SHORT_VIDEO'], # 票圈短视频
  573. 'data5': APP_TYPE['LAO_HAO_KAN_VIDEO'], # 老好看视频
  574. 'data6': APP_TYPE['ZUI_JING_QI'], # 票圈最惊奇
  575. }
  576. # 广告模型用户分组类别
  577. AD_MID_GROUP = {
  578. 'class1': [
  579. 'return1mids',
  580. 'return2_3mids',
  581. 'return4_8mids',
  582. 'return9_24mids',
  583. 'return25_nmids',
  584. 'return0share1mids',
  585. 'return0share2_nmids'],
  586. 'class2': [
  587. 'return1mids',
  588. 'return2_3mids',
  589. 'return4_8mids',
  590. 'return9_24mids',
  591. 'return25_29mids',
  592. 'return30_nmids',
  593. 'return0share1mids',
  594. 'return0share2_nmids'
  595. ]
  596. }
  597. # 免广告用户组列表
  598. NO_AD_MID_GROUP_LIST = {
  599. 'class1': ['return25_nmids'],
  600. 'class2': ['return30_nmids'],
  601. }
  602. # 广告模型用户数据
  603. AD_USER_PARAMS = {
  604. 'data_params': {
  605. 'data1': APP_TYPE['VLOG'], # vlog
  606. 'data2': APP_TYPE['LOVE_LIVE'], # 票圈视频
  607. 'data3': APP_TYPE['LONG_VIDEO'], # 内容精选
  608. 'data4': APP_TYPE['SHORT_VIDEO'], # 票圈短视频
  609. 'data5': APP_TYPE['LAO_HAO_KAN_VIDEO'], # 老好看视频
  610. 'data6': APP_TYPE['ZUI_JING_QI'], # 票圈最惊奇
  611. },
  612. 'rule_params': {
  613. 'rule1': {
  614. 'group_list': AD_MID_GROUP['class1'],
  615. 'no_ad_mid_group_list': NO_AD_MID_GROUP_LIST['class1'],
  616. },
  617. 'rule2': {
  618. 'group_list': AD_MID_GROUP['class1'],
  619. 'no_ad_mid_group_list': NO_AD_MID_GROUP_LIST['class1'],
  620. 'remove_no_ad_group': True, # mean_group 预测&计算阈值时,去除不出广告的用户组
  621. },
  622. 'rule3': {
  623. 'group_list': AD_MID_GROUP['class2'],
  624. 'no_ad_mid_group_list': NO_AD_MID_GROUP_LIST['class2'],
  625. 'remove_no_ad_group': True, # mean_group 预测&计算阈值时,去除不出广告的用户组
  626. },
  627. },
  628. 'params_list': [
  629. {'data': 'data1', 'rule': 'rule1'},
  630. {'data': 'data1', 'rule': 'rule2'},
  631. {'data': 'data4', 'rule': 'rule1'},
  632. {'data': 'data1', 'rule': 'rule3'},
  633. ]
  634. }
  635. # 广告模型abtest配置
  636. AD_ABTEST_CONFIG = {
  637. # 票圈vlog
  638. '173-a': {'video': {'data': 'data1'},
  639. 'user': {'data': 'data1', 'rule': 'rule1'},
  640. 'threshold': {'group': 7 / 24, 'mean_group': 7 / 24}},
  641. '173-b': {'video': {'data': 'data1'},
  642. 'user': {'data': 'data1', 'rule': 'rule2'},
  643. 'threshold': {'group': 7 / 24, 'mean_group': 7 / 24}},
  644. # 票圈视频+
  645. '190-a': {'video': {'data': 'data1'},
  646. 'user': {'data': 'data1', 'rule': 'rule1'},
  647. 'threshold': {'group': 25 / 48, 'mean_group': 25 / 48}},
  648. '190-b': {'video': {'data': 'data1'},
  649. 'user': {'data': 'data1', 'rule': 'rule1'},
  650. 'threshold': {'group': 13 / 24, 'mean_group': 13 / 24}},
  651. # 票圈视频
  652. '194-a': {'video': {'data': 'data1'},
  653. 'user': {'data': 'data1', 'rule': 'rule1'},
  654. 'threshold': {'group': 7 / 24, 'mean_group': 7 / 24}},
  655. '194-b': {'video': {'data': 'data1'},
  656. 'user': {'data': 'data1', 'rule': 'rule2'},
  657. 'threshold': {'group': 7 / 24, 'mean_group': 7 / 24}},
  658. # 内容精选
  659. '195-a': {'video': {'data': 'data1'},
  660. 'user': {'data': 'data1', 'rule': 'rule1'},
  661. 'threshold': {'group': 11 / 24, 'mean_group': 11 / 24}},
  662. '195-b': {'video': {'data': 'data1'},
  663. 'user': {'data': 'data1', 'rule': 'rule2'},
  664. 'threshold': {'group': 11 / 24, 'mean_group': 11 / 24}},
  665. # 票圈短视频
  666. '196-a': {'video': {'data': 'data1'},
  667. 'user': {'data': 'data1', 'rule': 'rule1'},
  668. 'threshold': {'group': 1 / 2, 'mean_group': 1 / 2}},
  669. '196-b': {'video': {'data': 'data4'},
  670. 'user': {'data': 'data4', 'rule': 'rule1'},
  671. 'threshold': {'group': 25 / 48, 'mean_group': 25 / 48}},
  672. # 老好看视频
  673. '197-a': {'video': {'data': 'data1'},
  674. 'user': {'data': 'data1', 'rule': 'rule1'},
  675. 'threshold': {'group': 25 / 48, 'mean_group': 25 / 48}},
  676. '197-b': {'video': {'data': 'data1'},
  677. 'user': {'data': 'data1', 'rule': 'rule2'},
  678. 'threshold': {'group': 25 / 48, 'mean_group': 25 / 48}},
  679. # 票圈最惊奇
  680. '198-a': {'video': {'data': 'data1'},
  681. 'user': {'data': 'data1', 'rule': 'rule1'},
  682. 'threshold': {'group': 49 / 96, 'mean_group': 49 / 96}},
  683. '198-b': {'video': {'data': 'data1'},
  684. 'user': {'data': 'data1', 'rule': 'rule1'},
  685. 'threshold': {'group': 5 / 18, 'mean_group': 5 / 18}},
  686. }
  687. # 用户组有广告时的分享率预测结果存放 redis key 前缀,完整格式:ad:users:group:predict:share:rate:{user_data_key}:{user_rule_key}:{date}
  688. KEY_NAME_PREFIX_AD_GROUP = 'ad:users:group:predict:share:rate:'
  689. # 视频有广告时的分享率预测结果存放 redis key 前缀,完整格式:ad:video:predict:share:rate:{video_data_key}:{date}
  690. KEY_NAME_PREFIX_AD_VIDEO = 'ad:video:predict:share:rate:'
  691. # 用户分组结果存放 redis key 前缀,完整格式:mid:group:{class_key}:{mid}
  692. KEY_NAME_PREFIX_MID_GROUP = 'mid:group:'
  693. # 广告推荐阈值结果存放 redis key 前缀,完整格式:ad:threshold:{abtestId}:{abtestConfigTag}:{group}
  694. KEY_NAME_PREFIX_AD_THRESHOLD = 'ad:threshold:'
  695. class DevelopmentConfig(BaseConfig):
  696. """开发环境配置"""
  697. # 报警内容 环境区分
  698. ENV_TEXT = "开发环境"
  699. # 项目存放目录
  700. PROJECT_PATH = '/data2/rov-offline'
  701. # 测试环境redis地址
  702. REDIS_INFO = {
  703. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  704. 'port': 6379,
  705. 'password': 'Wqsd@2019',
  706. }
  707. # Hologres连接参数,本地使用
  708. HOLOGRES_INFO = {
  709. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou.hologres.aliyuncs.com',
  710. 'port': 80,
  711. 'dbname': 'dssm',
  712. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  713. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  714. }
  715. # 测试环境mysql地址
  716. MYSQL_INFO = {
  717. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  718. 'port': 3306,
  719. 'user': 'wx2016_longvideo',
  720. 'password': 'wx2016_longvideoP@assword1234',
  721. 'db': 'longvideo',
  722. 'charset': 'utf8'
  723. }
  724. # 测试环境 过滤用mysql地址
  725. FILTER_MYSQL_INFO = {
  726. 'host': 'am-bp1g3ys9u00u483uc131930.ads.aliyuncs.com',
  727. 'port': 3306,
  728. 'user': 'lv_manager',
  729. 'password': 'lv_manager@2020',
  730. 'db': 'longvideo',
  731. 'charset': 'utf8'
  732. }
  733. # 日志服务配置
  734. ALIYUN_LOG = {
  735. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  736. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  737. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  738. 'PROJECT': 'rov-server-test',
  739. }
  740. # Hologres视频状态存储表名
  741. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  742. # 快速曝光流量池ID
  743. QUICK_FLOW_POOL_ID = 3
  744. # 获取流量池分发配置接口地址
  745. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getConfig'
  746. # 从流量池获取视频接口地址
  747. GET_VIDEOS_FROM_POOL_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  748. # 获取视频在流量池中的剩余可分发数接口地址
  749. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  750. # 计算完ROV通知后端接口地址
  751. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateRovScore'
  752. # 获取置顶视频列表接口地址
  753. TOP_VIDEO_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/topVideoList'
  754. # 获取首页兜底视频json接口地址
  755. BOTTOM_JSON_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/video/distribute/structure/video/list'
  756. # 通知后端更新兜底视频接口地址
  757. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  758. # 获取限流视频接口地址
  759. GET_VIDEO_LIMIT_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getVideoLimitList'
  760. # logs 上传oss 目标Bucket指定目录
  761. OSS_FOLDER_LOGS = 'rov-offline/dev/logs/'
  762. # data 上传oss 目标Bucket指定目录
  763. OSS_FOLDER_DATA = 'rov-offline/dev/data/'
  764. class TestConfig(BaseConfig):
  765. """测试环境配置"""
  766. # 报警内容 环境区分
  767. ENV_TEXT = "测试环境"
  768. # 项目存放目录
  769. PROJECT_PATH = '/data2/rov-offline'
  770. # 测试环境redis地址
  771. REDIS_INFO = {
  772. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  773. 'port': 6379,
  774. 'password': 'Wqsd@2019',
  775. }
  776. # Hologres连接参数,服务器使用
  777. HOLOGRES_INFO = {
  778. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  779. 'port': 80,
  780. 'dbname': 'dssm',
  781. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  782. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  783. }
  784. # 测试环境mysql地址
  785. MYSQL_INFO = {
  786. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  787. 'port': 3306,
  788. 'user': 'wx2016_longvideo',
  789. 'password': 'wx2016_longvideoP@assword1234',
  790. 'db': 'longvideo',
  791. 'charset': 'utf8'
  792. }
  793. # 测试环境 过滤用mysql地址
  794. FILTER_MYSQL_INFO = {
  795. 'host': 'am-bp1g3ys9u00u483uc131930.ads.aliyuncs.com',
  796. 'port': 3306,
  797. 'user': 'lv_manager',
  798. 'password': 'lv_manager@2020',
  799. 'db': 'longvideo',
  800. 'charset': 'utf8'
  801. }
  802. # 日志服务配置
  803. ALIYUN_LOG = {
  804. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  805. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  806. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  807. 'PROJECT': 'rov-server-test',
  808. }
  809. # Hologres视频状态存储表名
  810. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  811. # 快速曝光流量池ID
  812. QUICK_FLOW_POOL_ID = 3
  813. # 获取流量池分发配置接口地址
  814. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getConfig'
  815. # 从流量池获取视频接口地址
  816. GET_VIDEOS_FROM_POOL_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  817. # 获取视频在流量池中的剩余可分发数接口地址
  818. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  819. # 计算完ROV通知后端接口地址
  820. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateRovScore'
  821. # 获取置顶视频列表接口地址
  822. TOP_VIDEO_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/topVideoList'
  823. # 获取首页兜底视频json接口地址
  824. BOTTOM_JSON_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/video/distribute/structure/video/list'
  825. # 通知后端更新兜底视频接口地址
  826. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  827. # 获取限流视频接口地址
  828. GET_VIDEO_LIMIT_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getVideoLimitList'
  829. # logs 上传oss 目标Bucket指定目录
  830. OSS_FOLDER_LOGS = 'rov-offline/test/logs/'
  831. # data 上传oss 目标Bucket指定目录
  832. OSS_FOLDER_DATA = 'rov-offline/test/data/'
  833. class PreProductionConfig(BaseConfig):
  834. """预发布环境配置"""
  835. # 报警内容 环境区分
  836. ENV_TEXT = "预发布环境"
  837. # 项目存放目录
  838. PROJECT_PATH = '/data/rov-offline'
  839. # redis地址
  840. REDIS_INFO = {
  841. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  842. 'port': 6379,
  843. 'password': 'Wqsd@2019',
  844. }
  845. # Hologres连接参数,服务器使用
  846. HOLOGRES_INFO = {
  847. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  848. 'port': 80,
  849. 'dbname': 'dssm',
  850. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  851. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  852. }
  853. # 生产环境mysql地址
  854. MYSQL_INFO = {
  855. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  856. 'port': 3306,
  857. 'user': 'wx2016_longvideo',
  858. 'password': 'wx2016_longvideoP@assword1234',
  859. 'db': 'longvideo',
  860. 'charset': 'utf8'
  861. }
  862. # 生产环境 过滤用mysql地址
  863. FILTER_MYSQL_INFO = {
  864. 'host': 'am-bp15tqt957i3b3sgi131950.ads.aliyuncs.com',
  865. 'port': 3306,
  866. 'user': 'lv_manager',
  867. 'password': 'lv_manager@2020',
  868. 'db': 'longvideo',
  869. 'charset': 'utf8'
  870. }
  871. # 日志服务配置
  872. ALIYUN_LOG = {
  873. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  874. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  875. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  876. 'PROJECT': 'rov-server',
  877. }
  878. # Hologres视频状态存储表名
  879. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  880. # 快速曝光流量池ID
  881. QUICK_FLOW_POOL_ID = 3
  882. # 获取流量池分发配置接口地址
  883. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/getConfig'
  884. # 从流量池获取视频接口地址
  885. GET_VIDEOS_FROM_POOL_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  886. # 获取视频在流量池中的剩余可分发数接口地址
  887. GET_REMAIN_VIEW_COUNT_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  888. # 计算完ROV通知后端接口地址
  889. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videopre-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateRovScore'
  890. # 获取置顶视频列表接口地址
  891. TOP_VIDEO_LIST_URL = 'http://speedpre.wx.com/longvideoapi/openapi/recommend/topVideoList'
  892. # 获取首页兜底视频json接口地址
  893. BOTTOM_JSON_URL = 'http://speedpre.wx.com/longvideoapi/openapi/video/distribute/structure/video/list'
  894. # 通知后端更新兜底视频接口地址
  895. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videopre-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  896. # 获取限流视频接口地址
  897. GET_VIDEO_LIMIT_LIST_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/getVideoLimitList'
  898. # logs 上传oss 目标Bucket指定目录
  899. OSS_FOLDER_LOGS = 'rov-offline/pre/logs/'
  900. # data 上传oss 目标Bucket指定目录
  901. OSS_FOLDER_DATA = 'rov-offline/pre/data/'
  902. class ProductionConfig(BaseConfig):
  903. """生产环境配置"""
  904. # 报警内容 环境区分
  905. ENV_TEXT = "生产环境"
  906. # 项目存放目录
  907. PROJECT_PATH = '/data/rov-offline'
  908. # 线上环境redis地址
  909. REDIS_INFO = {
  910. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  911. 'port': 6379,
  912. 'password': 'Wqsd@2019',
  913. }
  914. # Hologres连接参数,服务器使用
  915. HOLOGRES_INFO = {
  916. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  917. 'port': 80,
  918. 'dbname': 'dssm',
  919. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  920. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  921. }
  922. # 生产环境mysql地址
  923. MYSQL_INFO = {
  924. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  925. 'port': 3306,
  926. 'user': 'wx2016_longvideo',
  927. 'password': 'wx2016_longvideoP@assword1234',
  928. 'db': 'longvideo',
  929. 'charset': 'utf8'
  930. }
  931. # 生产环境 过滤用mysql地址
  932. FILTER_MYSQL_INFO = {
  933. 'host': 'am-bp15tqt957i3b3sgi131950.ads.aliyuncs.com',
  934. 'port': 3306,
  935. 'user': 'lv_manager',
  936. 'password': 'lv_manager@2020',
  937. 'db': 'longvideo',
  938. 'charset': 'utf8'
  939. }
  940. # 日志服务配置
  941. ALIYUN_LOG = {
  942. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  943. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  944. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  945. 'PROJECT': 'rov-server',
  946. }
  947. # Hologres视频状态存储表名
  948. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  949. # 快速曝光流量池ID
  950. QUICK_FLOW_POOL_ID = 3
  951. # 获取流量池分发配置接口地址
  952. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/getConfig'
  953. # 从流量池获取视频接口地址
  954. GET_VIDEOS_FROM_POOL_URL = 'http://api-internal.piaoquantv.com/flowpool/video/getAllVideo'
  955. # 获取视频在流量池中的剩余可分发数接口地址
  956. GET_REMAIN_VIEW_COUNT_URL = 'http://api-internal.piaoquantv.com/flowpool/video/remainViewCount'
  957. # 计算完ROV通知后端接口地址
  958. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateRovScore'
  959. # 获取置顶视频列表接口地址
  960. TOP_VIDEO_LIST_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/topVideoList'
  961. # 获取首页兜底视频json接口地址
  962. BOTTOM_JSON_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/video/distribute/structure/video/list'
  963. # 通知后端更新兜底视频接口地址
  964. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  965. # 获取限流视频接口地址
  966. GET_VIDEO_LIMIT_LIST_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/getVideoLimitList'
  967. # logs 上传oss 目标Bucket指定目录
  968. OSS_FOLDER_LOGS = 'rov-offline/pro/logs/'
  969. # data 上传oss 目标Bucket指定目录
  970. OSS_FOLDER_DATA = 'rov-offline/pro/data/'
  971. def set_config():
  972. # 获取环境变量 ROV_OFFLINE_ENV
  973. env = os.environ.get('ROV_OFFLINE_ENV')
  974. # env = 'dev'
  975. if env is None:
  976. # log_.error('ENV ERROR: is None!')
  977. return
  978. if env == 'dev':
  979. return DevelopmentConfig(), env
  980. elif env == 'test':
  981. return TestConfig(), env
  982. elif env == 'pre':
  983. return PreProductionConfig(), env
  984. elif env == 'pro':
  985. return ProductionConfig(), env
  986. else:
  987. # log_.error('ENV ERROR: is {}'.format(env))
  988. return