config.py 51 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558559560561562563564565566567568569570571572573574575576577578579580581582583584585586587588589590591592593594595596597598599600601602603604605606607608609610611612613614615616617618619620621622623624625626627628629630631632633634635636637638639640641642643644645646647648649650651652653654655656657658659660661662663664665666667668669670671672673674675676677678679680681682683684685686687688689690691692693694695696697698699700701702703704705706707708709710711712713714715716717718719720721722723724725726727728729730731732733734735736737738739740741742743744745746747748749750751752753754755756757758759760761762763764765766767768769770771772773774775776777778779780781782783784785786787788789790791792793794795796797798799800801802803804805806807808809810811812813814815816817818819820821822823824825826827828829830831832833834835836837838839840841842843844845846847848849850851852853854855856857858859860861862863864865866867868869870871872873874875876877878879880881882883884885886887888889890891892893894895896897898899900901902903904905906907908909910911912913914915916917918919920921922923924925926927928929930931932933934935936937938939940941942943944945946947948949950951952953954955956957958959960961962963964965966967968969970971972973974975976977978979980981982983984985986987988989990991992993994995996997998999100010011002100310041005100610071008100910101011101210131014101510161017101810191020102110221023102410251026102710281029103010311032103310341035103610371038103910401041104210431044104510461047104810491050105110521053105410551056105710581059106010611062106310641065106610671068106910701071107210731074107510761077107810791080108110821083108410851086108710881089109010911092109310941095109610971098
  1. # coding:utf-8
  2. import os
  3. # from log import Log
  4. # log_ = Log()
  5. class BaseConfig(object):
  6. # 产品标识
  7. APP_TYPE = {
  8. 'VLOG': 0, # vlog
  9. 'LOVE_LIVE': 4, # 票圈视频
  10. 'LONG_VIDEO': 5, # 内容精选
  11. 'SHORT_VIDEO': 6, # 票圈短视频
  12. 'WAN_NENG_VIDEO': 17, # 万能影视屋
  13. 'LAO_HAO_KAN_VIDEO': 18, # 老好看视频
  14. 'ZUI_JING_QI': 19, # 票圈最惊奇
  15. 'APP': 13, # 票圈视频APP
  16. }
  17. # 数据存放路径
  18. DATA_DIR_PATH = './data'
  19. # oss 目标Bucket
  20. BUCKET_NAME = 'ali-recommend'
  21. # ODPS服务配置
  22. ODPS_CONFIG = {
  23. 'ENDPOINT': 'http://service.cn.maxcompute.aliyun.com/api',
  24. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  25. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  26. }
  27. # 飞书机器人配置
  28. FEISHU_ROBOT = {
  29. 'server_robot': {
  30. # webhook地址
  31. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/8de4de35-30ed-4692-8854-7a154e89b2f2',
  32. # 自定义关键词key_word
  33. 'key_word': '服务报警'
  34. },
  35. 'feature_monitor_robot': {
  36. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/0ca66b89-5e2b-4e89-a04a-a01fda31cc89',
  37. 'key_word': 'ROV特征监控'
  38. }
  39. }
  40. # 训练数据截止时间距当前日期间隔天数
  41. TRAIN_DIFF = 7
  42. # 训练数据所需数据范围天数
  43. TRAIN_DELTA_DAYS = 30
  44. # 训练数据表名
  45. TRAIN_PROJECT = 'usercdm'
  46. TRAIN_TABLE = 'rov_feature_add_v1'
  47. # 训练数据文件存放路径
  48. TRAIN_DATA_FILENAME = 'train_data.pickle'
  49. # 预测数据截止时间距当前日期间隔天数
  50. PREDICT_DIFF = 1
  51. # 预测数据所需数据范围天数
  52. PREDICT_DELTA_DAYS = 1
  53. # 预测数据表名
  54. PREDICT_PROJECT = 'usercdm'
  55. PREDICT_TABLE = 'rov_predict_table_add_v1'
  56. # 预测数据文件存放路径
  57. PREDICT_DATA_FILENAME = 'predict_data.pickle'
  58. # 模型存放文件
  59. MODEL_FILENAME = 'model.pickle'
  60. # 运营给定App小时级更新数据表名
  61. APP_OP_PROJECT = 'loghubods'
  62. APP_OP_TABLE = 'category_video_list_test1'
  63. # 小程序小时级规则参数
  64. RULE_PARAMS = {
  65. # 'rule1': {'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  66. # 'rule2': {'return_count': 20, 'score_rule': 0.001}, # 下线
  67. # 'rule3': {'view_type': 'pre-view', 'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  68. # 'rule4': {'cal_score_func': 2, 'return_count': 20, 'score_rule': 0}, # 下线
  69. # 'rule5': {'cal_score_func': 3, 'return_count': 20, 'score_rule': 0}, # 下线
  70. 'rule6': {'view_type': 'video-show', 'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  71. }
  72. # app_type: [18, 19]预测表名
  73. PREDICT_PROJECT_18_19 = {
  74. '18': 'loghubods', # 老好看
  75. '19': 'loghubods', # 最惊奇
  76. }
  77. PREDICT_TABLE_18_19 = {
  78. '18': 'haokan_video_list_each_hour_update', # 老好看
  79. '19': 'amazed_video_list_each_hour_update', # 最惊奇
  80. }
  81. # 预测数据文件存放路径
  82. PREDICT_DATA_FILENAME_18_19 = {
  83. '18': 'predict_data_18.pickle',
  84. '19': 'predict_data_19.pickle'
  85. }
  86. # 天级规则更新使用数据
  87. PROJECT_DAY = 'loghubods'
  88. TABLE_DAY = 'video_data_each_day_dataset'
  89. # 小程序天级规则参数
  90. RULE_PARAMS_DAY = {
  91. # 'rule1': {'return_count': 200},
  92. 'rule2': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001},
  93. }
  94. # 小时级更新过去24h数据
  95. PROJECT_24H = 'loghubods'
  96. TABLE_24H = 'video_data_each_hour_dataset_24h_total'
  97. # 小时级更新过去24h数据规则参数
  98. RULE_PARAMS_24H = {
  99. # 'rule1': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001},
  100. 'rule2': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001, 'view_type': 'preview'},
  101. }
  102. REGION_CODE = {
  103. '北京': '110000', '天津': '120000', '河北省': '130000', '山西省': '140000', '内蒙古': '150000',
  104. '辽宁省': '210000', '吉林省': '220000', '黑龙江省': '230000',
  105. '上海': '310000', '江苏省': '320000', '浙江省': '330000', '安徽省': '340000', '福建省': '350000', '江西省': '360000', '山东省': '370000',
  106. '河南省': '410000', '湖北省': '420000', '湖南省': '430000', '广东省': '440000', '广西': '450000', '海南省': '460000',
  107. '重庆': '500000', '四川省': '510000', '贵州省': '520000', '云南省': '530000', '西藏': '540000',
  108. '陕西省': '610000', '甘肃省': '620000', '青海省': '630000', '宁夏': '640000', '新疆': '650000',
  109. '台湾省': '710000', '香港': '810000', '澳门': '820000',
  110. 'None': '-1'
  111. }
  112. # 地域分组小时级规则更新使用数据
  113. PROJECT_REGION = 'loghubods'
  114. TABLE_REGION = 'video_each_hour_update_province'
  115. # 地域分组小时级规则参数
  116. RULE_PARAMS_REGION = {
  117. # 'rule1': {'view_type': 'pre-view', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule1'},
  118. 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  119. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  120. }
  121. # 地域分组天级规则更新使用数据
  122. PROJECT_REGION_DAY = 'loghubods'
  123. TABLE_REGION_DAY = 'video_each_day_update_province'
  124. # 地域分组天级规则参数
  125. RULE_PARAMS_REGION_DAY = {
  126. 'rule1': {'view_type': 'pre-view', 'return_count': 21, 'score_rule': 0},
  127. }
  128. # 地域分组小时级更新24h使用数据
  129. PROJECT_REGION_24H = 'loghubods'
  130. TABLE_REGION_24H = 'video_each_day_update_province_24h_total'
  131. # 地域分组小时级更新24h规则参数
  132. RULE_PARAMS_REGION_24H = {
  133. # 'rule1': {'view_type': 'pre-view', 'return_count': 21, 'score_rule': 0, 'platform_return_rate': 0.001},
  134. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0, 'platform_return_rate': 0.001},
  135. }
  136. # ##### 区分appType数据
  137. # 小时级更新过去48h数据 loghubods.video_data_each_hour_dataset_48h_total_apptype
  138. PROJECT_48H_APP_TYPE = 'loghubods'
  139. TABLE_48H_APP_TYPE = 'video_data_each_hour_dataset_48h_total_apptype'
  140. # 小时级更新过去48h数据规则参数
  141. RULE_PARAMS_48H_APP_TYPE = {
  142. APP_TYPE['VLOG']: {
  143. 'rule_params': {
  144. 'rule1': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001,
  145. 'view_type': 'preview'},
  146. },
  147. 'data_params': {
  148. 'data1': [APP_TYPE['VLOG'], ],
  149. },
  150. 'params_list': [
  151. {'data': 'data1', 'rule': 'rule1'},
  152. ],
  153. },
  154. }
  155. # 小时级更新过去24h数据 loghubods.video_data_each_hour_dataset_24h_total_apptype
  156. PROJECT_24H_APP_TYPE = 'loghubods'
  157. TABLE_24H_APP_TYPE = 'video_data_each_hour_dataset_24h_total_apptype'
  158. # 小时级更新过去24h数据规则参数
  159. RULE_PARAMS_24H_APP_TYPE = {
  160. APP_TYPE['VLOG']: {
  161. 'rule_params': {
  162. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  163. 'view_type': 'preview'},
  164. 'rule3': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001,
  165. 'view_type': 'preview'},
  166. },
  167. 'data_params': {
  168. 'data1': [APP_TYPE['VLOG'], ],
  169. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  170. },
  171. 'params_list': [
  172. {'data': 'data1', 'rule': 'rule2'},
  173. {'data': 'data2', 'rule': 'rule2'},
  174. {'data': 'data1', 'rule': 'rule3'},
  175. ],
  176. },
  177. APP_TYPE['LONG_VIDEO']: {
  178. 'rule_params': {
  179. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  180. 'view_type': 'preview'},
  181. },
  182. 'data_params': {
  183. 'data1': [APP_TYPE['VLOG'], ],
  184. # 'data2': [APP_TYPE['LONG_VIDEO'], ],
  185. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LONG_VIDEO'], ],
  186. 'data4': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  187. },
  188. 'params_list': [
  189. {'data': 'data1', 'rule': 'rule2'},
  190. {'data': 'data3', 'rule': 'rule2'},
  191. {'data': 'data4', 'rule': 'rule2'},
  192. ],
  193. },
  194. APP_TYPE['LOVE_LIVE']: {
  195. 'rule_params': {
  196. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  197. 'view_type': 'preview'},
  198. },
  199. 'data_params': {
  200. 'data1': [APP_TYPE['VLOG'], ],
  201. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], ],
  202. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  203. },
  204. 'params_list': [
  205. {'data': 'data1', 'rule': 'rule2'},
  206. {'data': 'data2', 'rule': 'rule2'},
  207. {'data': 'data3', 'rule': 'rule2'},
  208. ],
  209. },
  210. APP_TYPE['SHORT_VIDEO']: {
  211. 'rule_params': {
  212. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  213. 'view_type': 'preview'},
  214. },
  215. 'data_params': {
  216. 'data1': [APP_TYPE['VLOG'], ],
  217. 'data2': [APP_TYPE['VLOG'], APP_TYPE['SHORT_VIDEO'], ],
  218. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  219. },
  220. 'params_list': [
  221. {'data': 'data1', 'rule': 'rule2'},
  222. {'data': 'data2', 'rule': 'rule2'},
  223. {'data': 'data3', 'rule': 'rule2'},
  224. ],
  225. },
  226. APP_TYPE['LAO_HAO_KAN_VIDEO']: {
  227. 'rule_params': {
  228. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  229. 'view_type': 'preview'},
  230. },
  231. 'data_params': {
  232. 'data1': [APP_TYPE['VLOG'], ],
  233. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  234. },
  235. 'params_list': [
  236. {'data': 'data1', 'rule': 'rule2'},
  237. {'data': 'data2', 'rule': 'rule2'},
  238. ],
  239. },
  240. APP_TYPE['ZUI_JING_QI']: {
  241. 'rule_params': {
  242. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  243. 'view_type': 'preview'},
  244. },
  245. 'data_params': {
  246. 'data1': [APP_TYPE['VLOG'], ],
  247. 'data2': [APP_TYPE['VLOG'], APP_TYPE['ZUI_JING_QI']],
  248. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  249. },
  250. 'params_list': [
  251. {'data': 'data1', 'rule': 'rule2'},
  252. {'data': 'data2', 'rule': 'rule2'},
  253. {'data': 'data3', 'rule': 'rule2'},
  254. ],
  255. },
  256. APP_TYPE['APP']: {
  257. 'rule_params': {
  258. 'rule2': {'cal_score_func': 2, 'return_count': 40, 'platform_return_rate': 0.001,
  259. 'view_type': 'preview'},
  260. },
  261. 'data_params': {
  262. 'data1': [APP_TYPE['VLOG'], ],
  263. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO'],
  264. APP_TYPE['APP']],
  265. },
  266. 'params_list': [
  267. {'data': 'data1', 'rule': 'rule2'},
  268. {'data': 'data2', 'rule': 'rule2'},
  269. # {'data': 'data3', 'rule': 'rule2'},
  270. ],
  271. },
  272. }
  273. # 地域分组小时级更新24h使用数据 loghubods.video_each_day_update_province_24h_total_apptype
  274. PROJECT_REGION_24H_APP_TYPE = 'loghubods'
  275. TABLE_REGION_24H_APP_TYPE = 'video_each_day_update_province_24h_total_apptype'
  276. # 地域分组小时级更新24h规则参数
  277. RULE_PARAMS_REGION_24H_APP_TYPE = {
  278. APP_TYPE['VLOG']: {
  279. 'rule_params': {
  280. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  281. 'platform_return_rate': 0.001},
  282. },
  283. 'data_params': {
  284. 'data1': [APP_TYPE['VLOG'], ],
  285. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  286. },
  287. 'params_list': [
  288. {'data': 'data1', 'rule': 'rule2'},
  289. {'data': 'data2', 'rule': 'rule2'},
  290. ],
  291. },
  292. APP_TYPE['LONG_VIDEO']: {
  293. 'rule_params': {
  294. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  295. 'platform_return_rate': 0.001},
  296. },
  297. 'data_params': {
  298. 'data1': [APP_TYPE['VLOG'], ],
  299. # 'data2': [APP_TYPE['LONG_VIDEO'], ],
  300. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LONG_VIDEO'], ],
  301. 'data4': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  302. },
  303. 'params_list': [
  304. {'data': 'data1', 'rule': 'rule2'},
  305. {'data': 'data3', 'rule': 'rule2'},
  306. {'data': 'data4', 'rule': 'rule2'},
  307. ],
  308. },
  309. APP_TYPE['LOVE_LIVE']: {
  310. 'rule_params': {
  311. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  312. 'platform_return_rate': 0.001},
  313. },
  314. 'data_params': {
  315. 'data1': [APP_TYPE['VLOG'], ],
  316. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], ],
  317. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  318. },
  319. 'params_list': [
  320. {'data': 'data1', 'rule': 'rule2'},
  321. {'data': 'data2', 'rule': 'rule2'},
  322. {'data': 'data3', 'rule': 'rule2'},
  323. ],
  324. },
  325. APP_TYPE['SHORT_VIDEO']: {
  326. 'rule_params': {
  327. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  328. 'platform_return_rate': 0.001},
  329. },
  330. 'data_params': {
  331. 'data1': [APP_TYPE['VLOG'], ],
  332. 'data2': [APP_TYPE['VLOG'], APP_TYPE['SHORT_VIDEO'], ],
  333. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  334. },
  335. 'params_list': [
  336. {'data': 'data1', 'rule': 'rule2'},
  337. {'data': 'data2', 'rule': 'rule2'},
  338. {'data': 'data3', 'rule': 'rule2'},
  339. ],
  340. },
  341. APP_TYPE['LAO_HAO_KAN_VIDEO']: {
  342. 'rule_params': {
  343. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  344. 'platform_return_rate': 0.001},
  345. },
  346. 'data_params': {
  347. 'data1': [APP_TYPE['VLOG'], ],
  348. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  349. },
  350. 'params_list': [
  351. {'data': 'data1', 'rule': 'rule2'},
  352. {'data': 'data2', 'rule': 'rule2'},
  353. ],
  354. },
  355. APP_TYPE['ZUI_JING_QI']: {
  356. 'rule_params': {
  357. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  358. 'platform_return_rate': 0.001},
  359. },
  360. 'data_params': {
  361. 'data1': [APP_TYPE['VLOG'], ],
  362. 'data2': [APP_TYPE['VLOG'], APP_TYPE['ZUI_JING_QI']],
  363. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  364. },
  365. 'params_list': [
  366. {'data': 'data1', 'rule': 'rule2'},
  367. {'data': 'data2', 'rule': 'rule2'},
  368. {'data': 'data3', 'rule': 'rule2'},
  369. ],
  370. },
  371. APP_TYPE['APP']: {
  372. 'rule_params': {
  373. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  374. 'platform_return_rate': 0.001},
  375. 'rule3': {'view_type': 'preview', 'return_count': 21, 'score_rule': 0,
  376. 'platform_return_rate': 0.001},
  377. },
  378. 'data_params': {
  379. 'data1': [APP_TYPE['VLOG'], ],
  380. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO'],
  381. APP_TYPE['APP']],
  382. },
  383. 'params_list': [
  384. {'data': 'data1', 'rule': 'rule2'},
  385. {'data': 'data2', 'rule': 'rule3'},
  386. # {'data': 'data3', 'rule': 'rule3'},
  387. ],
  388. },
  389. }
  390. # 地域分组小时级规则更新使用数据
  391. PROJECT_REGION_APP_TYPE = 'loghubods'
  392. TABLE_REGION_APP_TYPE = 'video_each_hour_update_province_apptype'
  393. # 地域分组小时级规则参数
  394. RULE_PARAMS_REGION_APP_TYPE = {
  395. APP_TYPE['VLOG']: {
  396. 'rule_params': {
  397. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  398. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  399. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  400. 'rule4': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  401. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3'},
  402. },
  403. 'data_params': {
  404. 'data1': [APP_TYPE['VLOG'], ],
  405. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  406. },
  407. 'params_list': [
  408. {'data': 'data1', 'rule': 'rule3'},
  409. {'data': 'data2', 'rule': 'rule3'},
  410. {'data': 'data1', 'rule': 'rule4'},
  411. ],
  412. },
  413. APP_TYPE['LONG_VIDEO']: {
  414. 'rule_params': {
  415. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  416. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  417. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  418. },
  419. 'data_params': {
  420. 'data1': [APP_TYPE['VLOG'], ],
  421. # 'data2': [APP_TYPE['LONG_VIDEO'], ],
  422. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LONG_VIDEO'], ],
  423. 'data4': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  424. },
  425. 'params_list': [
  426. {'data': 'data1', 'rule': 'rule3'},
  427. {'data': 'data3', 'rule': 'rule3'},
  428. {'data': 'data4', 'rule': 'rule3'},
  429. ],
  430. },
  431. APP_TYPE['LOVE_LIVE']: {
  432. 'rule_params': {
  433. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  434. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  435. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  436. },
  437. 'data_params': {
  438. 'data1': [APP_TYPE['VLOG'], ],
  439. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], ],
  440. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  441. },
  442. 'params_list': [
  443. {'data': 'data1', 'rule': 'rule3'},
  444. {'data': 'data2', 'rule': 'rule3'},
  445. {'data': 'data3', 'rule': 'rule3'},
  446. ],
  447. },
  448. APP_TYPE['SHORT_VIDEO']: {
  449. 'rule_params': {
  450. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  451. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  452. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  453. },
  454. 'data_params': {
  455. 'data1': [APP_TYPE['VLOG'], ],
  456. 'data2': [APP_TYPE['VLOG'], APP_TYPE['SHORT_VIDEO'], ],
  457. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  458. },
  459. 'params_list': [
  460. {'data': 'data1', 'rule': 'rule3'},
  461. {'data': 'data2', 'rule': 'rule3'},
  462. {'data': 'data3', 'rule': 'rule3'},
  463. ],
  464. },
  465. APP_TYPE['LAO_HAO_KAN_VIDEO']: {
  466. 'rule_params': {
  467. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  468. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  469. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  470. },
  471. 'data_params': {
  472. 'data1': [APP_TYPE['VLOG'], ],
  473. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  474. },
  475. 'params_list': [
  476. {'data': 'data1', 'rule': 'rule3'},
  477. {'data': 'data2', 'rule': 'rule3'},
  478. ],
  479. },
  480. APP_TYPE['ZUI_JING_QI']: {
  481. 'rule_params': {
  482. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  483. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  484. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  485. },
  486. 'data_params': {
  487. 'data1': [APP_TYPE['VLOG'], ],
  488. 'data2': [APP_TYPE['VLOG'], APP_TYPE['ZUI_JING_QI']],
  489. 'data3': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO']],
  490. },
  491. 'params_list': [
  492. {'data': 'data1', 'rule': 'rule3'},
  493. {'data': 'data2', 'rule': 'rule3'},
  494. {'data': 'data3', 'rule': 'rule3'},
  495. ],
  496. },
  497. APP_TYPE['APP']: {
  498. 'rule_params': {
  499. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  500. 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  501. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  502. 'rule6': {'view_type': 'preview', 'platform_return_rate': 0.001,
  503. 'region_24h_rule_key': 'rule3', '24h_rule_key': 'rule2'},
  504. },
  505. 'data_params': {
  506. 'data1': [APP_TYPE['VLOG'], ],
  507. 'data2': [APP_TYPE['VLOG'], APP_TYPE['LOVE_LIVE'], APP_TYPE['LONG_VIDEO'], APP_TYPE['SHORT_VIDEO'],
  508. APP_TYPE['APP'], ],
  509. },
  510. 'params_list': [
  511. {'data': 'data1', 'rule': 'rule3'},
  512. {'data': 'data2', 'rule': 'rule6'},
  513. ],
  514. },
  515. }
  516. # 不区分地域数据使用相对48h数据
  517. RULE_PARAMS_REGION_APP_TYPE_48H = {
  518. APP_TYPE['VLOG']: {
  519. 'rule_params': {
  520. 'rule5': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  521. 'region_24h_rule_key': 'rule2', '48h_rule_key': 'rule1'},
  522. },
  523. 'data_params': {
  524. 'data1': [APP_TYPE['VLOG'], ],
  525. },
  526. 'params_list': [
  527. {'data': 'data1', 'rule': 'rule5'},
  528. ],
  529. },
  530. }
  531. # 老视频更新使用数据
  532. OLD_VIDEOS_PROJECT = 'loghubods'
  533. OLD_VIDEOS_TABLE = 'xcx_test_video'
  534. # 完整电影更新使用数据
  535. WHOLE_MOVIES_PROJECT = 'loghubods'
  536. WHOLE_MOVIES_TABLE = 'whole_movies'
  537. # 完整影视资源更新结果存放 redis key 前缀,完整格式:'com.weiqu.video.recall.whole.movies.item.{date}.{h}'
  538. RECALL_KEY_NAME_PREFIX_WHOLE_MOVIES = 'com.weiqu.video.recall.whole.movies.item.'
  539. # 小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:rov:applet:{date}
  540. RECALL_KEY_NAME_PREFIX = 'recall:item:score:rov:applet:'
  541. # 小程序小时级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.h.{rule_key}.{date}.{h}
  542. RECALL_KEY_NAME_PREFIX_BY_H = 'com.weiqu.video.recall.item.score.h.'
  543. # 小程序相对24h数据更新结果与 小程序小时级更新结果 去重后 存放 redis key前缀,
  544. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.24h.h.{rule_key}.{date}.{h}
  545. RECALL_KEY_NAME_PREFIX_DUP_24H_H = 'com.weiqu.video.recall.hot.item.score.dup.24h.h.'
  546. # 小程序离线ROV模型结果与 小程序小时级更新结果/小程序相对24h数据更新结果 去重后 存放 redis key前缀,
  547. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.h.{rule_key}.{date}.{h}
  548. RECALL_KEY_NAME_PREFIX_DUP_H = 'com.weiqu.video.recall.hot.item.score.dup.h.'
  549. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.{rule_key}
  550. H_VIDEO_FILER = 'com.weiqu.video.filter.h.item.'
  551. # 小程序天级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.day.{rule_key}.{date}
  552. RECALL_KEY_NAME_PREFIX_BY_DAY = 'com.weiqu.video.recall.item.score.day.'
  553. # 小程序离线ROV模型结果与小程序天级更新结果去重后 存放 redis key前缀,
  554. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.day.now.{rule_key}.{date}
  555. RECALL_KEY_NAME_PREFIX_DUP_DAY_NOW = 'com.weiqu.video.recall.hot.item.score.dup.day.now.'
  556. # 使用前一天小程序离线ROV模型结果与小程序天级更新结果去重后 存放 redis key前缀,
  557. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.day.pre.{rule_key}.{date}
  558. RECALL_KEY_NAME_PREFIX_DUP_DAY_PRE = 'com.weiqu.video.recall.hot.item.score.dup.day.pre.'
  559. # 小程序小时级48h数据更新结果存放 redis key前缀,
  560. # 完整格式:recall:item:score:apptype:48h:{appType}:{data_key}:{rule_key}:{date}:{h}
  561. RECALL_KEY_NAME_PREFIX_BY_48H = 'recall:item:score:apptype:48h:'
  562. # 小程序小时级48h数据 筛选后的剩余数据 更新结果存放 redis key前缀,
  563. # 完整格式:recall:item:score:apptype:48h:other:{appType}:{data_key}:{rule_key}:{date}:{h}
  564. RECALL_KEY_NAME_PREFIX_BY_48H_OTHER = 'recall:item:score:apptype:48h:other:'
  565. # 小程序小时级24h数据更新结果存放 redis key前缀,
  566. # 完整格式:recall:item:score:apptype:24h:{appType}:{data_key}:{rule_key}:{date}:{h}
  567. RECALL_KEY_NAME_PREFIX_BY_24H = 'recall:item:score:apptype:24h:'
  568. # 小程序小时级24h数据 筛选后的剩余数据 更新结果存放 redis key前缀,
  569. # 完整格式:recall:item:score:apptype:24h:other:{appType}:{data_key}:{rule_key}:{date}:{h}
  570. RECALL_KEY_NAME_PREFIX_BY_24H_OTHER = 'recall:item:score:apptype:24h:other:'
  571. # 小程序离线ROV模型结果与小程序小时级24h更新结果去重后 存放 redis key前缀,
  572. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.24h.{rule_key}.{date}.{h}
  573. RECALL_KEY_NAME_PREFIX_DUP_24H = 'com.weiqu.video.recall.hot.item.score.dup.24h.'
  574. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.apptype.h.item.24h.{appType}.{data_key}.{rule_key}
  575. H_VIDEO_FILER_24H = 'com.weiqu.video.filter.apptype.h.item.24h.'
  576. # 小程序地域分组小时级更新结果存放 redis key前缀,
  577. # 完整格式:recall:item:score:apptype:region:h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  578. RECALL_KEY_NAME_PREFIX_REGION_BY_H = 'recall:item:score:apptype:region:h:'
  579. # 小程序地域分组天级更新结果与小程序地域分组小时级更新结果去重后 存放 redis key前缀,
  580. # 完整格式:com.weiqu.video.recall.hot.item.score.dup1.region.day.h.{region}.{rule_key}.{date}.{h}
  581. RECALL_KEY_NAME_PREFIX_DUP1_REGION_DAY_H = 'com.weiqu.video.recall.hot.item.score.dup1.region.day.h.'
  582. # 小程序地域分组小时级更新24h结果与小程序地域分组小时级更新结果去重后 存放 redis key前缀,
  583. # 完整格式:recall:item:score:apptype:region:dup1:region24h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  584. RECALL_KEY_NAME_PREFIX_DUP1_REGION_24H_H = 'recall:item:score:apptype:region:dup1:region24h:'
  585. # 小程序天级更新结果与 小程序地域分组天级更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  586. # 完整格式:com.weiqu.video.recall.hot.item.score.dup2.region.day.h.{region}.{rule_key}.{date}.{h}
  587. RECALL_KEY_NAME_PREFIX_DUP2_REGION_DAY_H = 'com.weiqu.video.recall.hot.item.score.dup2.region.day.h.'
  588. # 小程序24h更新结果与 小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  589. # 完整格式:recall:item:score:apptype:region:dup2:24h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  590. RECALL_KEY_NAME_PREFIX_DUP2_REGION_24H_H = 'recall:item:score:apptype:region:dup2:24h:'
  591. # 小程序小时级24h数据 筛选后的剩余数据 更新结果 与 小程序24h更新结果/小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  592. # 完整格式:recall:item:score:apptype:region:dup3:24h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  593. RECALL_KEY_NAME_PREFIX_DUP3_REGION_24H_H = 'recall:item:score:apptype:region:dup3:24h:'
  594. # 小程序48h更新结果与 小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  595. # 完整格式:recall:item:score:apptype:region:dup2:48h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  596. RECALL_KEY_NAME_PREFIX_DUP2_REGION_48H_H = 'recall:item:score:apptype:region:dup2:48h:'
  597. # 小程序小时级48h数据 筛选后的剩余数据 更新结果 与 小程序48h更新结果/小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  598. # 完整格式:recall:item:score:apptype:region:dup3:48h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  599. RECALL_KEY_NAME_PREFIX_DUP3_REGION_48H_H = 'recall:item:score:apptype:region:dup3:48h:'
  600. # 小程序离线ROV模型结果与 小程序天级更新结果/小程序地域分组天级更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  601. # 完整格式:recall:item:score:apptype:region:dup4:rov:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  602. RECALL_KEY_NAME_PREFIX_DUP_REGION_H = 'recall:item:score:apptype:region:dup4:rov:'
  603. # 地域分组小时级视频状态不符合推荐要求的列表 redis key,
  604. # 完整格式:com.weiqu.video.filter.apptype.region.h.item.{region}.{appType}.{data_key}.{rule_key}
  605. REGION_H_VIDEO_FILER = 'com.weiqu.video.filter.apptype.region.h.item.'
  606. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.24h.{region}.{rule_key}
  607. # H_VIDEO_FILER_24H = 'com.weiqu.video.filter.h.item.24h.'
  608. # 小程序地域分组天级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.region.day.{region}.{rule_key}.{date}
  609. RECALL_KEY_NAME_PREFIX_REGION_BY_DAY = 'com.weiqu.video.recall.item.score.region.day.'
  610. # 小程序地域分组小时级更新24h结果存放 redis key前缀,
  611. # 完整格式:recall:item:score:apptype:region:24h:{region}:{appType}:{data_key}:{rule_key}:{date}:{h}
  612. RECALL_KEY_NAME_PREFIX_REGION_BY_24H = 'recall:item:score:apptype:region:24h:'
  613. # 小程序天级更新结果与 小程序地域分组小时级更新24h结果 去重后 存放 redis key前缀,
  614. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.region.day.24h.{region}.{rule_key}.{date}.{h}
  615. RECALL_KEY_NAME_PREFIX_DUP_REGION_DAY_24H = 'com.weiqu.video.recall.hot.item.score.dup.region.day.24h.'
  616. # 小程序离线ROV模型结果与 小程序天级更新结果/小程序地域分组小时级更新24h结果 去重后 存放 redis key前缀,
  617. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.region.24h.{region}.{rule_key}.{date}.{h}
  618. RECALL_KEY_NAME_PREFIX_DUP_REGION_24H = 'com.weiqu.video.recall.hot.item.score.dup.region.24h.'
  619. # 地域分组小时级更新24h视频状态不符合推荐要求的列表 redis key,
  620. # 完整格式:com.weiqu.video.filter.apptype.region.h.item.24h.{region}.{appType}.{data_key}.{rule_key}
  621. REGION_H_VIDEO_FILER_24H = 'com.weiqu.video.filter.apptype.region.h.item.24h.'
  622. # 小程序老视频更新结果存放 redis key 前缀,完整格式:'com.weiqu.video.recall.old.item.{date}'
  623. RECALL_KEY_NAME_PREFIX_OLD_VIDEOS = 'com.weiqu.video.recall.old.item.'
  624. # app应用 小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:rov:app:{date}
  625. RECALL_KEY_NAME_PREFIX_APP = 'recall:item:score:rov:app:'
  626. # app应用 运营提供的小时级数据存放 redis key前缀,完整格式:com.weiqu.video.app.op.item.score.{date}.{h}
  627. APP_OP_VIDEOS_KEY_NAME_PREFIX = 'com.weiqu.video.app.op.item.score.'
  628. # app应用 小时级数据更新最终结果存放 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.app.{date}.{h}
  629. APP_FINAL_RECALL_KEY_NAME_PREFIX = 'com.weiqu.video.recall.hot.item.score.app.'
  630. # appType:[18, 19]小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:{appType}:{date}:{h}
  631. RECALL_KEY_NAME_PREFIX_APP_TYPE = 'recall:item:score:'
  632. # appType = 6, ROV召回池redis key前缀,完整格式:com.weiqu.video.recall.hot.apptype.h.item.score.{appType}.{h}
  633. # RECALL_KEY_NAME_PREFIX_APP_TYPE = 'com.weiqu.video.recall.hot.apptype.h.item.score.'
  634. # 流量池离线模型结果存放 redis key前缀,完整格式 flow:pool:item:score:{appType}
  635. FLOWPOOL_KEY_NAME_PREFIX = 'flow:pool:item:score:'
  636. # 快速曝光流量池数据存放 redis key前缀,完整格式 flow:pool:quick:item:score:{appType}:{flowPool_id}
  637. QUICK_FLOWPOOL_KEY_NAME_PREFIX = 'flow:pool:quick:item:score:'
  638. # 快速曝光流量池分发概率 redis key前缀,完整格式 flow:pool:quick:distribute:rate:{flowPool_id}
  639. QUICK_FLOWPOOL_DISTRIBUTE_RATE_KEY_NAME_PREFIX = 'flow:pool:quick:distribute:rate:'
  640. # 兜底视频redis存储key
  641. BOTTOM_KEY_NAME = 'bottom:videos'
  642. # 兜底视频数量
  643. BOTTOM_NUM = 1000
  644. # 首页兜底视频json存储 redis-key
  645. BOTTOM_JSON_KEY_NAME = 'com.weiqu.video.homepage.bottom.info.json.item'
  646. # 修改ROV的视频 redis key
  647. UPDATE_ROV_KEY_NAME = 'update:rov:item:score:applet'
  648. UPDATE_ROV_KEY_NAME_APP = 'update:rov:item:score:app'
  649. # 生效中的置顶视频列表 redis key
  650. TOP_VIDEO_LIST_KEY_NAME = 'top:item:score:area:applet'
  651. TOP_VIDEO_LIST_KEY_NAME_APP = 'top:item:score:area:app'
  652. # rovScore公差
  653. ROV_SCORE_D = 0.001
  654. # width : height > 1 的视频列表 redis key, zset存储,value为videoId,score为w_h_rate
  655. W_H_RATE_UP_1_VIDEO_LIST_KEY_NAME = {
  656. 'rov_recall': 'com.weiqu.video.rov.w.h.rate.1.item', # rov召回池视频
  657. 'bottom_last': 'com.weiqu.video.bottom.last.w.h.rate.1.item' # 二次兜底视频
  658. }
  659. # 头部视频对应运营强插的相关视频 redis 存储 key 前缀, 完整key格式:com.weiqu.video.relevant.videos.item.{videoId}
  660. RELEVANT_VIDEOS_WITH_OP_KEY_NAME = 'com.weiqu.video.relevant.videos.item.'
  661. # 有设置运营强插相关视频的头部视频id redis存储key
  662. RELEVANT_TOP_VIDEOS_KEY_NAME = 'com.weiqu.video.relevant.top.video_ids'
  663. # 按位置排序redis存储key
  664. RECALL_POSITION1_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.1'
  665. RECALL_POSITION2_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.2'
  666. SIM_N_19 = 4
  667. # 最惊奇电影类视频相关推荐列表存放 redis key前缀,完整格式: com.weiqu.movie.relevant.list.item.{videoId}
  668. MOVIE_RELEVANT_LIST_KEY_NAME_PREFIX = 'com.weiqu.movie.relevant.list.item.'
  669. # 特殊mid 及 指定视频 数据
  670. SPECIAL_MID_VIDEOS_PROJECT = {
  671. 'mid': 'loghubods',
  672. 'videos': 'loghubods'
  673. }
  674. SPECIAL_MID_VIDEOS_TABLE = {
  675. 'mid': 'shielded_mid',
  676. 'videos': 'shielded_video_list'
  677. }
  678. # 特殊mid更新结果存放 redis key ,完整格式:'special:mid'
  679. KEY_NAME_SPECIAL_MID = 'special:mid'
  680. # 特殊mid对应指定视频列表更新结果存放 redis key 前缀,完整格式:'special:videos:item:{date}'
  681. KEY_NAME_PREFIX_SPECIAL_VIDEOS = 'special:videos:item:'
  682. # 限流视频集合存放 redis key前缀,完整格式:'limit:videos:{date}'
  683. KEY_NAME_PREFIX_LIMIT_VIDEO_SET = 'limit:videos:'
  684. # 限流视频最大分发数记录 redis key,完整格式:'limit:video:max:distribute:count'
  685. KEY_NAME_PREFIX_LIMIT_VIDEOS = 'limit:video:max:distribute:count'
  686. # 限流视频分发数记录 redis key前缀,完整格式:'limit:video:distribute:count:{videoId}'
  687. KEY_NAME_PREFIX_LIMIT_VIDEO_DISTRIBUTE_COUNT = 'limit:video:distribute:count:'
  688. # 本山祝福视频列表,在北京+重庆+无地域划分表中屏蔽
  689. PROJECT_BENSHAN_ZHUFU = 'loghubods'
  690. TABLE_BENSHAN_ZHUFU = 'benshanzhufu_videolist'
  691. # 本山祝福视频redis存储key
  692. BENSHAN_ZHUFU_KEY_NAME = 'benshanzf:videos'
  693. # 屏蔽视频配置 key:region_code, value:videos key list
  694. SHIELD_CONFIG = {
  695. '110000': [BENSHAN_ZHUFU_KEY_NAME, ],
  696. '500000': [BENSHAN_ZHUFU_KEY_NAME, ],
  697. '-1': [BENSHAN_ZHUFU_KEY_NAME, ],
  698. }
  699. class DevelopmentConfig(BaseConfig):
  700. """开发环境配置"""
  701. # 报警内容 环境区分
  702. ENV_TEXT = "开发环境"
  703. # 项目存放目录
  704. PROJECT_PATH = '/data2/rov-offline'
  705. # 测试环境redis地址
  706. REDIS_INFO = {
  707. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  708. 'port': 6379,
  709. 'password': 'Wqsd@2019',
  710. }
  711. # Hologres连接参数,本地使用
  712. HOLOGRES_INFO = {
  713. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou.hologres.aliyuncs.com',
  714. 'port': 80,
  715. 'dbname': 'dssm',
  716. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  717. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  718. }
  719. # 测试环境mysql地址
  720. MYSQL_INFO = {
  721. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  722. 'port': 3306,
  723. 'user': 'wx2016_longvideo',
  724. 'password': 'wx2016_longvideoP@assword1234',
  725. 'db': 'longvideo',
  726. 'charset': 'utf8'
  727. }
  728. # 测试环境 过滤用mysql地址
  729. FILTER_MYSQL_INFO = {
  730. 'host': 'am-bp1g3ys9u00u483uc131930.ads.aliyuncs.com',
  731. 'port': 3306,
  732. 'user': 'lv_manager',
  733. 'password': 'lv_manager@2020',
  734. 'db': 'longvideo',
  735. 'charset': 'utf8'
  736. }
  737. # 日志服务配置
  738. ALIYUN_LOG = {
  739. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  740. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  741. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  742. 'PROJECT': 'rov-server-test',
  743. }
  744. # Hologres视频状态存储表名
  745. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  746. # 快速曝光流量池ID
  747. QUICK_FLOW_POOL_ID = 3
  748. # 获取流量池分发配置接口地址
  749. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getConfig'
  750. # 从流量池获取视频接口地址
  751. GET_VIDEOS_FROM_POOL_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  752. # 获取视频在流量池中的剩余可分发数接口地址
  753. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  754. # 计算完ROV通知后端接口地址
  755. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateRovScore'
  756. # 获取置顶视频列表接口地址
  757. TOP_VIDEO_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/topVideoList'
  758. # 获取首页兜底视频json接口地址
  759. BOTTOM_JSON_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/video/distribute/structure/video/list'
  760. # 通知后端更新兜底视频接口地址
  761. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  762. # 获取限流视频接口地址
  763. GET_VIDEO_LIMIT_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getVideoLimitList'
  764. # logs 上传oss 目标Bucket指定目录
  765. OSS_FOLDER_LOGS = 'rov-offline/dev/logs/'
  766. # data 上传oss 目标Bucket指定目录
  767. OSS_FOLDER_DATA = 'rov-offline/dev/data/'
  768. class TestConfig(BaseConfig):
  769. """测试环境配置"""
  770. # 报警内容 环境区分
  771. ENV_TEXT = "测试环境"
  772. # 项目存放目录
  773. PROJECT_PATH = '/data2/rov-offline'
  774. # 测试环境redis地址
  775. REDIS_INFO = {
  776. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  777. 'port': 6379,
  778. 'password': 'Wqsd@2019',
  779. }
  780. # Hologres连接参数,服务器使用
  781. HOLOGRES_INFO = {
  782. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  783. 'port': 80,
  784. 'dbname': 'dssm',
  785. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  786. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  787. }
  788. # 测试环境mysql地址
  789. MYSQL_INFO = {
  790. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  791. 'port': 3306,
  792. 'user': 'wx2016_longvideo',
  793. 'password': 'wx2016_longvideoP@assword1234',
  794. 'db': 'longvideo',
  795. 'charset': 'utf8'
  796. }
  797. # 测试环境 过滤用mysql地址
  798. FILTER_MYSQL_INFO = {
  799. 'host': 'am-bp1g3ys9u00u483uc131930.ads.aliyuncs.com',
  800. 'port': 3306,
  801. 'user': 'lv_manager',
  802. 'password': 'lv_manager@2020',
  803. 'db': 'longvideo',
  804. 'charset': 'utf8'
  805. }
  806. # 日志服务配置
  807. ALIYUN_LOG = {
  808. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  809. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  810. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  811. 'PROJECT': 'rov-server-test',
  812. }
  813. # Hologres视频状态存储表名
  814. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  815. # 快速曝光流量池ID
  816. QUICK_FLOW_POOL_ID = 3
  817. # 获取流量池分发配置接口地址
  818. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getConfig'
  819. # 从流量池获取视频接口地址
  820. GET_VIDEOS_FROM_POOL_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  821. # 获取视频在流量池中的剩余可分发数接口地址
  822. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  823. # 计算完ROV通知后端接口地址
  824. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateRovScore'
  825. # 获取置顶视频列表接口地址
  826. TOP_VIDEO_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/topVideoList'
  827. # 获取首页兜底视频json接口地址
  828. BOTTOM_JSON_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/video/distribute/structure/video/list'
  829. # 通知后端更新兜底视频接口地址
  830. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  831. # 获取限流视频接口地址
  832. GET_VIDEO_LIMIT_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getVideoLimitList'
  833. # logs 上传oss 目标Bucket指定目录
  834. OSS_FOLDER_LOGS = 'rov-offline/test/logs/'
  835. # data 上传oss 目标Bucket指定目录
  836. OSS_FOLDER_DATA = 'rov-offline/test/data/'
  837. class PreProductionConfig(BaseConfig):
  838. """预发布环境配置"""
  839. # 报警内容 环境区分
  840. ENV_TEXT = "预发布环境"
  841. # 项目存放目录
  842. PROJECT_PATH = '/data/rov-offline'
  843. # redis地址
  844. REDIS_INFO = {
  845. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  846. 'port': 6379,
  847. 'password': 'Wqsd@2019',
  848. }
  849. # Hologres连接参数,服务器使用
  850. HOLOGRES_INFO = {
  851. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  852. 'port': 80,
  853. 'dbname': 'dssm',
  854. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  855. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  856. }
  857. # 生产环境mysql地址
  858. MYSQL_INFO = {
  859. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  860. 'port': 3306,
  861. 'user': 'wx2016_longvideo',
  862. 'password': 'wx2016_longvideoP@assword1234',
  863. 'db': 'longvideo',
  864. 'charset': 'utf8'
  865. }
  866. # 生产环境 过滤用mysql地址
  867. FILTER_MYSQL_INFO = {
  868. 'host': 'am-bp15tqt957i3b3sgi131950.ads.aliyuncs.com',
  869. 'port': 3306,
  870. 'user': 'lv_manager',
  871. 'password': 'lv_manager@2020',
  872. 'db': 'longvideo',
  873. 'charset': 'utf8'
  874. }
  875. # 日志服务配置
  876. ALIYUN_LOG = {
  877. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  878. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  879. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  880. 'PROJECT': 'rov-server',
  881. }
  882. # Hologres视频状态存储表名
  883. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  884. # 快速曝光流量池ID
  885. QUICK_FLOW_POOL_ID = 3
  886. # 获取流量池分发配置接口地址
  887. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/getConfig'
  888. # 从流量池获取视频接口地址
  889. GET_VIDEOS_FROM_POOL_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  890. # 获取视频在流量池中的剩余可分发数接口地址
  891. GET_REMAIN_VIEW_COUNT_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  892. # 计算完ROV通知后端接口地址
  893. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videopre-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateRovScore'
  894. # 获取置顶视频列表接口地址
  895. TOP_VIDEO_LIST_URL = 'http://speedpre.wx.com/longvideoapi/openapi/recommend/topVideoList'
  896. # 获取首页兜底视频json接口地址
  897. BOTTOM_JSON_URL = 'http://speedpre.wx.com/longvideoapi/openapi/video/distribute/structure/video/list'
  898. # 通知后端更新兜底视频接口地址
  899. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videopre-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  900. # 获取限流视频接口地址
  901. GET_VIDEO_LIMIT_LIST_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/getVideoLimitList'
  902. # logs 上传oss 目标Bucket指定目录
  903. OSS_FOLDER_LOGS = 'rov-offline/pre/logs/'
  904. # data 上传oss 目标Bucket指定目录
  905. OSS_FOLDER_DATA = 'rov-offline/pre/data/'
  906. class ProductionConfig(BaseConfig):
  907. """生产环境配置"""
  908. # 报警内容 环境区分
  909. ENV_TEXT = "生产环境"
  910. # 项目存放目录
  911. PROJECT_PATH = '/data/rov-offline'
  912. # 线上环境redis地址
  913. REDIS_INFO = {
  914. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  915. 'port': 6379,
  916. 'password': 'Wqsd@2019',
  917. }
  918. # Hologres连接参数,服务器使用
  919. HOLOGRES_INFO = {
  920. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  921. 'port': 80,
  922. 'dbname': 'dssm',
  923. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  924. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  925. }
  926. # 生产环境mysql地址
  927. MYSQL_INFO = {
  928. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  929. 'port': 3306,
  930. 'user': 'wx2016_longvideo',
  931. 'password': 'wx2016_longvideoP@assword1234',
  932. 'db': 'longvideo',
  933. 'charset': 'utf8'
  934. }
  935. # 生产环境 过滤用mysql地址
  936. FILTER_MYSQL_INFO = {
  937. 'host': 'am-bp15tqt957i3b3sgi131950.ads.aliyuncs.com',
  938. 'port': 3306,
  939. 'user': 'lv_manager',
  940. 'password': 'lv_manager@2020',
  941. 'db': 'longvideo',
  942. 'charset': 'utf8'
  943. }
  944. # 日志服务配置
  945. ALIYUN_LOG = {
  946. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  947. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  948. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  949. 'PROJECT': 'rov-server',
  950. }
  951. # Hologres视频状态存储表名
  952. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  953. # 快速曝光流量池ID
  954. QUICK_FLOW_POOL_ID = 3
  955. # 获取流量池分发配置接口地址
  956. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/getConfig'
  957. # 从流量池获取视频接口地址
  958. GET_VIDEOS_FROM_POOL_URL = 'http://api-internal.piaoquantv.com/flowpool/video/getAllVideo'
  959. # 获取视频在流量池中的剩余可分发数接口地址
  960. GET_REMAIN_VIEW_COUNT_URL = 'http://api-internal.piaoquantv.com/flowpool/video/remainViewCount'
  961. # 计算完ROV通知后端接口地址
  962. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateRovScore'
  963. # 获取置顶视频列表接口地址
  964. TOP_VIDEO_LIST_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/topVideoList'
  965. # 获取首页兜底视频json接口地址
  966. BOTTOM_JSON_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/video/distribute/structure/video/list'
  967. # 通知后端更新兜底视频接口地址
  968. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  969. # 获取限流视频接口地址
  970. GET_VIDEO_LIMIT_LIST_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/getVideoLimitList'
  971. # logs 上传oss 目标Bucket指定目录
  972. OSS_FOLDER_LOGS = 'rov-offline/pro/logs/'
  973. # data 上传oss 目标Bucket指定目录
  974. OSS_FOLDER_DATA = 'rov-offline/pro/data/'
  975. def set_config():
  976. # 获取环境变量 ROV_OFFLINE_ENV
  977. env = os.environ.get('ROV_OFFLINE_ENV')
  978. # env = 'dev'
  979. if env is None:
  980. # log_.error('ENV ERROR: is None!')
  981. return
  982. if env == 'dev':
  983. return DevelopmentConfig(), env
  984. elif env == 'test':
  985. return TestConfig(), env
  986. elif env == 'pre':
  987. return PreProductionConfig(), env
  988. elif env == 'pro':
  989. return ProductionConfig(), env
  990. else:
  991. # log_.error('ENV ERROR: is {}'.format(env))
  992. return