config.py 70 KB

1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677787980818283848586878889909192939495969798991001011021031041051061071081091101111121131141151161171181191201211221231241251261271281291301311321331341351361371381391401411421431441451461471481491501511521531541551561571581591601611621631641651661671681691701711721731741751761771781791801811821831841851861871881891901911921931941951961971981992002012022032042052062072082092102112122132142152162172182192202212222232242252262272282292302312322332342352362372382392402412422432442452462472482492502512522532542552562572582592602612622632642652662672682692702712722732742752762772782792802812822832842852862872882892902912922932942952962972982993003013023033043053063073083093103113123133143153163173183193203213223233243253263273283293303313323333343353363373383393403413423433443453463473483493503513523533543553563573583593603613623633643653663673683693703713723733743753763773783793803813823833843853863873883893903913923933943953963973983994004014024034044054064074084094104114124134144154164174184194204214224234244254264274284294304314324334344354364374384394404414424434444454464474484494504514524534544554564574584594604614624634644654664674684694704714724734744754764774784794804814824834844854864874884894904914924934944954964974984995005015025035045055065075085095105115125135145155165175185195205215225235245255265275285295305315325335345355365375385395405415425435445455465475485495505515525535545555565575585595605615625635645655665675685695705715725735745755765775785795805815825835845855865875885895905915925935945955965975985996006016026036046056066076086096106116126136146156166176186196206216226236246256266276286296306316326336346356366376386396406416426436446456466476486496506516526536546556566576586596606616626636646656666676686696706716726736746756766776786796806816826836846856866876886896906916926936946956966976986997007017027037047057067077087097107117127137147157167177187197207217227237247257267277287297307317327337347357367377387397407417427437447457467477487497507517527537547557567577587597607617627637647657667677687697707717727737747757767777787797807817827837847857867877887897907917927937947957967977987998008018028038048058068078088098108118128138148158168178188198208218228238248258268278288298308318328338348358368378388398408418428438448458468478488498508518528538548558568578588598608618628638648658668678688698708718728738748758768778788798808818828838848858868878888898908918928938948958968978988999009019029039049059069079089099109119129139149159169179189199209219229239249259269279289299309319329339349359369379389399409419429439449459469479489499509519529539549559569579589599609619629639649659669679689699709719729739749759769779789799809819829839849859869879889899909919929939949959969979989991000100110021003100410051006100710081009101010111012101310141015101610171018101910201021102210231024102510261027102810291030103110321033103410351036103710381039104010411042104310441045104610471048104910501051105210531054105510561057105810591060106110621063106410651066106710681069107010711072107310741075107610771078107910801081108210831084108510861087108810891090109110921093109410951096109710981099110011011102110311041105110611071108110911101111111211131114111511161117111811191120112111221123112411251126112711281129113011311132113311341135113611371138113911401141114211431144114511461147114811491150115111521153115411551156115711581159116011611162116311641165116611671168116911701171117211731174117511761177117811791180118111821183118411851186118711881189119011911192119311941195119611971198119912001201120212031204120512061207120812091210121112121213121412151216121712181219122012211222122312241225122612271228122912301231123212331234123512361237123812391240124112421243124412451246124712481249125012511252125312541255125612571258125912601261126212631264126512661267126812691270127112721273127412751276127712781279128012811282128312841285128612871288128912901291129212931294129512961297129812991300130113021303130413051306130713081309131013111312131313141315131613171318131913201321132213231324132513261327132813291330133113321333133413351336133713381339134013411342134313441345134613471348134913501351135213531354135513561357135813591360136113621363136413651366136713681369137013711372137313741375137613771378137913801381138213831384138513861387138813891390139113921393139413951396139713981399140014011402140314041405140614071408140914101411141214131414141514161417141814191420142114221423142414251426142714281429143014311432143314341435143614371438143914401441144214431444144514461447144814491450145114521453145414551456145714581459146014611462146314641465146614671468146914701471147214731474147514761477147814791480148114821483148414851486148714881489149014911492149314941495149614971498149915001501150215031504150515061507150815091510151115121513
  1. # coding:utf-8
  2. import os
  3. # from log import Log
  4. # log_ = Log()
  5. class BaseConfig(object):
  6. # 产品标识
  7. APP_TYPE = {
  8. 'VLOG': 0, # vlog
  9. 'LOVE_LIVE': 4, # 票圈视频
  10. 'LONG_VIDEO': 5, # 内容精选
  11. 'SHORT_VIDEO': 6, # 票圈短视频
  12. 'WAN_NENG_VIDEO': 17, # 万能影视屋
  13. 'LAO_HAO_KAN_VIDEO': 18, # 老好看视频
  14. 'ZUI_JING_QI': 19, # 票圈最惊奇
  15. 'APP': 13, # 票圈视频APP
  16. 'PIAO_QUAN_VIDEO_PLUS': 21, # 票圈视频+
  17. 'JOURNEY': 22, # 票圈足迹
  18. 'BLESSING_YEAR': 3, # 票圈福年
  19. }
  20. # 数据存放路径
  21. DATA_DIR_PATH = './data'
  22. # oss 目标Bucket
  23. BUCKET_NAME = 'ali-recommend'
  24. # ODPS服务配置
  25. ODPS_CONFIG = {
  26. 'ENDPOINT': 'http://service.cn.maxcompute.aliyun.com/api',
  27. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  28. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  29. }
  30. # 飞书机器人配置
  31. FEISHU_ROBOT = {
  32. 'server_robot': {
  33. # webhook地址
  34. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/8de4de35-30ed-4692-8854-7a154e89b2f2',
  35. # 自定义关键词key_word
  36. 'key_word': '服务报警'
  37. },
  38. 'feature_monitor_robot': {
  39. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/0ca66b89-5e2b-4e89-a04a-a01fda31cc89',
  40. 'key_word': 'ROV特征监控'
  41. },
  42. 'ad_threshold_auto_update_robot': {
  43. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/f2494511-18b8-4fa9-8073-91a089dd4bf3',
  44. 'key_word': '广告模型阈值调整'
  45. },
  46. 'ad_user_group_update_robot': {
  47. 'webhook': 'https://open.feishu.cn/open-apis/bot/v2/hook/d7b29139-0656-4ec6-988e-ef593556795e',
  48. 'key_word': '用户分组数据更新'
  49. }
  50. }
  51. # 训练数据截止时间距当前日期间隔天数
  52. TRAIN_DIFF = 7
  53. # 训练数据所需数据范围天数
  54. TRAIN_DELTA_DAYS = 30
  55. # 训练数据表名
  56. TRAIN_PROJECT = 'usercdm'
  57. TRAIN_TABLE = 'rov_feature_add_v1'
  58. # 训练数据文件存放路径
  59. TRAIN_DATA_FILENAME = 'train_data.pickle'
  60. # 预测数据截止时间距当前日期间隔天数
  61. PREDICT_DIFF = 1
  62. # 预测数据所需数据范围天数
  63. PREDICT_DELTA_DAYS = 1
  64. # 预测数据表名
  65. PREDICT_PROJECT = 'usercdm'
  66. PREDICT_TABLE = 'rov_predict_table_add_v1'
  67. # 预测数据文件存放路径
  68. PREDICT_DATA_FILENAME = 'predict_data.pickle'
  69. # 模型存放文件
  70. MODEL_FILENAME = 'model.pickle'
  71. # 运营给定App小时级更新数据表名
  72. APP_OP_PROJECT = 'loghubods'
  73. APP_OP_TABLE = 'category_video_list_test1'
  74. # 小程序小时级规则参数
  75. RULE_PARAMS = {
  76. # 'rule1': {'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  77. # 'rule2': {'return_count': 20, 'score_rule': 0.001}, # 下线
  78. # 'rule3': {'view_type': 'pre-view', 'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  79. # 'rule4': {'cal_score_func': 2, 'return_count': 20, 'score_rule': 0}, # 下线
  80. # 'rule5': {'cal_score_func': 3, 'return_count': 20, 'score_rule': 0}, # 下线
  81. 'rule6': {'view_type': 'video-show', 'return_count': 20, 'score_rule': 0.005, 'platform_return_rate': 0.001},
  82. }
  83. # app_type: [18, 19]预测表名
  84. PREDICT_PROJECT_18_19 = {
  85. '18': 'loghubods', # 老好看
  86. '19': 'loghubods', # 最惊奇
  87. }
  88. PREDICT_TABLE_18_19 = {
  89. '18': 'haokan_video_list_each_hour_update', # 老好看
  90. '19': 'amazed_video_list_each_hour_update', # 最惊奇
  91. }
  92. # 预测数据文件存放路径
  93. PREDICT_DATA_FILENAME_18_19 = {
  94. '18': 'predict_data_18.pickle',
  95. '19': 'predict_data_19.pickle'
  96. }
  97. # 天级规则更新使用数据
  98. PROJECT_DAY = 'loghubods'
  99. TABLE_DAY = 'video_data_each_day_dataset'
  100. # 小程序天级规则参数
  101. RULE_PARAMS_DAY = {
  102. # 'rule1': {'return_count': 200},
  103. 'rule2': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001},
  104. }
  105. REGION_CODE = {
  106. '北京': '110000', '天津': '120000', '河北省': '130000', '山西省': '140000', '内蒙古': '150000',
  107. '辽宁省': '210000', '吉林省': '220000', '黑龙江省': '230000',
  108. '上海': '310000', '江苏省': '320000', '浙江省': '330000', '安徽省': '340000', '福建省': '350000', '江西省': '360000', '山东省': '370000',
  109. '河南省': '410000', '湖北省': '420000', '湖南省': '430000', '广东省': '440000', '广西': '450000', '海南省': '460000',
  110. '重庆': '500000', '四川省': '510000', '贵州省': '520000', '云南省': '530000', '西藏': '540000',
  111. '陕西省': '610000', '甘肃省': '620000', '青海省': '630000', '宁夏': '640000', '新疆': '650000',
  112. '台湾省': '710000', '香港': '810000', '澳门': '820000',
  113. 'None': '-1'
  114. }
  115. CITY_CODE = {
  116. '广州': '440100', '深圳': '440300', '成都': '510100',
  117. }
  118. REGION_CITY_MAPPING = {
  119. REGION_CODE['广东省']: [CITY_CODE['广州'], CITY_CODE['深圳'], ],
  120. REGION_CODE['四川省']: [CITY_CODE['成都'], ]
  121. }
  122. # 地域分组天级规则更新使用数据
  123. PROJECT_REGION_DAY = 'loghubods'
  124. TABLE_REGION_DAY = 'video_each_day_update_province'
  125. # 地域分组天级规则参数
  126. RULE_PARAMS_REGION_DAY = {
  127. 'rule1': {'view_type': 'pre-view', 'return_count': 21, 'score_rule': 0},
  128. }
  129. # ##### 区分appType数据
  130. DATA_PARAMS = {
  131. 'data1': {APP_TYPE['VLOG']: 0}, # vlog
  132. 'data2': {APP_TYPE['VLOG']: 0.5, APP_TYPE['LONG_VIDEO']: 0.5}, # [vlog, 内容精选]
  133. 'data3': {APP_TYPE['VLOG']: 0.5, APP_TYPE['LOVE_LIVE']: 0.5}, # [vlog, 票圈视频]
  134. 'data4': {APP_TYPE['VLOG']: 0.5, APP_TYPE['SHORT_VIDEO']: 0.5}, # [vlog, 票圈短视频]
  135. # 'data5': [APP_TYPE['VLOG'], APP_TYPE['ZUI_JING_QI']], # [vlog, 最惊奇]
  136. 'data6': {APP_TYPE['VLOG']: 0.25, APP_TYPE['LOVE_LIVE']: 0.25, APP_TYPE['SHORT_VIDEO']: 0.25,
  137. APP_TYPE['LONG_VIDEO']: 0.25},
  138. 'data7': {APP_TYPE['VLOG']: 0.5, APP_TYPE['APP']: 0.5}, # [vlog, 票圈视频APP]
  139. 'data8': {APP_TYPE['VLOG']: 0.7, APP_TYPE['LONG_VIDEO']: 0.3}, # [vlog, 内容精选]
  140. 'data9': {APP_TYPE['VLOG']: 0.3, APP_TYPE['LONG_VIDEO']: 0.7}, # [vlog, 内容精选]
  141. 'data10': {APP_TYPE['VLOG']: 0.2, APP_TYPE['LOVE_LIVE']: 0.8}, # [vlog, 票圈视频]
  142. 'data11': {APP_TYPE['VLOG']: 0.3, APP_TYPE['LOVE_LIVE']: 0.7}, # [vlog, 票圈视频]
  143. 'data12': {APP_TYPE['VLOG']: 0.4, APP_TYPE['SHORT_VIDEO']: 0.6}, # [vlog, 票圈短视频]
  144. 'data13': {APP_TYPE['VLOG']: 0.3, APP_TYPE['SHORT_VIDEO']: 0.7}, # [vlog, 票圈短视频]
  145. 'data14': {APP_TYPE['VLOG']: 0.78, APP_TYPE['LOVE_LIVE']: 0.11, APP_TYPE['SHORT_VIDEO']: 0.08,
  146. APP_TYPE['LONG_VIDEO']: 0.03},
  147. }
  148. # 小时级更新过去48h数据 loghubods.video_data_each_hour_dataset_48h_total_apptype
  149. PROJECT_48H_APP_TYPE = 'loghubods'
  150. TABLE_48H_APP_TYPE = 'video_data_each_hour_dataset_48h_total_apptype'
  151. # 小时级更新过去48h数据规则参数
  152. RULE_PARAMS_48H_APP_TYPE = {
  153. 'rule_params': {
  154. 'rule1': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001, 'view_type': 'preview'},
  155. },
  156. 'data_params': {
  157. 'data1': [APP_TYPE['VLOG'], ],
  158. },
  159. 'params_list': [
  160. {'data': 'data1', 'rule': 'rule1'},
  161. ],
  162. }
  163. # 天级更新过去30天数据 loghubods.video_data_30days_dataset_total_apptype
  164. PROJECT_30DAY_APP_TYPE = 'loghubods'
  165. TABLE_30DAY_APP_TYPE = 'video_data_30days_dataset_total_apptype'
  166. # 天级更新过去30天数据规则参数
  167. RULE_PARAMS_30DAY_APP_TYPE = {
  168. 'rule_params': {
  169. 'rule1': {'top': 500, 'view_type': 'preview'},
  170. },
  171. 'data_params': DATA_PARAMS,
  172. 'params_list': [
  173. {'data': 'data1', 'rule': 'rule1'},
  174. ]
  175. }
  176. # 小时级更新过去24h数据 loghubods.video_data_each_hour_dataset_24h_total_apptype
  177. PROJECT_24H_APP_TYPE = 'loghubods'
  178. TABLE_24H_APP_TYPE = 'video_data_each_hour_dataset_24h_total_apptype'
  179. # 小时级更新过去24h数据规则参数
  180. RULE_PARAMS_24H_APP_TYPE = {
  181. 'rule_params': {
  182. 'rule3': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001,
  183. 'view_type': 'preview'},
  184. 'rule4': {'cal_score_func': 2, 'return_count': 100, 'platform_return_rate': 0.001,
  185. 'view_type': 'preview', 'merge_func': 2},
  186. # # 无回流人群
  187. # 'rule5': {'return_count': 100, 'platform_return_rate': 0.001,
  188. # 'view_type': 'preview', 'click_score_rate': 0.7},
  189. # 'rule7': {'return_count': 100, 'platform_return_rate': 0.001,
  190. # 'view_type': 'preview', 'click_score_rate': 0.8},
  191. # # 有回流人群
  192. # 'rule6': {'return_count': 100, 'platform_return_rate': 0.001,
  193. # 'view_type': 'preview', 'back_score_rate': 0.7},
  194. # 'rule8': {'return_count': 100, 'platform_return_rate': 0.001,
  195. # 'view_type': 'preview', 'back_score_rate': 0.8},
  196. },
  197. 'data_params': DATA_PARAMS,
  198. 'params_list': [
  199. {'data': 'data1', 'rule': 'rule3', 'notify_backend': True},
  200. # {'data': 'data2', 'rule': 'rule3'},
  201. {'data': 'data2', 'rule': 'rule4'},
  202. # {'data': 'data3', 'rule': 'rule4'},
  203. # {'data': 'data4', 'rule': 'rule4'},
  204. # {'data': 'data6', 'rule': 'rule4'},
  205. {'data': 'data7', 'rule': 'rule4'},
  206. # {'data': 'data1', 'rule': 'rule5'},
  207. # {'data': 'data1', 'rule': 'rule6'},
  208. # {'data': 'data8', 'rule': 'rule4'},
  209. # {'data': 'data9', 'rule': 'rule4'},
  210. {'data': 'data10', 'rule': 'rule4'},
  211. # {'data': 'data11', 'rule': 'rule4'},
  212. # {'data': 'data12', 'rule': 'rule4'},
  213. # {'data': 'data13', 'rule': 'rule4'},
  214. # # {'data': 'data14', 'rule': 'rule4'},
  215. # {'data': 'data1', 'rule': 'rule7'},
  216. # {'data': 'data1', 'rule': 'rule8'},
  217. ]
  218. }
  219. # 地域分组小时级更新24h使用数据 loghubods.video_each_day_update_province_24h_total_apptype
  220. PROJECT_REGION_24H_APP_TYPE = 'loghubods'
  221. TABLE_REGION_24H_APP_TYPE = 'video_each_day_update_province_24h_total_apptype'
  222. # 地域分组小时级更新24h规则参数
  223. RULE_PARAMS_REGION_24H_APP_TYPE = {
  224. 'rule_params': {
  225. 'rule2': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  226. 'platform_return_rate': 0.001},
  227. # 'rule3': {'view_type': 'preview', 'return_count': 21, 'score_rule': 0,
  228. # 'platform_return_rate': 0.001},
  229. 'rule4': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  230. 'platform_return_rate': 0.001, 'merge_func': 2},
  231. 'rule5': {'view_type': 'preview', 'return_count': 21, 'score_rule': 0,
  232. 'platform_return_rate': 0.001, 'merge_func': 2},
  233. # # 无回流人群
  234. # 'rule6': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  235. # 'platform_return_rate': 0.001, 'click_score_rate': 0.7},
  236. # 'rule8': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  237. # 'platform_return_rate': 0.001, 'click_score_rate': 0.8},
  238. # # 有回流人群
  239. # 'rule7': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  240. # 'platform_return_rate': 0.001, 'back_score_rate': 0.7},
  241. # 'rule9': {'view_type': 'video-show', 'return_count': 21, 'score_rule': 0,
  242. # 'platform_return_rate': 0.001, 'back_score_rate': 0.8},
  243. },
  244. 'data_params': DATA_PARAMS,
  245. 'params_list': [
  246. {'data': 'data1', 'rule': 'rule2'},
  247. # {'data': 'data2', 'rule': 'rule2'},
  248. {'data': 'data2', 'rule': 'rule4'},
  249. # {'data': 'data3', 'rule': 'rule4'},
  250. # {'data': 'data4', 'rule': 'rule4'},
  251. # {'data': 'data6', 'rule': 'rule4'},
  252. {'data': 'data7', 'rule': 'rule5'},
  253. # {'data': 'data1', 'rule': 'rule6'},
  254. # {'data': 'data1', 'rule': 'rule7'},
  255. # {'data': 'data8', 'rule': 'rule4'},
  256. # {'data': 'data9', 'rule': 'rule4'},
  257. {'data': 'data10', 'rule': 'rule4'},
  258. # {'data': 'data11', 'rule': 'rule4'},
  259. # {'data': 'data12', 'rule': 'rule4'},
  260. # {'data': 'data13', 'rule': 'rule4'},
  261. # {'data': 'data14', 'rule': 'rule4'},
  262. # {'data': 'data1', 'rule': 'rule8'},
  263. # {'data': 'data1', 'rule': 'rule9'},
  264. ]
  265. }
  266. # 地域分组小时级规则更新使用数据
  267. PROJECT_REGION_APP_TYPE = 'loghubods'
  268. TABLE_REGION_APP_TYPE = 'video_each_hour_update_province_apptype'
  269. # 地域分组小时级规则参数
  270. RULE_PARAMS_REGION_APP_TYPE = {
  271. 'rule_params': {
  272. # 'rule2': {'view_type': 'video-show', 'platform_return_rate': 0.001, 'region_24h_rule_key': 'rule2'},
  273. # 'rule3': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  274. # 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule2'},
  275. 'rule4': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  276. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3'},
  277. # 涉政视频过滤
  278. 'rule4-1': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  279. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', 'political_filter': True},
  280. # 'rule6': {'view_type': 'preview', 'platform_return_rate': 0.001,
  281. # 'region_24h_rule_key': 'rule3', '24h_rule_key': 'rule2'},
  282. 'rule7': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  283. 'region_24h_rule_key': 'rule4', '24h_rule_key': 'rule4', 'merge_func': 2},
  284. 'rule7-1': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  285. 'region_24h_rule_key': 'rule4', '24h_rule_key': 'rule4', 'merge_func': 2,
  286. 'political_filter': True},
  287. 'rule8': {'view_type': 'preview', 'platform_return_rate': 0.001,
  288. 'region_24h_rule_key': 'rule5', '24h_rule_key': 'rule4', 'merge_func': 2},
  289. # 'rule9': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  290. # 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', '30day_rule_key': 'rule1'},
  291. # # 无回流人群
  292. # 'rule10': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  293. # 'region_24h_rule_key': 'rule6', '24h_rule_key': 'rule5', 'click_score_rate': 0.7},
  294. # 'rule13': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  295. # 'region_24h_rule_key': 'rule8', '24h_rule_key': 'rule7', 'click_score_rate': 0.8},
  296. # # 有回流人群
  297. # 'rule11': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  298. # 'region_24h_rule_key': 'rule7', '24h_rule_key': 'rule6', 'back_score_rate': 0.7},
  299. # 'rule14': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  300. # 'region_24h_rule_key': 'rule9', '24h_rule_key': 'rule8', 'back_score_rate': 0.8},
  301. # # 20点地域小时级列表中增加7点-19点地域小时级的优质视频
  302. # 'rule12': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  303. # 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3', 'add_videos_in_20h': True},
  304. # 地域小时级列表中增加 前6小时 地域小时级的优质视频
  305. 'rule15': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  306. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3',
  307. 'add_videos_with_pre_h': True, 'hour_count': 6},
  308. # 地域小时级列表中增加 前2小时 地域小时级的优质视频,排序优化1:半小时级列表中有的视频以本小时的分数为准
  309. 'rule16': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  310. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3',
  311. 'add_videos_with_pre_h': True, 'hour_count': 2, 'add_func': 'func2'},
  312. # 地域小时级列表中增加 前47小时 地域小时级的优质视频
  313. 'rule17': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  314. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3',
  315. 'add_videos_with_pre_h': True, 'hour_count': 47},
  316. # 地域小时级列表中增加 前3小时 地域小时级的优质视频,排序优化1:半小时级列表中有的视频以本小时的分数为准
  317. 'rule18': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  318. 'region_24h_rule_key': 'rule2', '24h_rule_key': 'rule3',
  319. 'add_videos_with_pre_h': True, 'hour_count': 3, 'add_func': 'func2'},
  320. },
  321. 'data_params': DATA_PARAMS,
  322. 'params_list': [
  323. {'data': 'data1', 'rule': 'rule4'}, # 095 vlog
  324. {'data': 'data1', 'rule': 'rule4-1'}, # 095-1
  325. # {'data': 'data2', 'rule': 'rule4'},
  326. {'data': 'data2', 'rule': 'rule7-1'}, # 121 内容精选
  327. # {'data': 'data3', 'rule': 'rule7'},
  328. # {'data': 'data4', 'rule': 'rule7'},
  329. # {'data': 'data6', 'rule': 'rule7'},
  330. {'data': 'data7', 'rule': 'rule8'}, # 票圈视频APP 10003.110156
  331. # {'data': 'data1', 'rule': 'rule9'},
  332. # {'data': 'data1', 'rule': 'rule10'},
  333. # {'data': 'data1', 'rule': 'rule11'},
  334. # {'data': 'data8', 'rule': 'rule7'},
  335. # {'data': 'data9', 'rule': 'rule7'},
  336. {'data': 'data10', 'rule': 'rule7'}, # 144 票圈视频
  337. # {'data': 'data11', 'rule': 'rule7'},
  338. # {'data': 'data12', 'rule': 'rule7'},
  339. # {'data': 'data13', 'rule': 'rule7'},
  340. # {'data': 'data1', 'rule': 'rule12'},
  341. # {'data': 'data14', 'rule': 'rule7'}, # 159
  342. # {'data': 'data1', 'rule': 'rule13'}, # 161
  343. # {'data': 'data1', 'rule': 'rule14'}, # 162
  344. # {'data': 'data1', 'rule': 'rule15'}, # 200 vlog
  345. {'data': 'data1', 'rule': 'rule16'}, # 214 vlog
  346. # {'data': 'data1', 'rule': 'rule17'}, # 215 vlog
  347. {'data': 'data1', 'rule': 'rule18'}, # 224 vlog
  348. ],
  349. }
  350. # 宗教视频更新使用数据
  351. RELIGION_VIDEOS = {
  352. 'catholicism': {
  353. 'project': 'loghubods',
  354. 'table': 'catholicism_videolist',
  355. # 视频列表更新结果存放 redis key 前缀,完整格式:'religion:catholicism:videos:item:{date}'
  356. 'key_name_prefix': 'religion:catholicism:videos:item:',
  357. }, # 天主教
  358. 'christianity': {
  359. 'project': 'loghubods',
  360. 'table': 'christianity_videolist',
  361. # 视频列表更新结果存放 redis key 前缀,完整格式:'religion:christianity:videos:item:{date}'
  362. 'key_name_prefix': 'religion:christianity:videos:item:',
  363. }, # 基督教
  364. }
  365. # 宗教用户更新使用数据
  366. RELIGION_USERS = {
  367. 'catholicism': {
  368. 'day': {
  369. 'project': 'loghubods',
  370. 'table': 'catholicism_midlist',
  371. },
  372. 'hour': {
  373. 'project': 'loghubods',
  374. 'table': 'catholicism_midlist_today',
  375. },
  376. # 用户列表更新结果存放 redis key 前缀,完整格式:'religion:catholicism:users:item:{hash_tag}:{date}'
  377. 'key_name_prefix': 'religion:catholicism:users:item:',
  378. }, # 天主教
  379. 'christianity': {
  380. 'day': {
  381. 'project': 'loghubods',
  382. 'table': 'christianity_midlist',
  383. },
  384. 'hour': {
  385. 'project': 'loghubods',
  386. 'table': 'christianity_midlist_today',
  387. },
  388. # 用户列表更新结果存放 redis key 前缀,完整格式:'religion:christianity:users:item:{hash_tag}:{date}'
  389. 'key_name_prefix': 'religion:christianity:users:item:',
  390. }, # 基督教
  391. }
  392. # 老好看宗教实验数据
  393. LHK_RULE_PARAMS = {
  394. 'rule_params': {
  395. 'lhk_rule1': {'initial_param': {'data': 'data1', 'rule': 'rule4-1'},
  396. 'religion_name': 'catholicism', 'rank_count': 2},
  397. 'lhk_rule2': {'initial_param': {'data': 'data1', 'rule': 'rule4-1'},
  398. 'religion_name': 'christianity', 'rank_count': 2},
  399. },
  400. 'params_list': [
  401. {'data': 'lhk_data', 'rule': 'lhk_rule1'}, # 天主教-2插1
  402. {'data': 'lhk_data', 'rule': 'lhk_rule2'}, # 基督教-2插1
  403. ]
  404. }
  405. # 不区分地域数据使用相对48h数据
  406. RULE_PARAMS_REGION_APP_TYPE_48H = {
  407. 'rule_params': {
  408. 'rule5': {'view_type': 'video-show-region', 'platform_return_rate': 0.001,
  409. 'region_24h_rule_key': 'rule2', '48h_rule_key': 'rule1'},
  410. },
  411. 'data_params': {
  412. 'data1': [APP_TYPE['VLOG'], ],
  413. },
  414. 'params_list': [
  415. {'data': 'data1', 'rule': 'rule5'},
  416. ],
  417. }
  418. # 老视频更新使用数据
  419. OLD_VIDEOS_PROJECT = 'loghubods'
  420. OLD_VIDEOS_TABLE = 'xcx_test_video'
  421. # 完整电影更新使用数据
  422. WHOLE_MOVIES_PROJECT = 'loghubods'
  423. WHOLE_MOVIES_TABLE = 'whole_movies'
  424. # 完整影视资源更新结果存放 redis key 前缀,完整格式:'com.weiqu.video.recall.whole.movies.item.{date}.{h}'
  425. RECALL_KEY_NAME_PREFIX_WHOLE_MOVIES = 'com.weiqu.video.recall.whole.movies.item.'
  426. # 小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:rov:applet:{date}
  427. RECALL_KEY_NAME_PREFIX = 'recall:item:score:rov:applet:'
  428. # 小程序小时级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.h.{rule_key}.{date}.{h}
  429. RECALL_KEY_NAME_PREFIX_BY_H = 'com.weiqu.video.recall.item.score.h.'
  430. # 小程序相对24h数据更新结果与 小程序小时级更新结果 去重后 存放 redis key前缀,
  431. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.24h.h.{rule_key}.{date}.{h}
  432. RECALL_KEY_NAME_PREFIX_DUP_24H_H = 'com.weiqu.video.recall.hot.item.score.dup.24h.h.'
  433. # 小程序离线ROV模型结果与 小程序小时级更新结果/小程序相对24h数据更新结果 去重后 存放 redis key前缀,
  434. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.h.{rule_key}.{date}.{h}
  435. RECALL_KEY_NAME_PREFIX_DUP_H = 'com.weiqu.video.recall.hot.item.score.dup.h.'
  436. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.{rule_key}
  437. H_VIDEO_FILER = 'com.weiqu.video.filter.h.item.'
  438. # 小程序天级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.day.{rule_key}.{date}
  439. RECALL_KEY_NAME_PREFIX_BY_DAY = 'com.weiqu.video.recall.item.score.day.'
  440. # 小程序离线ROV模型结果与小程序天级更新结果去重后 存放 redis key前缀,
  441. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.day.now.{rule_key}.{date}
  442. RECALL_KEY_NAME_PREFIX_DUP_DAY_NOW = 'com.weiqu.video.recall.hot.item.score.dup.day.now.'
  443. # 使用前一天小程序离线ROV模型结果与小程序天级更新结果去重后 存放 redis key前缀,
  444. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.day.pre.{rule_key}.{date}
  445. RECALL_KEY_NAME_PREFIX_DUP_DAY_PRE = 'com.weiqu.video.recall.hot.item.score.dup.day.pre.'
  446. # 小程序小时级48h数据更新结果存放 redis key前缀,
  447. # 完整格式:recall:item:score:48h:{data_key}:{rule_key}:{date}:{h}
  448. RECALL_KEY_NAME_PREFIX_BY_48H = 'recall:item:score:48h:'
  449. # 小程序小时级48h数据 筛选后的剩余数据 更新结果存放 redis key前缀,
  450. # 完整格式:recall:item:score:48h:other:{data_key}:{rule_key}:{date}:{h}
  451. RECALL_KEY_NAME_PREFIX_BY_48H_OTHER = 'recall:item:score:48h:other:'
  452. # 小程序小时级24h数据更新结果存放 redis key前缀,
  453. # 完整格式:recall:item:score:24h:{data_key}:{rule_key}:{date}:{h}
  454. RECALL_KEY_NAME_PREFIX_BY_24H = 'recall:item:score:24h:'
  455. # 小程序小时级24h数据 筛选后的剩余数据 更新结果存放 redis key前缀,
  456. # 完整格式:recall:item:score:24h:other:{data_key}:{rule_key}:{date}:{h}
  457. RECALL_KEY_NAME_PREFIX_BY_24H_OTHER = 'recall:item:score:24h:other:'
  458. # 小程序离线ROV模型结果与小程序小时级24h更新结果去重后 存放 redis key前缀,
  459. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.24h.{rule_key}.{date}.{h}
  460. RECALL_KEY_NAME_PREFIX_DUP_24H = 'com.weiqu.video.recall.hot.item.score.dup.24h.'
  461. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.apptype.h.item.24h.{appType}.{data_key}.{rule_key}
  462. H_VIDEO_FILER_24H = 'com.weiqu.video.filter.apptype.h.item.24h.'
  463. # 小程序相对30天数据天级更新结果存放 redis key前缀,
  464. # 完整格式:recall:item:score:30day:{data_key}:{rule_key}:{date}
  465. RECALL_KEY_NAME_PREFIX_30DAY = 'recall:item:score:30day:'
  466. # 小程序地域分组小时级更新结果存放 redis key前缀,
  467. # 完整格式:recall:item:score:region:h:{region}:{data_key}:{rule_key}:{date}:{h}
  468. RECALL_KEY_NAME_PREFIX_REGION_BY_H = 'recall:item:score:region:h:'
  469. # 小程序地域分组天级更新结果与小程序地域分组小时级更新结果去重后 存放 redis key前缀,
  470. # 完整格式:com.weiqu.video.recall.hot.item.score.dup1.region.day.h.{region}.{rule_key}.{date}.{h}
  471. RECALL_KEY_NAME_PREFIX_DUP1_REGION_DAY_H = 'com.weiqu.video.recall.hot.item.score.dup1.region.day.h.'
  472. # 小程序地域分组小时级更新24h结果与小程序地域分组小时级更新结果去重后 存放 redis key前缀,
  473. # 完整格式:recall:item:score:region:dup1:region24h:{region}:{data_key}:{rule_key}:{date}:{h}
  474. RECALL_KEY_NAME_PREFIX_DUP1_REGION_24H_H = 'recall:item:score:region:dup1:region24h:'
  475. # 小程序天级更新结果与 小程序地域分组天级更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  476. # 完整格式:com.weiqu.video.recall.hot.item.score.dup2.region.day.h.{region}.{rule_key}.{date}.{h}
  477. RECALL_KEY_NAME_PREFIX_DUP2_REGION_DAY_H = 'com.weiqu.video.recall.hot.item.score.dup2.region.day.h.'
  478. # 小程序24h更新结果与 小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  479. # 完整格式:recall:item:score:region:dup2:24h:{region}:{data_key}:{rule_key}:{date}:{h}
  480. RECALL_KEY_NAME_PREFIX_DUP2_REGION_24H_H = 'recall:item:score:region:dup2:24h:'
  481. # 小程序小时级24h数据 筛选后的剩余数据 更新结果 与 小程序24h更新结果/小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  482. # 完整格式:recall:item:score:region:dup3:24h:{region}:{data_key}:{rule_key}:{date}:{h}
  483. RECALL_KEY_NAME_PREFIX_DUP3_REGION_24H_H = 'recall:item:score:region:dup3:24h:'
  484. # 小程序48h更新结果与 小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  485. # 完整格式:recall:item:score:region:dup2:48h:{region}:{data_key}:{rule_key}:{date}:{h}
  486. RECALL_KEY_NAME_PREFIX_DUP2_REGION_48H_H = 'recall:item:score:region:dup2:48h:'
  487. # 小程序小时级48h数据 筛选后的剩余数据 更新结果 与 小程序48h更新结果/小程序地域分组24h更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  488. # 完整格式:recall:item:score:region:dup3:48h:{region}:{data_key}:{rule_key}:{date}:{h}
  489. RECALL_KEY_NAME_PREFIX_DUP3_REGION_48H_H = 'recall:item:score:region:dup3:48h:'
  490. # 小程序离线ROV模型结果与 小程序天级更新结果/小程序地域分组天级更新结果/小程序地域分组小时级更新结果 去重后 存放 redis key前缀,
  491. # 完整格式:recall:item:score:region:dup4:rov:{region}:{data_key}:{rule_key}:{date}:{h}
  492. RECALL_KEY_NAME_PREFIX_DUP_REGION_H = 'recall:item:score:region:dup4:rov:'
  493. # 地域分组小时级视频状态不符合推荐要求的列表 redis key,
  494. # 完整格式:com.weiqu.video.filter.apptype.region.h.item.{region}.{appType}.{data_key}.{rule_key}
  495. REGION_H_VIDEO_FILER = 'com.weiqu.video.filter.apptype.region.h.item.'
  496. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.24h.{region}.{rule_key}
  497. # H_VIDEO_FILER_24H = 'com.weiqu.video.filter.h.item.24h.'
  498. # 小程序地域分组天级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.region.day.{region}.{rule_key}.{date}
  499. RECALL_KEY_NAME_PREFIX_REGION_BY_DAY = 'com.weiqu.video.recall.item.score.region.day.'
  500. # 小程序地域分组小时级更新24h结果存放 redis key前缀,
  501. # 完整格式:recall:item:score:region:24h:{region}:{data_key}:{rule_key}:{date}:{h}
  502. RECALL_KEY_NAME_PREFIX_REGION_BY_24H = 'recall:item:score:region:24h:'
  503. # 小程序天级更新结果与 小程序地域分组小时级更新24h结果 去重后 存放 redis key前缀,
  504. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.region.day.24h.{region}.{rule_key}.{date}.{h}
  505. RECALL_KEY_NAME_PREFIX_DUP_REGION_DAY_24H = 'com.weiqu.video.recall.hot.item.score.dup.region.day.24h.'
  506. # 小程序离线ROV模型结果与 小程序天级更新结果/小程序地域分组小时级更新24h结果 去重后 存放 redis key前缀,
  507. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.region.24h.{region}.{rule_key}.{date}.{h}
  508. RECALL_KEY_NAME_PREFIX_DUP_REGION_24H = 'com.weiqu.video.recall.hot.item.score.dup.region.24h.'
  509. # 地域分组小时级更新24h视频状态不符合推荐要求的列表 redis key,
  510. # 完整格式:com.weiqu.video.filter.apptype.region.h.item.24h.{region}.{appType}.{data_key}.{rule_key}
  511. REGION_H_VIDEO_FILER_24H = 'com.weiqu.video.filter.apptype.region.h.item.24h.'
  512. # 小程序老视频更新结果存放 redis key 前缀,完整格式:'com.weiqu.video.recall.old.item.{date}'
  513. RECALL_KEY_NAME_PREFIX_OLD_VIDEOS = 'com.weiqu.video.recall.old.item.'
  514. # app应用 小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:rov:app:{date}
  515. RECALL_KEY_NAME_PREFIX_APP = 'recall:item:score:rov:app:'
  516. # app应用 运营提供的小时级数据存放 redis key前缀,完整格式:com.weiqu.video.app.op.item.score.{date}.{h}
  517. APP_OP_VIDEOS_KEY_NAME_PREFIX = 'com.weiqu.video.app.op.item.score.'
  518. # app应用 小时级数据更新最终结果存放 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.app.{date}.{h}
  519. APP_FINAL_RECALL_KEY_NAME_PREFIX = 'com.weiqu.video.recall.hot.item.score.app.'
  520. # appType:[18, 19]小程序离线ROV模型结果存放 redis key前缀,完整格式:recall:item:score:{appType}:{date}:{h}
  521. RECALL_KEY_NAME_PREFIX_APP_TYPE = 'recall:item:score:'
  522. # appType = 6, ROV召回池redis key前缀,完整格式:com.weiqu.video.recall.hot.apptype.h.item.score.{appType}.{h}
  523. # RECALL_KEY_NAME_PREFIX_APP_TYPE = 'com.weiqu.video.recall.hot.apptype.h.item.score.'
  524. # 流量池离线模型结果存放 redis key前缀,完整格式 flow:pool:item:score:{appType}
  525. FLOWPOOL_KEY_NAME_PREFIX = 'flow:pool:item:score:'
  526. # 快速曝光流量池数据存放 redis key前缀,完整格式 flow:pool:quick:item:score:{appType}:{flowPool_id}
  527. QUICK_FLOWPOOL_KEY_NAME_PREFIX = 'flow:pool:quick:item:score:'
  528. # 快速曝光流量池分发概率 redis key前缀,完整格式 flow:pool:quick:distribute:rate:{flowPool_id}
  529. QUICK_FLOWPOOL_DISTRIBUTE_RATE_KEY_NAME_PREFIX = 'flow:pool:quick:distribute:rate:'
  530. # 本地记录视频的可分发数,控制分发,完整key格式:flow:pool:local:distribute:count:{videoId}:{flowPool}
  531. LOCAL_DISTRIBUTE_COUNT_PREFIX = 'flow:pool:local:distribute:count:'
  532. # 兜底视频redis存储key
  533. BOTTOM_KEY_NAME = 'bottom:videos'
  534. # 兜底视频数量
  535. BOTTOM_NUM = 1000
  536. # 首页兜底视频json存储 redis-key
  537. BOTTOM_JSON_KEY_NAME = 'com.weiqu.video.homepage.bottom.info.json.item'
  538. # 兜底视频redis存储key-方案2:采用流量池视频作为兜底视频
  539. BOTTOM2_KEY_NAME = 'bottom2:videos'
  540. # 修改ROV的视频 redis key
  541. UPDATE_ROV_KEY_NAME = 'update:rov:item:score:applet'
  542. UPDATE_ROV_KEY_NAME_APP = 'update:rov:item:score:app'
  543. # 生效中的置顶视频列表 redis key
  544. TOP_VIDEO_LIST_KEY_NAME = 'top:item:score:area:applet'
  545. TOP_VIDEO_LIST_KEY_NAME_APP = 'top:item:score:area:app'
  546. # rovScore公差
  547. ROV_SCORE_D = 0.001
  548. # width : height > 1 的视频列表 redis key, zset存储,value为videoId,score为w_h_rate
  549. W_H_RATE_UP_1_VIDEO_LIST_KEY_NAME = {
  550. 'rov_recall': 'com.weiqu.video.rov.w.h.rate.1.item', # rov召回池视频
  551. 'bottom_last': 'com.weiqu.video.bottom.last.w.h.rate.1.item' # 二次兜底视频
  552. }
  553. # 头部视频对应运营强插的相关视频 redis 存储 key 前缀, 完整key格式:com.weiqu.video.relevant.videos.item.{videoId}
  554. RELEVANT_VIDEOS_WITH_OP_KEY_NAME = 'com.weiqu.video.relevant.videos.item.'
  555. # 有设置运营强插相关视频的头部视频id redis存储key
  556. RELEVANT_TOP_VIDEOS_KEY_NAME = 'com.weiqu.video.relevant.top.video_ids'
  557. # 按位置排序redis存储key
  558. RECALL_POSITION1_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.1'
  559. RECALL_POSITION2_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.2'
  560. SIM_N_19 = 4
  561. # 最惊奇电影类视频相关推荐列表存放 redis key前缀,完整格式: com.weiqu.movie.relevant.list.item.{videoId}
  562. MOVIE_RELEVANT_LIST_KEY_NAME_PREFIX = 'com.weiqu.movie.relevant.list.item.'
  563. # 特殊mid 及 指定视频 数据
  564. SPECIAL_MID_VIDEOS_PROJECT = {
  565. 'mid': 'loghubods',
  566. 'videos': 'loghubods'
  567. }
  568. SPECIAL_MID_VIDEOS_TABLE = {
  569. 'mid': 'shielded_mid',
  570. 'videos': 'shielded_video_list'
  571. }
  572. # 特殊mid更新结果存放 redis key ,完整格式:'special:mid'
  573. KEY_NAME_SPECIAL_MID = 'special:mid'
  574. # 特殊mid对应指定视频列表更新结果存放 redis key 前缀,完整格式:'special:videos:item:{date}'
  575. KEY_NAME_PREFIX_SPECIAL_VIDEOS = 'special:videos:item:'
  576. # 限流视频集合存放 redis key前缀,完整格式:'limit:videos:{date}'
  577. KEY_NAME_PREFIX_LIMIT_VIDEO_SET = 'limit:videos:'
  578. # 限流视频最大分发数记录 redis key,完整格式:'limit:video:max:distribute:count'
  579. KEY_NAME_PREFIX_LIMIT_VIDEOS = 'limit:video:max:distribute:count'
  580. # 限流视频分发数记录 redis key前缀,完整格式:'limit:video:distribute:count:{videoId}'
  581. KEY_NAME_PREFIX_LIMIT_VIDEO_DISTRIBUTE_COUNT = 'limit:video:distribute:count:'
  582. # 本山祝福视频列表,在北京+重庆+无地域划分表中屏蔽
  583. PROJECT_BENSHAN_ZHUFU = 'loghubods'
  584. TABLE_BENSHAN_ZHUFU = 'benshanzhufu_videolist'
  585. # 本山祝福视频redis存储key
  586. BENSHAN_ZHUFU_KEY_NAME = 'benshanzf:videos'
  587. # 小年糕视频列表,在北京+无地域划分表中屏蔽
  588. PROJECT_XNG = 'loghubods'
  589. TABLE_XNG = 'xng_videos'
  590. # 小年糕视频redis存储key
  591. XNG_KEY_NAME = 'xng:videos'
  592. # 特殊地区屏蔽危险视频列表,在广州+深圳+成都+无地域划分表中屏蔽
  593. PROJECT_SPECIAL_AREA_LIMIT = 'loghubods'
  594. TABLE_SPECIAL_AREA_LIMIT = 'special_area_recommend_limit'
  595. # 特殊地区屏蔽危险视频redis存储key
  596. SPECIAL_AREA_LIMIT_KEY_NAME = 'special:area:limit:videos'
  597. # 屏蔽视频配置 key:region_code, value:videos key list
  598. SHIELD_CONFIG = {
  599. REGION_CODE['北京']: [XNG_KEY_NAME, ],
  600. REGION_CODE['None']: [SPECIAL_AREA_LIMIT_KEY_NAME, XNG_KEY_NAME, ],
  601. CITY_CODE['广州']: [SPECIAL_AREA_LIMIT_KEY_NAME, ],
  602. CITY_CODE['深圳']: [SPECIAL_AREA_LIMIT_KEY_NAME, ],
  603. CITY_CODE['成都']: [SPECIAL_AREA_LIMIT_KEY_NAME, ],
  604. }
  605. # 涉政视频列表,除票圈vlog、票圈视频、票圈视频APP外其他端都屏蔽
  606. PROJECT_POLITICAL_VIDEOS = 'loghubods'
  607. TABLE_POLITICAL_VIDEOS = 'shielded_politics_videolist'
  608. # 涉政视频列表redis存储key
  609. POLITICAL_VIDEOS_KEY_NAME = 'political:videos'
  610. # 涉政视频可分发的端
  611. POLITICAL_RECOMMEND_APP_TYPE_LIST = [
  612. APP_TYPE['VLOG'], # vlog
  613. APP_TYPE['LOVE_LIVE'], # 票圈视频
  614. APP_TYPE['APP'], # 票圈视频APP
  615. ]
  616. # 宗教视频更新使用数据
  617. RELIGION_VIDEOS_PROJECT = 'loghubods'
  618. RELIGION_VIDEOS_TABLE = 'religion_video'
  619. # 宗教视频列表更新结果存放 redis key 前缀,完整格式:'religion:videos:item:{date}'
  620. KEY_NAME_PREFIX_RELIGION_VIDEOS = 'religion:videos:item:'
  621. # ##################################### 广告模型配置 #####################################
  622. # 广告模型数据
  623. ad_model_data = {
  624. 'user_group': {
  625. 'project': 'loghubods',
  626. 'table': 'user_share_return_admodel'
  627. },
  628. 'users_share_rate': {
  629. 'project': 'loghubods',
  630. 'table': 'usergroup_sharerate_admodel'
  631. },
  632. 'videos_share_rate': {
  633. 'project': 'loghubods',
  634. 'table': 'video_sharerate_admodel'
  635. },
  636. 'videos_share_rate_7days': {
  637. 'project': 'loghubods',
  638. 'table': 'video_sharerate_admodel_7days'
  639. },
  640. 'top10_videos': {
  641. 'project': 'loghubods',
  642. 'table': 'abnormal_videoid_admodel',
  643. 'abnormal_filter_param': 1.5
  644. }
  645. }
  646. # 自动调整广告模型阈值数据
  647. AD_THRESHOLD_AUTO_UPDATE_DATA = {
  648. 'project': 'loghubods',
  649. 'table': 'ad_view_monitor_hh_report_final'
  650. }
  651. # 调用广告模型appType列表
  652. AD_APP_TYPE_LIST = [
  653. APP_TYPE['VLOG'], # 票圈vlog
  654. APP_TYPE['PIAO_QUAN_VIDEO_PLUS'], # 票圈视频+
  655. APP_TYPE['LOVE_LIVE'], # 票圈视频
  656. APP_TYPE['SHORT_VIDEO'], # 票圈短视频
  657. APP_TYPE['LONG_VIDEO'], # 内容精选
  658. APP_TYPE['LAO_HAO_KAN_VIDEO'], # 老好看视频
  659. APP_TYPE['ZUI_JING_QI'], # 票圈最惊奇
  660. APP_TYPE['JOURNEY'], # 票圈足迹
  661. APP_TYPE['BLESSING_YEAR'], # 票圈福年
  662. ]
  663. # 广告模型视频数据
  664. AD_VIDEO_DATA_PARAMS = {
  665. 'videos_share_rate': {
  666. 'data1': APP_TYPE['VLOG'], # vlog
  667. 'data2': APP_TYPE['LOVE_LIVE'], # 票圈视频
  668. 'data3': APP_TYPE['LONG_VIDEO'], # 内容精选
  669. 'data4': APP_TYPE['SHORT_VIDEO'], # 票圈短视频
  670. 'data5': APP_TYPE['LAO_HAO_KAN_VIDEO'], # 老好看视频
  671. 'data6': APP_TYPE['ZUI_JING_QI'], # 票圈最惊奇
  672. },
  673. 'videos_share_rate_7days': {
  674. 'data1:7days': APP_TYPE['VLOG'], # vlog 优化4
  675. 'data4:7days': APP_TYPE['SHORT_VIDEO'], # 票圈短视频 优化4
  676. }
  677. }
  678. # 广告模型用户分组类别
  679. AD_MID_GROUP = {
  680. 'class1': [
  681. 'return1mids',
  682. 'return2_3mids',
  683. 'return4_8mids',
  684. 'return9_24mids',
  685. 'return25_nmids',
  686. 'return0share1mids',
  687. 'return0share2_nmids'],
  688. 'class2': [
  689. 'return1mids',
  690. 'return2_3mids',
  691. 'return4_8mids',
  692. 'return9_24mids',
  693. 'return25_29nmids',
  694. 'return30_nmids',
  695. 'return0share1mids',
  696. 'return0share2_nmids'
  697. ]
  698. }
  699. # 免广告用户组列表
  700. NO_AD_MID_GROUP_LIST = {
  701. 'class1': ['return25_nmids'],
  702. 'class2': ['return30_nmids'],
  703. }
  704. # 广告模型用户数据
  705. AD_USER_PARAMS = {
  706. 'data_params': {
  707. 'data1': APP_TYPE['VLOG'], # vlog
  708. 'data2': APP_TYPE['LOVE_LIVE'], # 票圈视频
  709. 'data3': APP_TYPE['LONG_VIDEO'], # 内容精选
  710. 'data4': APP_TYPE['SHORT_VIDEO'], # 票圈短视频
  711. 'data5': APP_TYPE['LAO_HAO_KAN_VIDEO'], # 老好看视频
  712. 'data6': APP_TYPE['ZUI_JING_QI'], # 票圈最惊奇
  713. },
  714. 'rule_params': {
  715. 'rule1': {
  716. 'group_list': AD_MID_GROUP['class1'],
  717. 'no_ad_mid_group_list': NO_AD_MID_GROUP_LIST['class1'],
  718. },
  719. 'rule2': {
  720. 'group_list': AD_MID_GROUP['class1'],
  721. 'no_ad_mid_group_list': NO_AD_MID_GROUP_LIST['class1'],
  722. 'remove_no_ad_group': True, # mean_group 预测&计算阈值时,去除不出广告的用户组
  723. }, # 优化1
  724. 'rule3': {
  725. 'group_list': AD_MID_GROUP['class2'],
  726. 'no_ad_mid_group_list': NO_AD_MID_GROUP_LIST['class2'],
  727. 'remove_no_ad_group': True, # mean_group 预测&计算阈值时,去除不出广告的用户组
  728. }, # 优化1 + 优化2
  729. },
  730. 'params_list': [
  731. {'data': 'data1', 'rule': 'rule1'}, # vlog
  732. {'data': 'data1', 'rule': 'rule2'}, # vlog + 优化1
  733. {'data': 'data4', 'rule': 'rule1'}, # 票圈短视频
  734. {'data': 'data1', 'rule': 'rule3'}, # vlog + 优化1 + 优化2
  735. {'data': 'data4', 'rule': 'rule3'}, # 票圈短视频 + 优化1 + 优化2
  736. {'data': 'data2', 'rule': 'rule1'}, # 票圈视频
  737. {'data': 'data3', 'rule': 'rule1'}, # 内容精选
  738. {'data': 'data2', 'rule': 'rule2'}, # 票圈视频 + 优化1
  739. {'data': 'data3', 'rule': 'rule2'}, # 内容精选 + 优化1
  740. {'data': 'data5', 'rule': 'rule2'}, # 老好看视频 + 优化1
  741. {'data': 'data6', 'rule': 'rule1'}, # 票圈最惊奇
  742. ]
  743. }
  744. # 广告模型abtest配置
  745. AD_ABTEST_CONFIG = {
  746. # 票圈vlog
  747. '173-a': {'video': {'data': 'data1'},
  748. 'user': {'data': 'data1', 'rule': 'rule1'}},
  749. '173-b': {'video': {'data': 'data1'},
  750. 'user': {'data': 'data1', 'rule': 'rule2'}},
  751. '173-c': {'video': {'data': 'data1'},
  752. 'user': {'data': 'data1', 'rule': 'rule3'}},
  753. '173-d': {'video': {'data': 'data1:7days'},
  754. 'user': {'data': 'data1', 'rule': 'rule1'}},
  755. '173-e': {'video': {'data': 'data1'},
  756. 'user': {'data': 'data1', 'rule': 'rule2'},
  757. 'care_model': True, 'threshold_rate': 0.5, # 关怀模式实验阈值
  758. },
  759. '173-f': {'video': {'data': 'data1'},
  760. 'user': {'data': 'data1', 'rule': 'rule2'},
  761. 'care_model': True, 'threshold_rate': 0.5,
  762. },
  763. # 票圈视频+
  764. '190-a': {'video': {'data': 'data1'},
  765. 'user': {'data': 'data1', 'rule': 'rule1'}},
  766. '190-b': {'video': {'data': 'data1'},
  767. 'user': {'data': 'data1', 'rule': 'rule2'}},
  768. # 票圈视频
  769. '194-a': {'video': {'data': 'data1'},
  770. 'user': {'data': 'data1', 'rule': 'rule1'}},
  771. '194-b': {'video': {'data': 'data1'},
  772. 'user': {'data': 'data1', 'rule': 'rule2'}},
  773. '194-c': {'video': {'data': 'data2'},
  774. 'user': {'data': 'data2', 'rule': 'rule1'}}, # 本端数据
  775. '194-d': {'video': {'data': 'data2'},
  776. 'user': {'data': 'data2', 'rule': 'rule2'}}, # 本端数据 + 优化1
  777. # 内容精选
  778. '195-a': {'video': {'data': 'data1'},
  779. 'user': {'data': 'data1', 'rule': 'rule1'}},
  780. '195-b': {'video': {'data': 'data1'},
  781. 'user': {'data': 'data1', 'rule': 'rule2'}},
  782. '195-c': {'video': {'data': 'data3'},
  783. 'user': {'data': 'data3', 'rule': 'rule1'}}, # 本端数据
  784. '195-d': {'video': {'data': 'data3'},
  785. 'user': {'data': 'data3', 'rule': 'rule2'}}, # 本端数据 + 优化1
  786. # 票圈短视频
  787. '196-a': {'video': {'data': 'data1'},
  788. 'user': {'data': 'data1', 'rule': 'rule1'}},
  789. '196-b': {'video': {'data': 'data4'},
  790. 'user': {'data': 'data4', 'rule': 'rule1'}},
  791. '196-c': {'video': {'data': 'data4'},
  792. 'user': {'data': 'data4', 'rule': 'rule3'}},
  793. '196-d': {'video': {'data': 'data4:7days'},
  794. 'user': {'data': 'data4', 'rule': 'rule3'}}, # 优化4
  795. # 老好看视频
  796. '197-a': {'video': {'data': 'data1'},
  797. 'user': {'data': 'data1', 'rule': 'rule1'}},
  798. '197-b': {'video': {'data': 'data1'},
  799. 'user': {'data': 'data1', 'rule': 'rule2'}}, # 优化1
  800. '197-c': {'video': {'data': 'data5'},
  801. 'user': {'data': 'data5', 'rule': 'rule2'}},
  802. '198-b': {'video': {'data': 'data6'},
  803. 'user': {'data': 'data6', 'rule': 'rule1'}},
  804. # 票圈足迹
  805. '242-a': {'video': {'data': 'data1'},
  806. 'user': {'data': 'data1', 'rule': 'rule1'}},
  807. '242-b': {'video': {'data': 'data1'},
  808. 'user': {'data': 'data1', 'rule': 'rule2'}},
  809. # 票圈福年
  810. '243-a': {'video': {'data': 'data1'},
  811. 'user': {'data': 'data1', 'rule': 'rule1'}},
  812. '243-b': {'video': {'data': 'data1'},
  813. 'user': {'data': 'data1', 'rule': 'rule2'}},
  814. }
  815. # 广告模型阈值计算配置
  816. AD_ABTEST_THRESHOLD_CONFIG = {
  817. # vlog
  818. '173': {
  819. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  820. 'ab1': {'group': 9 / 24, 'mean_group': 9 / 24},
  821. 'ab2': {'group': 19 / 48, 'mean_group': 19 / 48},
  822. 'ab3': {'group': 9 / 24, 'mean_group': 9 / 24},
  823. 'ab4': {'group': 19 / 48, 'mean_group': 19 / 48},
  824. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  825. 'ab6': {'group': 11 / 24, 'mean_group': 11 / 24},
  826. 'ab7': {'group': 11 / 24, 'mean_group': 11 / 24},
  827. 'ab8': {'group': 11 / 24, 'mean_group': 11 / 24},
  828. 'ab9': {'group': 1 / 2, 'mean_group': 1 / 2},
  829. },
  830. # 票圈视频+
  831. '190': {
  832. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  833. 'ab1': {'group': 7 / 12, 'mean_group': 7 / 12},
  834. 'ab2': {'group': 7 / 12, 'mean_group': 7 / 12},
  835. 'ab3': {'group': 7 / 12, 'mean_group': 7 / 12},
  836. 'ab4': {'group': 1 / 2, 'mean_group': 1 / 2},
  837. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  838. 'ab6': {'group': 7 / 12, 'mean_group': 7 / 12},
  839. 'ab7': {'group': 7 / 12, 'mean_group': 7 / 12},
  840. 'ab8': {'group': 1 / 2, 'mean_group': 1 / 2},
  841. 'ab9': {'group': 1 / 2, 'mean_group': 1 / 2},
  842. },
  843. # 票圈视频
  844. '194': {
  845. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  846. 'ab1': {'group': 23 / 24, 'mean_group': 23 / 24},
  847. 'ab2': {'group': 23 / 24, 'mean_group': 23 / 24},
  848. 'ab3': {'group': 5 / 12, 'mean_group': 5 / 12},
  849. 'ab4': {'group': 5 / 12, 'mean_group': 5 / 12},
  850. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  851. 'ab6': {'group': 19 / 48, 'mean_group': 19 / 48},
  852. 'ab7': {'group': 5 / 12, 'mean_group': 5 / 12},
  853. 'ab8': {'group': 19 / 48, 'mean_group': 19 / 48},
  854. 'ab9': {'group': 1 / 2, 'mean_group': 1 / 2},
  855. },
  856. # 内容精选
  857. '195': {
  858. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  859. 'ab1': {'group': 1 / 2, 'mean_group': 1 / 2},
  860. 'ab2': {'group': 1 / 2, 'mean_group': 1 / 2},
  861. 'ab3': {'group': 1 / 2, 'mean_group': 1 / 2},
  862. 'ab4': {'group': 1 / 2, 'mean_group': 1 / 2},
  863. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  864. 'ab6': {'group': 1 / 2, 'mean_group': 1 / 2},
  865. 'ab7': {'group': 1 / 2, 'mean_group': 1 / 2},
  866. 'ab8': {'group': 1 / 2, 'mean_group': 1 / 2},
  867. 'ab9': {'group': 1 / 2, 'mean_group': 1 / 2},
  868. },
  869. # 票圈短视频
  870. '196': {
  871. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  872. 'ab1': {'group': 23 / 48, 'mean_group': 23 / 48},
  873. 'ab2': {'group': 23 / 48, 'mean_group': 23 / 48},
  874. 'ab3': {'group': 23 / 48, 'mean_group': 23 / 48},
  875. 'ab4': {'group': 1 / 2, 'mean_group': 1 / 2},
  876. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  877. 'ab6': {'group': 1 / 2, 'mean_group': 1 / 2},
  878. 'ab7': {'group': 1 / 2, 'mean_group': 1 / 2},
  879. 'ab8': {'group': 1 / 2, 'mean_group': 1 / 2},
  880. 'ab9': {'group': 23 / 48, 'mean_group': 23 / 48},
  881. },
  882. # 老好看视频
  883. '197': {
  884. 'ab0': {'group': 25 / 48, 'mean_group': 25 / 48},
  885. 'ab1': {'group': 25 / 48, 'mean_group': 25 / 48},
  886. 'ab2': {'group': 25 / 48, 'mean_group': 25 / 48},
  887. 'ab3': {'group': 25 / 48, 'mean_group': 25 / 48},
  888. 'ab4': {'group': 25 / 48, 'mean_group': 25 / 48},
  889. 'ab5': {'group': 25 / 48, 'mean_group': 25 / 48},
  890. 'ab6': {'group': 25 / 48, 'mean_group': 25 / 48},
  891. 'ab7': {'group': 25 / 48, 'mean_group': 25 / 48},
  892. 'ab8': {'group': 25 / 48, 'mean_group': 25 / 48},
  893. 'ab9': {'group': 25 / 48, 'mean_group': 25 / 48},
  894. },
  895. # 票圈最惊奇
  896. '198': {
  897. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  898. 'ab1': {'group': 1 / 2, 'mean_group': 1 / 2},
  899. 'ab2': {'group': 1 / 2, 'mean_group': 1 / 2},
  900. 'ab3': {'group': 7 / 18, 'mean_group': 7 / 18},
  901. 'ab4': {'group': 1 / 2, 'mean_group': 1 / 2},
  902. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  903. 'ab6': {'group': 7 / 18, 'mean_group': 7 / 18},
  904. 'ab7': {'group': 7 / 18, 'mean_group': 7 / 18},
  905. 'ab8': {'group': 13 / 36, 'mean_group': 13 / 36},
  906. 'ab9': {'group': 13 / 36, 'mean_group': 13 / 36},
  907. },
  908. # 票圈足迹
  909. '242': {
  910. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  911. 'ab1': {'group': 7 / 12, 'mean_group': 7 / 12},
  912. 'ab2': {'group': 7 / 12, 'mean_group': 7 / 12},
  913. 'ab3': {'group': 7 / 12, 'mean_group': 7 / 12},
  914. 'ab4': {'group': 1 / 2, 'mean_group': 1 / 2},
  915. 'ab5': {'group': 1 / 2, 'mean_group': 1 / 2},
  916. 'ab6': {'group': 7 / 12, 'mean_group': 7 / 12},
  917. 'ab7': {'group': 7 / 12, 'mean_group': 7 / 12},
  918. 'ab8': {'group': 1 / 2, 'mean_group': 1 / 2},
  919. 'ab9': {'group': 1 / 2, 'mean_group': 1 / 2},
  920. },
  921. # 票圈福年
  922. '243': {
  923. 'ab0': {'group': 1 / 2, 'mean_group': 1 / 2},
  924. 'ab1': {'group': 7 / 12, 'mean_group': 7 / 12},
  925. 'ab2': {'group': 7 / 12, 'mean_group': 7 / 12},
  926. 'ab3': {'group': 7 / 12, 'mean_group': 7 / 12},
  927. 'ab4': {'group': 7 / 12, 'mean_group': 7 / 12},
  928. 'ab5': {'group': 7 / 12, 'mean_group': 7 / 12},
  929. 'ab6': {'group': 1 / 2, 'mean_group': 1 / 2},
  930. 'ab7': {'group': 1 / 2, 'mean_group': 1 / 2},
  931. 'ab8': {'group': 1 / 2, 'mean_group': 1 / 2},
  932. 'ab9': {'group': 1 / 2, 'mean_group': 1 / 2},
  933. },
  934. }
  935. # 广告模型自动调整阈值配置
  936. AD_ABTEST_ABCODE_CONFIG = {
  937. # 票圈vlog
  938. APP_TYPE['VLOG']: {
  939. 'ab_test_id': '173',
  940. 'not_update': 0.01, # 无需调整阈值的uv浮动
  941. 'gradient': 0.05, # 调整梯度
  942. 'max_update_step': 5, # 最大调整步数
  943. 'threshold_update': {
  944. 'ab0': 1 / 48,
  945. 'ab1': 1 / 48,
  946. 'ab2': 1 / 48,
  947. 'ab3': 1 / 48,
  948. 'ab4': 1 / 48,
  949. 'ab5': 1 / 48,
  950. 'ab6': 1 / 48,
  951. 'ab7': 1 / 48,
  952. 'ab8': 1 / 48,
  953. 'ab9': 1 / 48,
  954. },
  955. },
  956. # 票圈视频+
  957. APP_TYPE['PIAO_QUAN_VIDEO_PLUS']: {
  958. 'ab_test_id': '190',
  959. 'not_update': 0.01,
  960. 'gradient': 0.05,
  961. 'max_update_step': 5,
  962. 'threshold_update': {
  963. 'ab0': 1 / 48,
  964. 'ab1': 1 / 48,
  965. 'ab2': 1 / 48,
  966. 'ab3': 1 / 48,
  967. 'ab4': 1 / 48,
  968. 'ab5': 1 / 48,
  969. 'ab6': 1 / 48,
  970. 'ab7': 1 / 48,
  971. 'ab8': 1 / 48,
  972. 'ab9': 1 / 48,
  973. },
  974. },
  975. # 票圈视频
  976. APP_TYPE['LOVE_LIVE']: {
  977. 'ab_test_id': '194',
  978. 'not_update': 0.01,
  979. 'gradient': 0.05,
  980. 'max_update_step': 5,
  981. 'threshold_update': {
  982. 'ab0': 1 / 48,
  983. 'ab1': 1 / 48,
  984. 'ab2': 1 / 48,
  985. 'ab3': 1 / 48,
  986. 'ab4': 1 / 48,
  987. 'ab5': 1 / 48,
  988. 'ab6': 1 / 48,
  989. 'ab7': 1 / 48,
  990. 'ab8': 1 / 48,
  991. 'ab9': 1 / 48,
  992. },
  993. },
  994. # 内容精选
  995. APP_TYPE['LONG_VIDEO']: {
  996. 'ab_test_id': '195',
  997. 'not_update': 0.01,
  998. 'gradient': 0.05,
  999. 'max_update_step': 5,
  1000. 'threshold_update': {
  1001. 'ab0': 1 / 48,
  1002. 'ab1': 1 / 48,
  1003. 'ab2': 1 / 48,
  1004. 'ab3': 1 / 48,
  1005. 'ab4': 1 / 48,
  1006. 'ab5': 1 / 48,
  1007. 'ab6': 1 / 48,
  1008. 'ab7': 1 / 48,
  1009. 'ab8': 1 / 48,
  1010. 'ab9': 1 / 48,
  1011. },
  1012. },
  1013. # 票圈短视频
  1014. APP_TYPE['SHORT_VIDEO']: {
  1015. 'ab_test_id': '196',
  1016. 'not_update': 0.01,
  1017. 'gradient': 0.05,
  1018. 'max_update_step': 5,
  1019. 'threshold_update': {
  1020. 'ab0': 1 / 48,
  1021. 'ab1': 1 / 48,
  1022. 'ab2': 1 / 48,
  1023. 'ab3': 1 / 48,
  1024. 'ab4': 1 / 48,
  1025. 'ab5': 1 / 48,
  1026. 'ab6': 1 / 48,
  1027. 'ab7': 1 / 48,
  1028. 'ab8': 1 / 48,
  1029. 'ab9': 1 / 48,
  1030. },
  1031. },
  1032. # 老好看视频
  1033. APP_TYPE['LAO_HAO_KAN_VIDEO']: {
  1034. 'ab_test_id': '197',
  1035. 'not_update': 0.01,
  1036. 'gradient': 0.05,
  1037. 'max_update_step': 5,
  1038. 'threshold_update': {
  1039. 'ab0': 1 / 48,
  1040. 'ab1': 1 / 48,
  1041. 'ab2': 1 / 48,
  1042. 'ab3': 1 / 48,
  1043. 'ab4': 1 / 48,
  1044. 'ab5': 1 / 48,
  1045. 'ab6': 1 / 48,
  1046. 'ab7': 1 / 48,
  1047. 'ab8': 1 / 48,
  1048. 'ab9': 1 / 48,
  1049. },
  1050. },
  1051. # 票圈最惊奇
  1052. APP_TYPE['ZUI_JING_QI']: {
  1053. 'ab_test_id': '198',
  1054. 'not_update': 0.01,
  1055. 'gradient': 0.05,
  1056. 'max_update_step': 5,
  1057. 'threshold_update': {
  1058. 'ab0': 1 / 48,
  1059. 'ab1': 1 / 48,
  1060. 'ab2': 1 / 48,
  1061. 'ab3': 1 / 48,
  1062. 'ab4': 1 / 48,
  1063. 'ab5': 1 / 48,
  1064. 'ab6': 1 / 48,
  1065. 'ab7': 1 / 48,
  1066. 'ab8': 1 / 48,
  1067. 'ab9': 1 / 48,
  1068. },
  1069. },
  1070. }
  1071. # 用户组有广告时的分享率预测结果存放 redis key 前缀,完整格式:ad:users:group:predict:share:rate:{user_data_key}:{user_rule_key}:{date}
  1072. KEY_NAME_PREFIX_AD_GROUP = 'ad:users:group:predict:share:rate:'
  1073. # 视频有广告时的分享率预测结果存放 redis key 前缀,完整格式:ad:video:predict:share:rate:{video_data_key}:{date}
  1074. KEY_NAME_PREFIX_AD_VIDEO = 'ad:video:predict:share:rate:'
  1075. # 用户分组结果存放 redis key 前缀,完整格式:mid:group:{class_key}:{mid}
  1076. KEY_NAME_PREFIX_MID_GROUP = 'mid:group:'
  1077. # 广告推荐阈值结果存放 redis key 前缀,完整格式:ad:threshold:{abtestId}:{abtestConfigTag}:{abtestGroup}:{group}
  1078. KEY_NAME_PREFIX_AD_THRESHOLD = 'ad:threshold:'
  1079. # 广告推荐关怀模式实验阈值结果存放 redis key 前缀,完整格式:ad:threshold:care:{abtestId}:{abtestConfigTag}:{abtestGroup}:{group}
  1080. KEY_NAME_PREFIX_AD_THRESHOLD_CARE_MODEL = 'ad:threshold:care:'
  1081. # 广告推荐阈值计算记录存放 redis key,完整格式:ad:threshold:record
  1082. KEY_NAME_PREFIX_AD_THRESHOLD_RECORD = 'ad:threshold:record'
  1083. class DevelopmentConfig(BaseConfig):
  1084. """开发环境配置"""
  1085. # 报警内容 环境区分
  1086. ENV_TEXT = "开发环境"
  1087. # 项目存放目录
  1088. PROJECT_PATH = '/data2/rov-offline'
  1089. # 测试环境redis地址
  1090. REDIS_INFO = {
  1091. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  1092. 'port': 6379,
  1093. 'password': 'Wqsd@2019',
  1094. }
  1095. # Hologres连接参数,本地使用
  1096. HOLOGRES_INFO = {
  1097. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou.hologres.aliyuncs.com',
  1098. 'port': 80,
  1099. 'dbname': 'dssm',
  1100. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  1101. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  1102. }
  1103. # 测试环境mysql地址
  1104. MYSQL_INFO = {
  1105. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  1106. 'port': 3306,
  1107. 'user': 'wx2016_longvideo',
  1108. 'password': 'wx2016_longvideoP@assword1234',
  1109. 'db': 'longvideo',
  1110. 'charset': 'utf8'
  1111. }
  1112. # 测试环境 过滤用mysql地址
  1113. FILTER_MYSQL_INFO = {
  1114. 'host': 'am-bp1g3ys9u00u483uc131930.ads.aliyuncs.com',
  1115. 'port': 3306,
  1116. 'user': 'lv_manager',
  1117. 'password': 'lv_manager@2020',
  1118. 'db': 'longvideo',
  1119. 'charset': 'utf8'
  1120. }
  1121. # 日志服务配置
  1122. ALIYUN_LOG = {
  1123. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  1124. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  1125. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  1126. 'PROJECT': 'rov-server-test',
  1127. }
  1128. # Hologres视频状态存储表名
  1129. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  1130. # 快速曝光流量池ID
  1131. QUICK_FLOW_POOL_ID = 3
  1132. # 获取流量池分发配置接口地址
  1133. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getConfig'
  1134. # 从流量池获取视频接口地址
  1135. GET_VIDEOS_FROM_POOL_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  1136. # 获取视频在流量池中的剩余可分发数接口地址
  1137. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  1138. # 计算完ROV通知后端接口地址
  1139. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateRovScore'
  1140. # 获取置顶视频列表接口地址
  1141. TOP_VIDEO_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/topVideoList'
  1142. # 获取首页兜底视频json接口地址
  1143. BOTTOM_JSON_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/video/distribute/structure/video/list'
  1144. # 通知后端更新兜底视频接口地址
  1145. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  1146. # 获取限流视频接口地址
  1147. GET_VIDEO_LIMIT_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getVideoLimitList'
  1148. # 获取管理后台设置的广告目标uv值接口地址
  1149. GET_AD_TARGET_UV_URL = 'https://testadmin.piaoquantv.com/manager/ad/algo/threshold/productUvTargetList'
  1150. # # logs 上传oss 目标Bucket指定目录
  1151. # OSS_FOLDER_LOGS = 'rov-offline/dev/logs/'
  1152. # # data 上传oss 目标Bucket指定目录
  1153. # OSS_FOLDER_DATA = 'rov-offline/dev/data/'
  1154. class TestConfig(BaseConfig):
  1155. """测试环境配置"""
  1156. # 报警内容 环境区分
  1157. ENV_TEXT = "测试环境"
  1158. # 项目存放目录
  1159. PROJECT_PATH = '/data2/rov-offline'
  1160. # 测试环境redis地址
  1161. REDIS_INFO = {
  1162. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  1163. 'port': 6379,
  1164. 'password': 'Wqsd@2019',
  1165. }
  1166. # Hologres连接参数,服务器使用
  1167. HOLOGRES_INFO = {
  1168. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  1169. 'port': 80,
  1170. 'dbname': 'dssm',
  1171. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  1172. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  1173. }
  1174. # 测试环境mysql地址
  1175. MYSQL_INFO = {
  1176. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  1177. 'port': 3306,
  1178. 'user': 'wx2016_longvideo',
  1179. 'password': 'wx2016_longvideoP@assword1234',
  1180. 'db': 'longvideo',
  1181. 'charset': 'utf8'
  1182. }
  1183. # 测试环境 过滤用mysql地址
  1184. FILTER_MYSQL_INFO = {
  1185. 'host': 'am-bp1g3ys9u00u483uc131930.ads.aliyuncs.com',
  1186. 'port': 3306,
  1187. 'user': 'lv_manager',
  1188. 'password': 'lv_manager@2020',
  1189. 'db': 'longvideo',
  1190. 'charset': 'utf8'
  1191. }
  1192. # 日志服务配置
  1193. ALIYUN_LOG = {
  1194. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  1195. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  1196. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  1197. 'PROJECT': 'rov-server-test',
  1198. }
  1199. # Hologres视频状态存储表名
  1200. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  1201. # 快速曝光流量池ID
  1202. QUICK_FLOW_POOL_ID = 3
  1203. # 获取流量池分发配置接口地址
  1204. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getConfig'
  1205. # 从流量池获取视频接口地址
  1206. GET_VIDEOS_FROM_POOL_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  1207. # 获取视频在流量池中的剩余可分发数接口地址
  1208. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  1209. # 计算完ROV通知后端接口地址
  1210. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateRovScore'
  1211. # 获取置顶视频列表接口地址
  1212. TOP_VIDEO_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/topVideoList'
  1213. # 获取首页兜底视频json接口地址
  1214. BOTTOM_JSON_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/video/distribute/structure/video/list'
  1215. # 通知后端更新兜底视频接口地址
  1216. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  1217. # 获取限流视频接口地址
  1218. GET_VIDEO_LIMIT_LIST_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/getVideoLimitList'
  1219. # 获取管理后台设置的广告目标uv值接口地址
  1220. GET_AD_TARGET_UV_URL = 'https://testadmin.piaoquantv.com/manager/ad/algo/threshold/productUvTargetList'
  1221. # # logs 上传oss 目标Bucket指定目录
  1222. # OSS_FOLDER_LOGS = 'rov-offline/test/logs/'
  1223. # # data 上传oss 目标Bucket指定目录
  1224. # OSS_FOLDER_DATA = 'rov-offline/test/data/'
  1225. class PreProductionConfig(BaseConfig):
  1226. """预发布环境配置"""
  1227. # 报警内容 环境区分
  1228. ENV_TEXT = "预发布环境"
  1229. # 项目存放目录
  1230. PROJECT_PATH = '/data/rov-offline'
  1231. # redis地址
  1232. REDIS_INFO = {
  1233. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  1234. 'port': 6379,
  1235. 'password': 'Wqsd@2019',
  1236. }
  1237. # Hologres连接参数,服务器使用
  1238. HOLOGRES_INFO = {
  1239. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  1240. 'port': 80,
  1241. 'dbname': 'dssm',
  1242. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  1243. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  1244. }
  1245. # 生产环境mysql地址
  1246. MYSQL_INFO = {
  1247. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  1248. 'port': 3306,
  1249. 'user': 'wx2016_longvideo',
  1250. 'password': 'wx2016_longvideoP@assword1234',
  1251. 'db': 'longvideo',
  1252. 'charset': 'utf8'
  1253. }
  1254. # 生产环境 过滤用mysql地址
  1255. FILTER_MYSQL_INFO = {
  1256. 'host': 'am-bp15tqt957i3b3sgi131950.ads.aliyuncs.com',
  1257. 'port': 3306,
  1258. 'user': 'lv_manager',
  1259. 'password': 'lv_manager@2020',
  1260. 'db': 'longvideo',
  1261. 'charset': 'utf8'
  1262. }
  1263. # 日志服务配置
  1264. ALIYUN_LOG = {
  1265. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  1266. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  1267. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  1268. 'PROJECT': 'rov-server',
  1269. }
  1270. # Hologres视频状态存储表名
  1271. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  1272. # 快速曝光流量池ID
  1273. QUICK_FLOW_POOL_ID = 3
  1274. # 获取流量池分发配置接口地址
  1275. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/getConfig'
  1276. # 从流量池获取视频接口地址
  1277. GET_VIDEOS_FROM_POOL_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/getAllVideo'
  1278. # 获取视频在流量池中的剩余可分发数接口地址
  1279. GET_REMAIN_VIEW_COUNT_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  1280. # 计算完ROV通知后端接口地址
  1281. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://videopre-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateRovScore'
  1282. # 获取置顶视频列表接口地址
  1283. TOP_VIDEO_LIST_URL = 'http://speedpre.wx.com/longvideoapi/openapi/recommend/topVideoList'
  1284. # 获取首页兜底视频json接口地址
  1285. BOTTOM_JSON_URL = 'http://speedpre.wx.com/longvideoapi/openapi/video/distribute/structure/video/list'
  1286. # 通知后端更新兜底视频接口地址
  1287. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://videopre-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  1288. # 获取限流视频接口地址
  1289. GET_VIDEO_LIMIT_LIST_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/getVideoLimitList'
  1290. # 获取管理后台设置的广告目标uv值接口地址
  1291. GET_AD_TARGET_UV_URL = 'https://preadmin.piaoquantv.com/manager/ad/algo/threshold/productUvTargetList'
  1292. # # logs 上传oss 目标Bucket指定目录
  1293. # OSS_FOLDER_LOGS = 'rov-offline/pre/logs/'
  1294. # # data 上传oss 目标Bucket指定目录
  1295. # OSS_FOLDER_DATA = 'rov-offline/pre/data/'
  1296. class ProductionConfig(BaseConfig):
  1297. """生产环境配置"""
  1298. # 报警内容 环境区分
  1299. ENV_TEXT = "生产环境"
  1300. # 项目存放目录
  1301. PROJECT_PATH = '/data/rov-offline'
  1302. # 线上环境redis地址
  1303. REDIS_INFO = {
  1304. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  1305. 'port': 6379,
  1306. 'password': 'Wqsd@2019',
  1307. }
  1308. # Hologres连接参数,服务器使用
  1309. HOLOGRES_INFO = {
  1310. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  1311. 'port': 80,
  1312. 'dbname': 'dssm',
  1313. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  1314. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  1315. }
  1316. # 生产环境mysql地址
  1317. MYSQL_INFO = {
  1318. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  1319. 'port': 3306,
  1320. 'user': 'wx2016_longvideo',
  1321. 'password': 'wx2016_longvideoP@assword1234',
  1322. 'db': 'longvideo',
  1323. 'charset': 'utf8'
  1324. }
  1325. # 生产环境 过滤用mysql地址
  1326. FILTER_MYSQL_INFO = {
  1327. 'host': 'am-bp15tqt957i3b3sgi131950.ads.aliyuncs.com',
  1328. 'port': 3306,
  1329. 'user': 'lv_manager',
  1330. 'password': 'lv_manager@2020',
  1331. 'db': 'longvideo',
  1332. 'charset': 'utf8'
  1333. }
  1334. # 日志服务配置
  1335. ALIYUN_LOG = {
  1336. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  1337. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  1338. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  1339. 'PROJECT': 'rov-server',
  1340. }
  1341. # Hologres视频状态存储表名
  1342. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  1343. # 快速曝光流量池ID
  1344. QUICK_FLOW_POOL_ID = 3
  1345. # 获取流量池分发配置接口地址
  1346. GET_FLOW_POOL_RECOMMEND_CONFIG_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/getConfig'
  1347. # 从流量池获取视频接口地址
  1348. GET_VIDEOS_FROM_POOL_URL = 'http://api-internal.piaoquantv.com/flowpool/video/getAllVideo'
  1349. # 获取视频在流量池中的剩余可分发数接口地址
  1350. GET_REMAIN_VIEW_COUNT_URL = 'http://api-internal.piaoquantv.com/flowpool/video/remainViewCount'
  1351. # 计算完ROV通知后端接口地址
  1352. NOTIFY_BACKEND_UPDATE_ROV_SCORE_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateRovScore'
  1353. # 获取置顶视频列表接口地址
  1354. TOP_VIDEO_LIST_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/topVideoList'
  1355. # 获取首页兜底视频json接口地址
  1356. BOTTOM_JSON_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/video/distribute/structure/video/list'
  1357. # 通知后端更新兜底视频接口地址
  1358. NOTIFY_BACKEND_updateFallBackVideoList_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/updateFallBackVideoList'
  1359. # 获取限流视频接口地址
  1360. GET_VIDEO_LIMIT_LIST_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/getVideoLimitList'
  1361. # 获取管理后台设置的广告目标uv值接口地址
  1362. GET_AD_TARGET_UV_URL = 'https://admin.piaoquantv.com/manager/ad/algo/threshold/productUvTargetList'
  1363. # # logs 上传oss 目标Bucket指定目录
  1364. # OSS_FOLDER_LOGS = 'rov-offline/pro/logs/'
  1365. # # data 上传oss 目标Bucket指定目录
  1366. # OSS_FOLDER_DATA = 'rov-offline/pro/data/'
  1367. def set_config():
  1368. # 获取环境变量 ROV_OFFLINE_ENV
  1369. env = os.environ.get('ROV_OFFLINE_ENV')
  1370. # env = 'dev'
  1371. if env is None:
  1372. # log_.error('ENV ERROR: is None!')
  1373. return
  1374. if env == 'dev':
  1375. return DevelopmentConfig(), env
  1376. elif env == 'test':
  1377. return TestConfig(), env
  1378. elif env == 'pre':
  1379. return PreProductionConfig(), env
  1380. elif env == 'pro':
  1381. return ProductionConfig(), env
  1382. else:
  1383. # log_.error('ENV ERROR: is {}'.format(env))
  1384. return