config.py 15 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409
  1. import os
  2. # from log import Log
  3. # log_ = Log()
  4. class BaseConfig(object):
  5. # 产品标识
  6. APP_TYPE = {
  7. 'VLOG': 0, # vlog
  8. 'LOVE_LIVE': 4, # 票圈视频
  9. 'LONG_VIDEO': 5, # 内容精选
  10. 'SHORT_VIDEO': 6, # 票圈短视频
  11. 'WAN_NENG_VIDEO': 17, # 万能影视屋
  12. 'LAO_HAO_KAN_VIDEO': 18, # 老好看视频
  13. 'ZUI_JING_QI': 19, # 票圈最惊奇
  14. 'APP': 13, # 票圈视频APP
  15. }
  16. # AB实验配置
  17. AB_EXP_CODE = {
  18. 'rec_size_home': '003',
  19. 'rec_size_relevant': '004',
  20. 'rule_rank1': '011',
  21. 'rule_rank2': '016',
  22. 'rov_rank_appType_18_19': '019',
  23. 'rule_rank3': '023',
  24. 'rule_rank4': '024',
  25. }
  26. # abTest
  27. AB_TEST = {
  28. 'w_h_rate': [APP_TYPE['LONG_VIDEO']], # 视频宽高比实验(每组的前两个视频调整为横屏视频), 已下线
  29. 'position_insert': [APP_TYPE['SHORT_VIDEO'], APP_TYPE['LOVE_LIVE']],
  30. 'relevant_video_op': [APP_TYPE['LONG_VIDEO']], # 相关推荐强插实验(运营对某些视频给定一些相关视频,调整为对应视频相关推荐的头部)
  31. 'rank_by_h': [APP_TYPE['VLOG']], # 小时级别更新rov列表
  32. }
  33. # abCode
  34. AB_CODE = {
  35. 'initial': 10000, # 初始
  36. 'w_h_rate': 10001, # 视频宽高比实验(每组的前两个视频调整为横屏视频),已下线
  37. 'position_insert': 10002, # 按位置插入
  38. 'relevant_video_op': 10003, # 运营对某些视频给定一些相关视频,调整为对应视频相关推荐的头部
  39. 'rov_rank_appType_18_19': 30001, # 老好看视频 / 票圈最惊奇 首页/相关推荐逻辑更新实验
  40. 'rank_by_h': {
  41. 'rule_rank1': 20001,
  42. 'rule_rank2': 20002,
  43. 'rule_rank3': 20003,
  44. 'rule_rank4': 20004,
  45. }, # 小时级别更新rov列表实验
  46. }
  47. # 小程序小时级列表key不同实验标识
  48. RULE_KEY = {
  49. 'initial': '',
  50. 'rule_rank1': 'rule1',
  51. 'rule_rank2': 'rule2',
  52. 'rule_rank3': 'rule3',
  53. 'rule_rank4': 'rule4',
  54. }
  55. # pushFrom
  56. PUSH_FROM = {
  57. 'rov_recall': 'recall_pool', # rov召回池
  58. 'flow_recall': 'flow_pool', # 流量池
  59. 'top': 'op_manual', # 置顶
  60. 'bottom': 'bottom_strategy', # 一层兜底
  61. 'bottom_last': 'bottom_strategy_last', # 二层兜底
  62. 'position_insert': 'position_insert', # 按位置插入
  63. 'relevant_video_op': 'relevant_video_op', # 相关推荐强插
  64. 'rov_recall_h': 'recall_pool_h', # 小时级更新列表
  65. }
  66. # category id mapping
  67. CATEGORY = {
  68. 'recommend': [55], # 推荐
  69. 'other': [] # 其他类别
  70. }
  71. # 前k个从ROV召回池中获取视频
  72. K = 3
  73. # 从流量池获取视频的概率设置
  74. P = 0.3
  75. P_18_19 = 1
  76. # ROV召回池redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.{date}
  77. RECALL_KEY_NAME_PREFIX = 'com.weiqu.video.recall.hot.item.score.'
  78. # 小程序小时级更新结果存放 redis key前缀,完整格式:com.weiqu.video.recall.item.score.h.{rule_key}.{date}.{h}
  79. RECALL_KEY_NAME_PREFIX_BY_H = 'com.weiqu.video.recall.item.score.h.'
  80. # 小程序离线ROV模型结果与小程序小时级更新结果去重后 存放 redis key前缀,
  81. # 完整格式:com.weiqu.video.recall.hot.item.score.dup.h.{rule_key}{date}.{h}
  82. RECALL_KEY_NAME_PREFIX_DUP_H = 'com.weiqu.video.recall.hot.item.score.dup.h.'
  83. # 每个mid存储对应小时级更新结果 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.h.mid.{mid}
  84. H_WITH_MID_RECALL_KEY_NAME_PREFIX = 'com.weiqu.video.recall.hot.item.score.h.mid.'
  85. # 记录 mid-小时级key 中数据所属(date,h),完整格式:com.weiqu.video.h.record.mid.{mid}
  86. H_WITH_MID_RECORD_KEY_NAME_PREFIX = 'com.weiqu.video.h.record.mid.'
  87. # 小时级视频状态不符合推荐要求的列表 redis key,完整格式:com.weiqu.video.filter.h.item.{rule_key}
  88. H_VIDEO_FILER = 'com.weiqu.video.filter.h.item.'
  89. # app应用 小程序离线ROV模型结果存放 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.app.{date}
  90. RECALL_KEY_NAME_PREFIX_APP = 'com.weiqu.video.recall.hot.item.score.app.'
  91. # app应用 小时级数据更新最终结果存放 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.app.{date}.{h}
  92. APP_FINAL_RECALL_KEY_NAME_PREFIX = 'com.weiqu.video.recall.hot.item.score.app.'
  93. # appType:[18, 19]小程序离线ROV模型结果存放 redis key前缀,完整格式:com.weiqu.video.recall.hot.item.score.{appType}.{date}.{h}
  94. RECALL_KEY_NAME_PREFIX_APP_TYPE = 'com.weiqu.video.recall.hot.item.score.'
  95. # appType = 6, ROV召回池redis key前缀,完整格式:com.weiqu.video.recall.hot.apptype.h.item.score.6.{h}
  96. # RECALL_KEY_NAME_PREFIX_APP_TYPE = 'com.weiqu.video.recall.hot.apptype.h.item.score.6.'
  97. # 流量池redis key前缀,完整格式 com.weiqu.video.flowpool.hot.item.score.{appType}
  98. FLOW_POOL_KEY_NAME_PREFIX = 'com.weiqu.video.flowpool.hot.item.score.'
  99. # 修改ROV的视频 redis key
  100. UPDATE_ROV_KEY_NAME = 'com.weiqu.video.update.rov.item.score'
  101. UPDATE_ROV_KEY_NAME_APP = 'com.weiqu.video.update.rov.item.score.app'
  102. # 首页推荐预曝光列表redis key 前缀,完整key格式:com.weiqu.video.hot.recommend.previewed.{appType}.{mid}
  103. PREVIEW_KEY_PREFIX = 'com.weiqu.video.hot.recommend.previewed.'
  104. # 用户上一次在rov召回池对应的位置 redis key前缀,完整key格式:com.weiqu.video.rov.pool.last.{appType}.{mid}.{date}
  105. LAST_VIDEO_FROM_ROV_POOL_PREFIX = 'com.weiqu.video.rov.pool.last.'
  106. # 本地记录视频的可分发数,控制分发,完整key格式:com.weiqu.video.flowpool.local.distribute.count.{h}
  107. # LOCAL_DISTRIBUTE_COUNT_PREFIX = 'com.weiqu.video.flowpool.local.distribute.count.'
  108. # 本地记录视频的可分发数,控制分发,完整key格式:com.weiqu.video.flowpool.local.distribute.count.{videoId}.{flowPool}
  109. LOCAL_DISTRIBUTE_COUNT_PREFIX = 'com.weiqu.video.flowpool.local.distribute.count.'
  110. # 从ROV召回池获取视频的最大频次,限制每次请求的获取次数
  111. MAX_FREQ_FROM_ROV_POOL = 3
  112. # 兜底视频redis存储key
  113. BOTTOM_KEY_NAME = 'com.weiqu.video.bottom'
  114. # 生效中的置顶视频列表 redis key
  115. TOP_VIDEO_LIST_KEY_NAME = 'com.weiqu.video.top.item.score.area'
  116. TOP_VIDEO_LIST_KEY_NAME_APP = 'com.weiqu.video.top.item.score.area.app'
  117. # 按位置排序redis存储key
  118. RECALL_POSITION1_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.1'
  119. RECALL_POSITION2_KEY_NAME = 'com.weiqu.video.recall.hot.apptype.h.item.score.position.2'
  120. # rov召回池更新时间
  121. ROV_UPDATE_H = 6
  122. ROV_UPDATE_MINUTE = 30
  123. # 小时级召回池更新时间 每个小时的15分更新成功
  124. ROV_H_UPDATE_MINUTE = 15
  125. # 置顶视频区域 为 全部 的code
  126. ALL_AREA_CODE = '000000'
  127. # width : height > 1 的视频列表 redis key, zset存储,value为videoId,score为w_h_rate
  128. W_H_RATE_UP_1_VIDEO_LIST_KEY_NAME = {
  129. 'rov_recall': 'com.weiqu.video.rov.w.h.rate.1.item', # rov召回池视频
  130. 'bottom_last': 'com.weiqu.video.bottom.last.w.h.rate.1.item' # 二次兜底视频
  131. }
  132. # 头部视频对应运营强插的相关视频 redis 存储 key 前缀, 完整key格式:com.weiqu.video.relevant.videos.item.{videoId}
  133. RELEVANT_VIDEOS_WITH_OP_KEY_NAME = 'com.weiqu.video.relevant.videos.item.'
  134. class DevelopmentConfig(BaseConfig):
  135. """开发环境配置"""
  136. # 报警内容 环境区分
  137. ENV_TEXT = "开发环境"
  138. # 测试环境redis地址
  139. REDIS_INFO = {
  140. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  141. 'port': 6379,
  142. 'password': 'Wqsd@2019',
  143. }
  144. # Hologres连接参数,本地使用
  145. HOLOGRES_INFO = {
  146. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou.hologres.aliyuncs.com',
  147. 'port': 80,
  148. 'dbname': 'dssm',
  149. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  150. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  151. }
  152. # 测试环境mysql地址
  153. MYSQL_INFO = {
  154. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  155. 'port': 3306,
  156. 'user': 'wx2016_longvideo',
  157. 'password': 'wx2016_longvideoP@assword1234',
  158. 'db': 'longvideo',
  159. 'charset': 'utf8'
  160. }
  161. # Hologres视频状态存储表名
  162. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  163. # 用户已观看视频过滤 & 视频审核条件过滤 & 是否进入老年人社区过滤 & 话题状态过滤 接口地址
  164. # 参数types: 1-已观看 2-视频状态 3-是否进入老年人社区过滤 4-话题状态
  165. VIDEO_FILTER_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/filterVideos'
  166. # 获取视频在流量池中的剩余可分发数接口地址
  167. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  168. # 日志服务配置
  169. ALIYUN_LOG = {
  170. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  171. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  172. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  173. 'PROJECT': 'rov-server-test',
  174. }
  175. # # AB实验配置
  176. # AB_EXP_CODE = {
  177. # 'rec_size_home': '003',
  178. # 'rec_size_relevant': '004',
  179. # 'rule_rank1_20': '011',
  180. # 'rule_rank1_50': '016'
  181. # }
  182. class TestConfig(BaseConfig):
  183. """测试环境配置"""
  184. # 报警内容 环境区分
  185. ENV_TEXT = "测试环境"
  186. # 测试环境redis地址
  187. REDIS_INFO = {
  188. 'host': 'r-bp1ps6my7lzg8rdhwx682.redis.rds.aliyuncs.com',
  189. 'port': 6379,
  190. 'password': 'Wqsd@2019',
  191. }
  192. # Hologres连接参数,服务器使用
  193. HOLOGRES_INFO = {
  194. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  195. 'port': 80,
  196. 'dbname': 'dssm',
  197. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  198. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  199. }
  200. # 测试环境mysql地址
  201. MYSQL_INFO = {
  202. 'host': 'rm-bp1k5853td1r25g3n690.mysql.rds.aliyuncs.com',
  203. 'port': 3306,
  204. 'user': 'wx2016_longvideo',
  205. 'password': 'wx2016_longvideoP@assword1234',
  206. 'db': 'longvideo',
  207. 'charset': 'utf8'
  208. }
  209. # Hologres视频状态存储表名
  210. VIDEO_STATUS = 'longvideo_test.dwd_mdm_item_video_stat'
  211. # 用户已观看视频过滤 & 视频审核条件过滤 & 是否进入老年人社区过滤 & 话题状态过滤 接口地址
  212. # 参数types: 1-已观看 2-视频状态 3-是否进入老年人社区过滤 4-话题状态
  213. VIDEO_FILTER_URL = 'http://videotest-internal.yishihui.com/longvideoapi/openapi/recommend/filterVideos'
  214. # 获取视频在流量池中的剩余可分发数接口地址
  215. GET_REMAIN_VIEW_COUNT_URL = 'http://testapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  216. # 日志服务配置
  217. ALIYUN_LOG = {
  218. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  219. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  220. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  221. 'PROJECT': 'rov-server-test',
  222. }
  223. # # AB实验配置
  224. # AB_EXP_CODE = {
  225. # 'rec_size_home': '003',
  226. # 'rec_size_relevant': '004',
  227. # 'rule_rank1_20': '011',
  228. # 'rule_rank1_50': '016'
  229. # }
  230. class PreProductionConfig(BaseConfig):
  231. """预发布环境配置"""
  232. # 报警内容 环境区分
  233. ENV_TEXT = "预发布环境"
  234. # 线上环境redis地址
  235. REDIS_INFO = {
  236. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  237. 'port': 6379,
  238. 'password': 'Wqsd@2019',
  239. }
  240. # Hologres连接参数,服务器使用
  241. HOLOGRES_INFO = {
  242. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  243. 'port': 80,
  244. 'dbname': 'dssm',
  245. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  246. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  247. }
  248. # 生产环境mysql地址
  249. MYSQL_INFO = {
  250. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  251. 'port': 3306,
  252. 'user': 'wx2016_longvideo',
  253. 'password': 'wx2016_longvideoP@assword1234',
  254. 'db': 'longvideo',
  255. 'charset': 'utf8'
  256. }
  257. # Hologres视频状态存储表名
  258. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  259. # 用户已观看视频过滤 & 视频审核条件过滤 & 是否进入老年人社区过滤 & 话题状态过滤 接口地址
  260. # 参数types: 1-已观看 2-视频状态 3-是否进入老年人社区过滤 4-话题状态
  261. VIDEO_FILTER_URL = 'http://prespeed-internal.piaoquantv.com/longvideoapi/openapi/recommend/filterVideos'
  262. # 获取视频在流量池中的剩余可分发数接口地址
  263. GET_REMAIN_VIEW_COUNT_URL = 'http://preapi-internal.piaoquantv.com/flowpool/video/remainViewCount'
  264. # 日志服务配置
  265. ALIYUN_LOG = {
  266. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  267. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  268. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  269. 'PROJECT': 'rov-server',
  270. }
  271. # # AB实验配置
  272. # AB_EXP_CODE = {
  273. # 'rec_size_home': '003',
  274. # 'rec_size_relevant': '004',
  275. # 'rule_rank1': '011'
  276. # }
  277. class ProductionConfig(BaseConfig):
  278. """生产环境配置"""
  279. # 报警内容 环境区分
  280. ENV_TEXT = "生产环境"
  281. # 线上环境redis地址
  282. REDIS_INFO = {
  283. 'host': 'r-bp1fogs2mflr1ybfot.redis.rds.aliyuncs.com',
  284. 'port': 6379,
  285. 'password': 'Wqsd@2019',
  286. }
  287. # Hologres连接参数,服务器使用
  288. HOLOGRES_INFO = {
  289. 'host': 'hgprecn-cn-7pp28y18c00c-cn-hangzhou-vpc.hologres.aliyuncs.com',
  290. 'port': 80,
  291. 'dbname': 'dssm',
  292. 'user': 'LTAI5tMPqPy9yboQAf1mBCCN',
  293. 'password': '4BEcOgxREOPq7t3A7EWkjciVULeQGj'
  294. }
  295. # 生产环境mysql地址
  296. MYSQL_INFO = {
  297. 'host': 'rr-bp1x9785e8h5452bi157.mysql.rds.aliyuncs.com',
  298. 'port': 3306,
  299. 'user': 'wx2016_longvideo',
  300. 'password': 'wx2016_longvideoP@assword1234',
  301. 'db': 'longvideo',
  302. 'charset': 'utf8'
  303. }
  304. # Hologres视频状态存储表名
  305. VIDEO_STATUS = 'longvideo.dwd_mdm_item_video_stat'
  306. # 用户已观看视频过滤 & 视频审核条件过滤 & 是否进入老年人社区过滤 & 话题状态过滤 接口地址
  307. # 参数types: 1-已观看 2-视频状态 3-是否进入老年人社区过滤 4-话题状态
  308. VIDEO_FILTER_URL = 'http://recommend-common-internal.piaoquantv.com/longvideoapi/openapi/recommend/filterVideos'
  309. # 获取视频在流量池中的剩余可分发数接口地址
  310. GET_REMAIN_VIEW_COUNT_URL = 'http://api-internal.piaoquantv.com/flowpool/video/remainViewCount'
  311. # 日志服务配置
  312. ALIYUN_LOG = {
  313. 'ENDPOINT': 'cn-hangzhou.log.aliyuncs.com',
  314. 'ACCESSID': 'LTAIWYUujJAm7CbH',
  315. 'ACCESSKEY': 'RfSjdiWwED1sGFlsjXv0DlfTnZTG1P',
  316. 'PROJECT': 'rov-server',
  317. }
  318. # # AB实验配置
  319. # AB_EXP_CODE = {
  320. # 'rec_size_home': '003',
  321. # 'rec_size_relevant': '004',
  322. # 'rule_rank1': '011'
  323. # }
  324. def set_config():
  325. # 获取环境变量 ROV_SERVER_ENV
  326. env = os.environ.get('ROV_SERVER_ENV')
  327. # env = 'dev'
  328. if env is None:
  329. # log_.error('ENV ERROR: is None!')
  330. return
  331. if env == 'dev':
  332. return DevelopmentConfig()
  333. elif env == 'test':
  334. return TestConfig()
  335. elif env == 'pre':
  336. return PreProductionConfig()
  337. elif env == 'pro':
  338. return ProductionConfig()
  339. else:
  340. # log_.error('ENV ERROR: is {}'.format(env))
  341. return