video_discovery_tables.sql 7.9 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127
  1. -- find_agent 视频发现持久化表
  2. -- MySQL 5.7+ / 8.0+
  3. -- 与 supply_infra/db/models/video_discovery.py 保持一致。
  4. SET NAMES utf8mb4;
  5. CREATE TABLE IF NOT EXISTS `video_discovery_run` (
  6. `id` BIGINT NOT NULL AUTO_INCREMENT,
  7. `run_id` VARCHAR(64) NOT NULL COMMENT 'Agent 运行标识',
  8. `biz_dt` VARCHAR(32) NULL COMMENT '业务日 YYYYMMDD',
  9. `demand_grade_id` BIGINT NULL COMMENT '可选 demand_grade.id',
  10. `demand_word` VARCHAR(256) NOT NULL COMMENT '用户给定需求词',
  11. `seed_video_id` VARCHAR(64) NULL COMMENT '参考视频 id',
  12. `seed_video_title` VARCHAR(512) NULL COMMENT '参考视频标题',
  13. `relevant_points_json` TEXT NOT NULL COMMENT '与需求相关的视频点位 JSON',
  14. `intent_summary` TEXT NULL COMMENT 'Agent 对真实内容意图的解释',
  15. `status` VARCHAR(24) NOT NULL DEFAULT 'running'
  16. COMMENT 'running / finished / failed',
  17. `search_count` INT NOT NULL DEFAULT 0 COMMENT '已保存搜索页数',
  18. `primary_count` INT NOT NULL DEFAULT 0 COMMENT '主推荐数',
  19. `stop_reason` TEXT NULL COMMENT '停止搜索的证据或失败原因',
  20. `rule_version` VARCHAR(64) NULL COMMENT '本次候选门禁规则版本',
  21. `rule_config_json` TEXT NULL COMMENT '运行时规则、当前时间和阈值快照 JSON',
  22. `create_time` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
  23. `update_time` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP
  24. ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
  25. PRIMARY KEY (`id`),
  26. UNIQUE KEY `uk_video_discovery_run_id` (`run_id`),
  27. UNIQUE KEY `uk_video_discovery_run_biz_grade` (`biz_dt`, `demand_grade_id`),
  28. KEY `idx_video_discovery_run_demand` (`demand_word`),
  29. KEY `idx_video_discovery_run_grade` (`demand_grade_id`),
  30. KEY `idx_video_discovery_run_biz_dt` (`biz_dt`),
  31. KEY `idx_video_discovery_run_status` (`status`)
  32. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
  33. COMMENT='一次需求找视频运行';
  34. CREATE TABLE IF NOT EXISTS `video_discovery_search` (
  35. `id` BIGINT NOT NULL AUTO_INCREMENT,
  36. `run_id` VARCHAR(64) NOT NULL COMMENT '发现运行 run_id',
  37. `search_key` VARCHAR(64) NOT NULL COMMENT '搜索参数哈希,仅用于追踪,不作为幂等键',
  38. `keyword` VARCHAR(256) NOT NULL COMMENT 'Agent 自主确定的搜索词',
  39. `query_reason` TEXT NOT NULL COMMENT '为何形成该搜索词、希望验证什么',
  40. `source_type` VARCHAR(32) NOT NULL
  41. COMMENT 'demand / seed / point / tag / author / pagination / mixed',
  42. `source_value` TEXT NULL COMMENT '来源点位、标签、作者或父关键词',
  43. `parent_search_id` BIGINT NULL COMMENT '由哪次搜索扩展而来',
  44. `provider` VARCHAR(32) NOT NULL DEFAULT 'internal_keyword'
  45. COMMENT 'internal_keyword / tikhub / internal_blogger',
  46. `provider_state_json` TEXT NULL
  47. COMMENT '供应方分页状态,如 TikHub search_id/backtrace',
  48. `content_type` VARCHAR(16) NOT NULL DEFAULT '视频' COMMENT '搜索内容类型',
  49. `sort_type` VARCHAR(32) NOT NULL DEFAULT '综合排序' COMMENT '搜索排序',
  50. `publish_time` VARCHAR(32) NOT NULL DEFAULT '不限' COMMENT '发布时间筛选',
  51. `cursor` VARCHAR(128) NOT NULL DEFAULT '0' COMMENT '本页游标',
  52. `page_no` INT NOT NULL DEFAULT 1 COMMENT '该关键词的页码',
  53. `results_count` INT NOT NULL DEFAULT 0 COMMENT '本页结果数',
  54. `new_candidate_count` INT NOT NULL DEFAULT 0 COMMENT '本页新增候选数',
  55. `has_more` TINYINT NOT NULL DEFAULT 0 COMMENT '接口是否有下一页',
  56. `next_cursor` VARCHAR(128) NULL COMMENT '下一页游标',
  57. `result_ids_json` TEXT NULL COMMENT '本页 aweme_id 列表 JSON',
  58. `status` VARCHAR(16) NOT NULL DEFAULT 'success' COMMENT 'success / failed',
  59. `error_message` TEXT NULL COMMENT '搜索失败信息',
  60. `create_time` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
  61. `update_time` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP
  62. ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
  63. PRIMARY KEY (`id`),
  64. KEY `idx_video_discovery_search_run` (`run_id`, `id`),
  65. KEY `idx_video_discovery_search_parent` (`run_id`, `parent_search_id`),
  66. KEY `idx_video_discovery_search_keyword` (`keyword`)
  67. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
  68. COMMENT='关键词、标签、作者或翻页搜索轨迹';
  69. CREATE TABLE IF NOT EXISTS `video_discovery_candidate` (
  70. `id` BIGINT NOT NULL AUTO_INCREMENT,
  71. `run_id` VARCHAR(64) NOT NULL COMMENT '发现运行 run_id',
  72. `search_id` BIGINT NULL COMMENT '直接关联 video_discovery_search.id;历史数据允许为空',
  73. `aweme_id` VARCHAR(64) NOT NULL COMMENT '抖音视频 id',
  74. `title` VARCHAR(512) NULL COMMENT '视频标题',
  75. `content_link` VARCHAR(1024) NULL COMMENT '抖音页面链接',
  76. `author_name` VARCHAR(256) NULL COMMENT '作者名',
  77. `author_sec_uid` VARCHAR(256) NULL COMMENT '作者 sec_uid',
  78. `source_keywords_json` TEXT NULL COMMENT '命中过该视频的搜索词 JSON',
  79. `source_search_ids_json` TEXT NULL COMMENT '来源搜索轨迹 id JSON',
  80. `tags_json` TEXT NULL COMMENT '视频标签/话题 JSON',
  81. `publish_at` DATETIME NULL COMMENT '视频真实发布时间,按运行时区解释',
  82. `duration_seconds` DECIMAL(10,3) NULL COMMENT '视频时长(秒)',
  83. `play_count` BIGINT NULL COMMENT '播放数快照',
  84. `like_count` BIGINT NULL COMMENT '点赞数快照',
  85. `comment_count` BIGINT NULL COMMENT '评论数快照',
  86. `collect_count` BIGINT NULL COMMENT '收藏数快照',
  87. `share_count` BIGINT NULL COMMENT '分享数快照',
  88. `content_age_evidence_json` TEXT NULL COMMENT '视频点赞用户年龄证据 JSON',
  89. `account_age_evidence_json` TEXT NULL COMMENT '作者粉丝年龄证据 JSON',
  90. `age_normalization_json` TEXT NULL COMMENT '双侧年龄画像标准化结果 JSON',
  91. `content_50_plus_ratio` DECIMAL(8,6) NULL COMMENT '视频点赞用户中 50+ 占比',
  92. `content_50_plus_tgi` DECIMAL(10,4) NULL COMMENT '视频点赞用户 50+ TGI',
  93. `content_portrait_status` VARCHAR(16) NULL COMMENT '视频画像结论 pass / fail / missing',
  94. `account_50_plus_ratio` DECIMAL(8,6) NULL COMMENT '账号粉丝中 50+ 占比',
  95. `account_50_plus_tgi` DECIMAL(10,4) NULL COMMENT '账号粉丝 50+ TGI',
  96. `account_portrait_status` VARCHAR(16) NULL COMMENT '账号画像结论 pass / fail / missing',
  97. `portrait_conflict` TINYINT NOT NULL DEFAULT 0 COMMENT '视频与账号画像结论是否冲突',
  98. `temporal_type` VARCHAR(24) NULL COMMENT '时间内容类型',
  99. `temporal_status` VARCHAR(16) NULL COMMENT '时间有效性 pass / fail / unknown',
  100. `temporal_evidence_json` TEXT NULL COMMENT '时间语义、有效窗口和判断理由 JSON',
  101. `gate_status` VARCHAR(16) NULL COMMENT '硬门槛 pass / fail / pending',
  102. `gate_results_json` TEXT NULL COMMENT '逐项硬门槛结果 JSON',
  103. `reject_reason_code` VARCHAR(64) NULL COMMENT '主要淘汰原因码',
  104. `rule_version` VARCHAR(64) NULL COMMENT '候选评估使用的规则版本',
  105. `relevance_score` DECIMAL(8,6) NULL COMMENT 'R,范围 0~1',
  106. `elder_score` DECIMAL(8,6) NULL COMMENT 'E,范围 0~1',
  107. `share_score` DECIMAL(8,6) NULL COMMENT 'S,范围 0~1',
  108. `value_score` DECIMAL(8,2) NULL COMMENT '联合价值 V,范围 0~1',
  109. `decision_reason` TEXT NULL COMMENT '最终分池依据',
  110. `decision_bucket` VARCHAR(24) NOT NULL DEFAULT 'pending_evaluation'
  111. COMMENT '最终为 primary / rejected;pending_evaluation 仅为过程状态',
  112. `create_time` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
  113. `update_time` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP
  114. ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
  115. PRIMARY KEY (`id`),
  116. KEY `idx_video_discovery_candidate_search` (`search_id`, `id`),
  117. KEY `idx_video_discovery_candidate_bucket` (`run_id`, `decision_bucket`),
  118. KEY `idx_video_discovery_candidate_author` (`author_sec_uid`),
  119. CONSTRAINT `fk_video_discovery_candidate_search`
  120. FOREIGN KEY (`search_id`) REFERENCES `video_discovery_search` (`id`)
  121. ON DELETE RESTRICT
  122. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
  123. COMMENT='本次运行发现的视频及评估快照';