demand_pattern_tools.py 29 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558
  1. #!/usr/bin/env python3
  2. # -*- coding: utf-8 -*-
  3. """
  4. Pattern 数据查询工具
  5. 提供给 TopicBuildClaudeCodeAgent 使用的 pattern 挖掘结果查询函数。
  6. 所有工具均为只读操作,不修改数据库。
  7. 工具列表:
  8. - get_category_tree: 分类树快照(紧凑文本格式)
  9. - get_frequent_itemsets: 搜索频繁项集(按分类ID、维度模式筛选,分组返回)
  10. - get_itemset_detail: 单个项集详情
  11. - get_post_elements: 帖子结构化元素
  12. - search_elements: 按关键词搜索元素
  13. - get_element_category_chain: 元素名称列表批量反查分类链
  14. - get_category_detail: 分类节点详情
  15. - search_categories: 按关键词搜索分类
  16. - get_category_elements: 分类下的元素列表
  17. 【重要】所有作为 Agent tool 注册的函数,必须包含完整的 docstring 签名。
  18. """
  19. import json
  20. import os
  21. from typing import Any
  22. from agent import tool
  23. from examples.demand.demand_agent_context import TopicBuildAgentContext
  24. from examples.demand.log_capture import log
  25. from examples.demand.pattern_builds import pg_pattern_service as pattern_service
  26. def _log_tool_input(tool_name: str, params: dict):
  27. """工具调用前立即打印参数"""
  28. log(f"\n[FOLD:🔧 {tool_name}]")
  29. log(f"[FOLD:📥 调用参数]")
  30. log(json.dumps(params, ensure_ascii=False, indent=2))
  31. log(f"[/FOLD]")
  32. def _log_tool_output(tool_name: str, result: str) -> str:
  33. """工具执行完成后打印返回内容"""
  34. log(f"[FOLD:📤 返回内容]")
  35. log(result)
  36. log(f"[/FOLD]")
  37. log(f"[/FOLD]\n")
  38. return result
  39. def _normalize_itemset_ids(itemset_ids: Any) -> list[int]:
  40. """Normalize LLM tool args into a list of integer itemset ids."""
  41. if itemset_ids is None:
  42. return []
  43. if isinstance(itemset_ids, int):
  44. return [itemset_ids]
  45. if isinstance(itemset_ids, str):
  46. raw = itemset_ids.strip()
  47. if not raw:
  48. return []
  49. try:
  50. loaded = json.loads(raw)
  51. except json.JSONDecodeError:
  52. loaded = [part.strip() for part in raw.split(",") if part.strip()]
  53. return _normalize_itemset_ids(loaded)
  54. if isinstance(itemset_ids, (list, tuple, set)):
  55. normalized: list[int] = []
  56. seen: set[int] = set()
  57. for value in itemset_ids:
  58. try:
  59. int_value = int(str(value).strip())
  60. except (TypeError, ValueError):
  61. continue
  62. if int_value not in seen:
  63. seen.add(int_value)
  64. normalized.append(int_value)
  65. return normalized
  66. try:
  67. return [int(itemset_ids)]
  68. except (TypeError, ValueError):
  69. return []
  70. def _env_int(name: str, default: int) -> int:
  71. try:
  72. return int(os.getenv(name, str(default)))
  73. except ValueError:
  74. return default
  75. def _is_mysql_demand_content_entrypoint() -> bool:
  76. return os.getenv("DEMAND_MYSQL_ENTRYPOINT") == "run_existing_execution_mysql"
  77. def _compact_itemset_detail_for_mysql(data: list[dict[str, Any]]) -> list[dict[str, Any]]:
  78. if not _is_mysql_demand_content_entrypoint():
  79. return data
  80. max_post_ids = max(_env_int("DEMAND_ITEMSET_DETAIL_MAX_POST_IDS", 20), 1)
  81. compacted: list[dict[str, Any]] = []
  82. for raw_itemset in data:
  83. itemset = dict(raw_itemset)
  84. for key in ("post_ids", "matched_post_ids"):
  85. post_ids = itemset.get(key)
  86. if isinstance(post_ids, list) and len(post_ids) > max_post_ids:
  87. itemset[f"{key}_total"] = len(post_ids)
  88. itemset[key] = post_ids[:max_post_ids]
  89. compacted.append(itemset)
  90. return compacted
  91. # ============================================================================
  92. # 执行 & 配置 & 分类树
  93. # ============================================================================
  94. @tool(
  95. "获取二级品类分类树结构快照。分类树是所有数据的骨架——帖子中的元素按'实质/形式/意图'三个维度归类到树形分类节点中。"
  96. "\n\n返回紧凑文本格式,包含每个分类节点的名称、层级和元素数量。这是理解数据整体结构的起点。"
  97. "\n\n使用场景:"
  98. "\n- 启动时调用,了解数据涵盖哪些主题领域和维度"
  99. "\n- 按 source_type 筛选单个维度,聚焦分析"
  100. "\n- 从树中发现感兴趣的分类节点,获取其 ID 后用于 get_frequent_itemsets、get_category_detail 等"
  101. )
  102. def get_category_tree(source_type: str = None) -> str:
  103. """获取当前执行的分类树快照,返回紧凑文本格式(节省token)。
  104. Args:
  105. source_type: 按元素类型筛选:实质/形式/意图。不传则返回所有类型。
  106. Returns:
  107. 分类树的紧凑文本字符串。
  108. """
  109. execution_id = TopicBuildAgentContext.get_execution_id()
  110. params = {"execution_id": execution_id, "source_type": source_type}
  111. _log_tool_input("get_category_tree", params)
  112. result = pattern_service.get_category_tree_compact(execution_id, source_type=source_type)
  113. return _log_tool_output("get_category_tree", result)
  114. # ============================================================================
  115. # 项集查询
  116. # ============================================================================
  117. @tool("获取频繁项集——即经常在同一帖子中共同出现的分类组合。结果按 dimension_mode/depth 分组返回,每组各返回 top_n 条。"
  118. "\n\n核心概念:每个频繁项集 = 一组高概率共现的分类节点。absolute_support = 同时出现在多少个帖子中。"
  119. "\n\n返回结构:groups 字典,key 为 'dimension_mode/target_depth',每组含 dimension_mode、target_depth、total(该组总数)、itemsets 列表。"
  120. "\n\n使用场景:"
  121. "\n- 全局探索:不传 category_ids,浏览支持度最高的共现模式"
  122. "\n- 定向查询:传入 category_ids=[A],获取所有包含分类A的项集,即A和哪些分类共现"
  123. "\n- 交叉共现:传入 category_ids=[A,B],获取同时包含A和B的项集,发现A+B还经常和什么一起出现"
  124. "\n- 渐进探索:先查 category_ids=[A] 发现B共现多,再查 category_ids=[A,B] 缩小范围"
  125. "\n- 维度聚焦:用 dimension_mode 筛选特定挖掘模式的结果"
  126. "\n- 帖子范围筛选:用 account_name/merge_leve2 限定帖子来源,筛选后重算 support"
  127. "\n\n提示:category_ids 需要分类节点ID,可先用 search_categories 按名称查ID。项集详情(匹配帖子等)通过 get_itemset_detail 获取。")
  128. def get_frequent_itemsets(
  129. top_n: int = 20,
  130. category_ids: list = None,
  131. dimension_mode: str = None,
  132. min_support: int = None,
  133. min_item_count: int = None,
  134. max_item_count: int = None,
  135. sort_by: str = "absolute_support",
  136. account_name=None,
  137. merge_leve2=None,
  138. ) -> str:
  139. """获取频繁项集——即经常在同一帖子中共同出现的分类组合,按 dimension_mode/depth 分组返回。
  140. 使用场景:
  141. - 全局探索: 不传 category_ids,浏览支持度最高的共现模式
  142. - 定向查询: category_ids=[A],获取包含分类A的所有项集,即A和哪些分类共现
  143. - 交叉共现: category_ids=[A,B],获取同时包含A和B的项集,发现A+B还经常和什么一起出现
  144. - 渐进探索: 先查 [A] 发现B共现多,再查 [A,B] 缩小范围,逐步聚焦
  145. - 维度聚焦: dimension_mode 筛选特定挖掘模式
  146. category_ids 需要分类节点ID,可先用 search_categories 按名称查找。
  147. 返回精简信息,详情(匹配帖子等)通过 get_itemset_detail 获取。
  148. Args:
  149. top_n: 返回前N个项集,默认20。
  150. category_ids: 分类节点ID列表(AND逻辑)。传入后返回同时包含所有这些分类的项集;不传则返回全局Top。
  151. dimension_mode: 挖掘维度模式筛选。full=点类型×元素类型(混合),substance_form_only=仅元素类型,point_type_only=仅点类型。
  152. min_support: 最低绝对支持度(共现帖子数)阈值。
  153. min_item_count: 项集最少包含的分类数量。
  154. max_item_count: 项集最多包含的分类数量。
  155. sort_by: 排序方式:absolute_support=共现帖子数(默认),support=相对支持度,item_count=分类数量。
  156. account_name: 按账号名筛选,支持单个字符串或列表(多个取OR)。
  157. merge_leve2: 按二级品类筛选,支持单个字符串或列表(多个取OR)。
  158. Returns:
  159. 按 dimension_mode/depth 分组的项集JSON,每组含 itemsets 列表。
  160. """
  161. execution_id = TopicBuildAgentContext.get_execution_id()
  162. params = {
  163. "execution_id": execution_id, "top_n": top_n,
  164. "category_ids": category_ids, "dimension_mode": dimension_mode,
  165. "min_support": min_support,
  166. "min_item_count": min_item_count, "max_item_count": max_item_count,
  167. "sort_by": sort_by,
  168. "account_name": account_name, "merge_leve2": merge_leve2,
  169. }
  170. _log_tool_input("get_frequent_itemsets", params)
  171. data = pattern_service.search_top_itemsets(
  172. execution_id=execution_id, top_n=top_n,
  173. category_ids=category_ids, dimension_mode=dimension_mode,
  174. min_support=min_support,
  175. min_item_count=min_item_count, max_item_count=max_item_count,
  176. sort_by=sort_by,
  177. account_name=account_name, merge_leve2=merge_leve2,
  178. )
  179. result = json.dumps(data, ensure_ascii=False, indent=2)
  180. return _log_tool_output("get_frequent_itemsets", result)
  181. @tool("获取一个或多个频繁项集的完整详情。相比 get_frequent_itemsets 的精简列表,这里返回每个项集的所有信息。"
  182. "\n\n返回内容:每个项集的 dimension_mode(维度模式)、target_depth(挖掘深度)、items 完整结构(含分类路径、元素名称、维度、点类型)、post_ids(匹配的帖子ID列表)、支持度等。"
  183. "\n\n使用场景:"
  184. "\n- 从 get_frequent_itemsets 中发现有价值的项集后,批量查看其匹配了哪些帖子"
  185. "\n- 获取 post_ids 后可传给 get_post_elements 查看帖子的具体内容"
  186. "\n- 支持传入多个 itemset_id,一次获取多个项集的详情,减少调用次数")
  187. def get_itemset_detail(itemset_ids) -> str:
  188. """获取一个或多个频繁项集的详情,包括每个项集的维度模式、depth、items 结构(含分类路径、元素名称、维度、点类型)和匹配的帖子ID列表。
  189. Args:
  190. itemset_ids: 项集ID,单个整数或整数列表。
  191. Returns:
  192. 项集详情列表的JSON字符串,每项含 id, dimension_mode, target_depth, items, post_ids, absolute_support。
  193. """
  194. itemset_ids = _normalize_itemset_ids(itemset_ids)
  195. if _is_mysql_demand_content_entrypoint():
  196. max_ids = max(_env_int("DEMAND_ITEMSET_DETAIL_MAX_IDS", 12), 1)
  197. itemset_ids = itemset_ids[:max_ids]
  198. params = {"itemset_ids": itemset_ids}
  199. _log_tool_input("get_itemset_detail", params)
  200. if not itemset_ids:
  201. return _log_tool_output("get_itemset_detail", "错误: itemset_ids 为空或无法解析")
  202. execution_id = TopicBuildAgentContext.get_execution_id()
  203. data = pattern_service.get_itemset_posts(itemset_ids, execution_id=execution_id)
  204. if not data:
  205. return _log_tool_output("get_itemset_detail", f"未找到 itemset_ids={itemset_ids} 的项集")
  206. result = json.dumps(_compact_itemset_detail_for_mysql(data), ensure_ascii=False, indent=2)
  207. return _log_tool_output("get_itemset_detail", result)
  208. # ============================================================================
  209. # 帖子 & 元素
  210. # ============================================================================
  211. @tool("获取指定帖子的结构化元素数据。每个帖子的内容被拆解为多个'选题点',每个点下有实质/形式/意图三个维度的元素。"
  212. "\n\n返回结构:按帖子分组 → 按点类型分组 → 每个点含 point_text(点的原文)和 elements(三维度元素列表)。"
  213. "\n\n使用场景:"
  214. "\n- 从 get_itemset_detail 获取 post_ids 后,深入查看这些帖子的具体内容结构"
  215. "\n- 验证某个共现模式在帖子中的实际表现"
  216. "\n- 发现帖子中未被分类捕捉到的内容细节")
  217. def get_post_elements(post_ids: list) -> str:
  218. """获取指定帖子的结构化元素数据。按帖子分组,每个帖子按 点类型→元素类型 组织。用于深入了解某个项集匹配的帖子具体内容。
  219. Args:
  220. post_ids: 帖子ID列表(建议每次不超过10个)。
  221. Returns:
  222. 帖子元素数据的JSON字符串,结构: {post_id: {point_type: [{point_text, elements: {实质, 形式, 意图}}]}}。
  223. """
  224. execution_id = TopicBuildAgentContext.get_execution_id()
  225. params = {"execution_id": execution_id, "post_ids": post_ids}
  226. _log_tool_input("get_post_elements", params)
  227. if len(post_ids) > 20:
  228. return _log_tool_output("get_post_elements",
  229. f"错误: post_ids 数量过多({len(post_ids)}),请每次不超过20个")
  230. data = pattern_service.get_post_elements(execution_id, post_ids)
  231. result = json.dumps(data, ensure_ascii=False, indent=2)
  232. return _log_tool_output("get_post_elements", result)
  233. @tool("按名称关键词搜索元素。元素是帖子中的具体内容实体(如'水煮鱼'、'短视频'),归属于分类树的叶子节点下。"
  234. "\n\n返回去重聚合结果:每个元素附带 point_types(该元素出现在哪些点类型中,如['灵感点','关键点'])、"
  235. "所属分类(category_id、category_path)、出现次数和帖子数。"
  236. "\n\n使用场景:"
  237. "\n- 从某个关键词出发,找到相关元素及其分类归属"
  238. "\n- 通过 point_types 了解元素在灵感点/目的点/关键点中的分布"
  239. "\n- 获取元素名称后,传给 get_element_co_occurrences 查共现关系"
  240. "\n- 通过元素的 category_id 桥接到 get_frequent_itemsets 做分类级分析")
  241. def search_elements(keyword: str, element_type: str = None, limit: int = 50,
  242. account_name=None, merge_leve2=None) -> str:
  243. """按名称关键词搜索元素。返回去重聚合后的元素列表,每个元素附带其所属分类信息(category_id、category_path)、出现次数和帖子数。
  244. 使用场景:
  245. - 从某个关键词出发,找到相关元素及其分类归属
  246. - 了解某个元素在数据中出现的频率
  247. Args:
  248. keyword: 搜索关键词(模糊匹配元素名称)。
  249. element_type: 按维度筛选:实质/形式/意图。不传则搜索所有维度。
  250. limit: 最多返回数量,默认50。
  251. account_name: 按账号名筛选,支持单个字符串或列表(多个取OR)。
  252. merge_leve2: 按二级品类筛选,支持单个字符串或列表(多个取OR)。
  253. Returns:
  254. 元素列表的JSON字符串,每个元素含 name、element_type、category_id、category_path、occurrence_count、post_count。
  255. """
  256. execution_id = TopicBuildAgentContext.get_execution_id()
  257. params = {"execution_id": execution_id, "keyword": keyword,
  258. "element_type": element_type, "limit": limit,
  259. "account_name": account_name, "merge_leve2": merge_leve2}
  260. _log_tool_input("search_elements", params)
  261. data = pattern_service.search_elements(execution_id, keyword, element_type=element_type, limit=limit,
  262. account_name=account_name, merge_leve2=merge_leve2)
  263. result = json.dumps({
  264. "keyword": keyword,
  265. "count": len(data),
  266. "elements": data,
  267. }, ensure_ascii=False, indent=2)
  268. return _log_tool_output("search_elements", result)
  269. @tool("从元素名称列表批量反查各自所属的完整分类链。每个元素可能归属于多个分类节点,每项返回每个归属分类从根到叶的完整祖先路径。"
  270. "\n\n使用场景:"
  271. "\n- 知道多个元素名称,想了解它们在分类树中的位置"
  272. "\n- 从元素出发向上回溯分类层级,获取 category_id 用于 get_frequent_itemsets"
  273. "\n- 理解同一元素在不同维度下的分类归属差异")
  274. def get_element_category_chain(element_names: list[str], element_type: str = None) -> str:
  275. """从元素名称批量反查所属分类链。对每个名称返回其出现在哪些分类下,以及每个分类的完整祖先路径(从根到叶)。
  276. 使用场景:
  277. - 知道多个元素名称,想了解它们在分类树中的位置
  278. - 从元素出发,向上回溯分类层级,为泛化推理提供路径
  279. Args:
  280. element_names: 元素名称列表(精确匹配,顺序与返回 results 一一对应)。
  281. element_type: 按维度筛选:实质/形式/意图。不传则查所有维度(对所有名称共用)。
  282. Returns:
  283. JSON 字符串。含 query_count 与 results,每项含 element_name、category_chains(含 category_id、category_path、ancestors 等)。
  284. """
  285. execution_id = TopicBuildAgentContext.get_execution_id()
  286. params = {"execution_id": execution_id, "element_names": element_names,
  287. "element_type": element_type}
  288. _log_tool_input("get_element_category_chain", params)
  289. if not element_names:
  290. return _log_tool_output("get_element_category_chain", "错误: element_names 不能为空列表")
  291. if not isinstance(element_names, list):
  292. return _log_tool_output(
  293. "get_element_category_chain",
  294. f"错误: element_names 必须为列表,当前类型: {type(element_names).__name__}",
  295. )
  296. stripped: list[str] = []
  297. for i, n in enumerate(element_names):
  298. if n is None or (isinstance(n, str) and not n.strip()):
  299. return _log_tool_output(
  300. "get_element_category_chain",
  301. f"错误: element_names[{i}] 不能为空",
  302. )
  303. stripped.append(str(n).strip())
  304. results = []
  305. for name in stripped:
  306. data = pattern_service.get_element_category_chain(
  307. execution_id, name, element_type=element_type
  308. )
  309. results.append({"element_name": name, "category_chains": data})
  310. out = {
  311. "element_type": element_type,
  312. "query_count": len(stripped),
  313. "results": results,
  314. }
  315. result = json.dumps(out, ensure_ascii=False, indent=2)
  316. return _log_tool_output("get_element_category_chain", result)
  317. # ============================================================================
  318. # 分类导航
  319. # ============================================================================
  320. @tool("获取分类节点的完整上下文信息,用于在分类树中导航和理解某个分类的位置。"
  321. "\n\n返回内容:自身信息(名称、层级、元素数)、祖先链(从根到当前的路径)、直接子节点、同级兄弟节点、"
  322. "该分类下的元素列表(Top100,每个元素含 point_types 列表表示出现在哪些点类型中)。"
  323. "\n\n使用场景:"
  324. "\n- 从 get_frequent_itemsets 中发现某个分类后,了解它的层级上下文"
  325. "\n- 向上泛化:查看祖先节点,理解更宏观的领域"
  326. "\n- 向下细化:查看子节点,找到更具体的方向"
  327. "\n- 平行探索:查看兄弟节点,发现同级别的其他内容领域"
  328. "\n- 获取子节点的 category_id 后可传给 get_frequent_itemsets 做进一步分析")
  329. def get_category_detail(category_id: int) -> str:
  330. """获取分类节点的完整上下文。包括: 自身信息、祖先链(从根到当前节点的路径)、直接子节点列表、同级兄弟节点列表、该分类下的元素列表(去重聚合Top100)。
  331. 使用场景:
  332. - 查看某个分类节点的全貌
  333. - 从分类出发向上回溯(祖先)或向下展开(子节点)
  334. - 查看同级兄弟节点,发现平行的内容领域
  335. Args:
  336. category_id: PG Pattern V2 `pattern_mining_category.id`。
  337. Returns:
  338. 分类详情的JSON字符串,含 category、ancestors、children、siblings、elements。
  339. """
  340. execution_id = TopicBuildAgentContext.get_execution_id()
  341. params = {"execution_id": execution_id, "category_id": category_id}
  342. _log_tool_input("get_category_detail", params)
  343. data = pattern_service.get_category_detail_with_context(execution_id, category_id)
  344. if not data:
  345. return _log_tool_output("get_category_detail", f"未找到 category_id={category_id}")
  346. result = json.dumps(data, ensure_ascii=False, indent=2)
  347. return _log_tool_output("get_category_detail", result)
  348. @tool("按名称关键词搜索分类节点。分类节点是分类树上的一个层级(如'中餐'),区别于具体元素(如'水煮鱼')。"
  349. "\n\n返回匹配的分类列表,含 id、name、path、level、element_count、point_types(该分类下元素涉及的点类型列表,如['灵感点','关键点'])。"
  350. "\n\n使用场景:"
  351. "\n- 获取分类的 category_id,用于 get_frequent_itemsets(category_ids=[...]) 查共现"
  352. "\n- 通过 point_types 了解分类在灵感点/目的点/关键点中的分布"
  353. "\n- 获取 category_id 后传给 get_category_detail 查看层级上下文"
  354. "\n- 作为 get_frequent_itemsets 的前置步骤:先按名称找到 ID,再查频繁项集")
  355. def search_categories(keyword: str, source_type: str = None) -> str:
  356. """按名称关键词搜索分类节点。返回匹配的分类列表,含 id、name、path、level、element_count 等。
  357. 使用场景:
  358. - 用关键词定位分类节点,然后用 get_category_detail 或 get_frequent_itemsets_by_category 进一步探索
  359. Args:
  360. keyword: 搜索关键词(模糊匹配分类名称)。
  361. source_type: 按维度筛选:实质/形式/意图。不传则搜索所有维度。
  362. Returns:
  363. 分类列表的JSON字符串。
  364. """
  365. execution_id = TopicBuildAgentContext.get_execution_id()
  366. params = {"execution_id": execution_id, "keyword": keyword, "source_type": source_type}
  367. _log_tool_input("search_categories", params)
  368. data = pattern_service.search_categories(execution_id, keyword, source_type=source_type)
  369. result = json.dumps({
  370. "keyword": keyword,
  371. "count": len(data),
  372. "categories": data,
  373. }, ensure_ascii=False, indent=2)
  374. return _log_tool_output("search_categories", result)
  375. @tool("获取某个分类节点下的具体元素列表。分类是抽象方向(如'中餐'),元素是具体实例(如'水煮鱼'、'麻婆豆腐')。"
  376. "\n\n返回按名称去重聚合的元素列表,按出现次数降序,含 name、element_type、point_types(该元素出现在哪些点类型中)、occurrence_count、post_count。"
  377. "\n\n使用场景:"
  378. "\n- 从分类节点下钻到具体元素,了解该分类包含哪些内容"
  379. "\n- 通过 point_types 了解元素在灵感点/目的点/关键点中的分布"
  380. "\n- 获取元素名称后,传给 get_element_co_occurrences 查元素级共现"
  381. "\n- 从频繁项集的分类出发,落地到可用于选题的具体元素")
  382. def get_category_elements(category_id: int, account_name=None, merge_leve2=None) -> str:
  383. """获取某个分类节点下的元素列表(按名称去重聚合),按出现次数降序。
  384. Args:
  385. category_id: 分类节点ID。
  386. account_name: 按账号名筛选,支持单个字符串或列表(多个取OR)。
  387. merge_leve2: 按二级品类筛选,支持单个字符串或列表(多个取OR)。
  388. Returns:
  389. 元素列表的JSON字符串,每个元素含 name、element_type、occurrence_count、post_count。
  390. """
  391. execution_id = TopicBuildAgentContext.get_execution_id()
  392. params = {"category_id": category_id, "account_name": account_name, "merge_leve2": merge_leve2}
  393. _log_tool_input("get_category_elements", params)
  394. data = pattern_service.get_category_elements(category_id, execution_id=execution_id,
  395. account_name=account_name, merge_leve2=merge_leve2)
  396. result = json.dumps({
  397. "category_id": category_id,
  398. "element_count": len(data),
  399. "elements": data,
  400. }, ensure_ascii=False, indent=2)
  401. return _log_tool_output("get_category_elements", result)
  402. # ============================================================================
  403. # 共现查询
  404. # ============================================================================
  405. @tool("查询分类级共现关系——找到同时包含指定分类下元素的帖子,统计这些帖子中其他分类的出现频率。"
  406. "\n\n核心概念:与 get_frequent_itemsets 不同,此工具是实时从帖子数据中计算共现,"
  407. "不依赖预计算的频繁项集,因此可以灵活组合任意分类进行探索。"
  408. "\n\n使用场景:"
  409. "\n- 单分类探索:category_ids=[123],发现经常和该分类一起出现的其他分类"
  410. "\n- 多分类交叉:category_ids=[123,456],发现同时涉及这两个分类的帖子中还包含什么分类"
  411. "\n- 渐进聚焦:先查单个分类,发现高频共现后叠加查询缩小范围"
  412. "\n- 验证频繁项集:将 get_frequent_itemsets 中发现的模式用此工具做更细粒度的验证"
  413. "\n\n提示:需要分类节点ID,可先用 search_categories 按名称查找。")
  414. def get_category_co_occurrences(category_ids: list, top_n: int = 30,
  415. account_name=None, merge_leve2=None) -> str:
  416. """查询多个分类的共现关系。找到同时包含所有指定分类下元素的帖子,返回这些帖子中其他分类的出现频率。
  417. 支持叠加多分类,传入越多分类,结果越精确(交集缩小)。
  418. Args:
  419. category_ids: 分类节点ID列表(AND逻辑)。传入多个时取帖子交集。
  420. top_n: 返回共现频率最高的前N个分类,默认30。
  421. account_name: 按账号名筛选帖子范围,支持单个字符串或列表(多个取OR)。
  422. merge_leve2: 按二级品类筛选帖子范围,支持单个字符串或列表(多个取OR)。
  423. Returns:
  424. 共现分类列表的JSON字符串,含 matched_post_count(交集帖子数)和 co_categories(共现分类排名)。
  425. """
  426. execution_id = TopicBuildAgentContext.get_execution_id()
  427. params = {"execution_id": execution_id, "category_ids": category_ids, "top_n": top_n,
  428. "account_name": account_name, "merge_leve2": merge_leve2}
  429. _log_tool_input("get_category_co_occurrences", params)
  430. if not category_ids:
  431. return _log_tool_output("get_category_co_occurrences", "错误: category_ids 不能为空")
  432. data = pattern_service.get_category_co_occurrences(
  433. execution_id=execution_id, category_ids=category_ids, top_n=top_n,
  434. account_name=account_name, merge_leve2=merge_leve2,
  435. )
  436. result = json.dumps(data, ensure_ascii=False, indent=2)
  437. return _log_tool_output("get_category_co_occurrences", result)
  438. @tool("查询元素级共现关系——找到同时包含指定元素的帖子,统计这些帖子中其他元素的出现频率。"
  439. "\n\n与 get_category_co_occurrences(分类级共现)互补:此工具在具体元素粒度上分析共现,更适合落地到选题细节。"
  440. "\n\n返回的每个共现元素含 point_types(该元素出现在哪些点类型中,如['灵感点','关键点'])。"
  441. "\n\n使用场景:"
  442. "\n- 单元素探索:element_names=['猫咪'],发现经常和猫咪一起出现的其他元素"
  443. "\n- 多元素交叉:element_names=['猫咪','拟人化'],发现同时涉及这两个元素的帖子还包含什么"
  444. "\n- 渐进聚焦:先查单个元素,发现高频共现后叠加查询缩小范围"
  445. "\n\n提示:element_names 需要精确匹配,可先用 search_elements 按关键词查找确切名称。")
  446. def get_element_co_occurrences(element_names: list, top_n: int = 30,
  447. account_name=None, merge_leve2=None) -> str:
  448. """查询多个元素的共现关系。找到同时包含所有指定元素的帖子,返回这些帖子中其他元素的出现频率。
  449. 支持叠加多元素,传入越多元素,结果越精确(交集缩小)。
  450. Args:
  451. element_names: 元素名称列表(精确匹配)。传入多个时取帖子交集。
  452. top_n: 返回共现频率最高的前N个元素,默认30。
  453. account_name: 按账号名筛选帖子范围,支持单个字符串或列表(多个取OR)。
  454. merge_leve2: 按二级品类筛选帖子范围,支持单个字符串或列表(多个取OR)。
  455. Returns:
  456. 共现元素列表的JSON字符串,含 matched_post_count(交集帖子数)和 co_elements(共现元素排名)。
  457. """
  458. execution_id = TopicBuildAgentContext.get_execution_id()
  459. params = {"execution_id": execution_id, "element_names": element_names, "top_n": top_n,
  460. "account_name": account_name, "merge_leve2": merge_leve2}
  461. _log_tool_input("get_element_co_occurrences", params)
  462. if not element_names:
  463. return _log_tool_output("get_element_co_occurrences", "错误: element_names 不能为空")
  464. data = pattern_service.get_element_co_occurrences(
  465. execution_id=execution_id, element_names=element_names, top_n=top_n,
  466. account_name=account_name, merge_leve2=merge_leve2,
  467. )
  468. result = json.dumps(data, ensure_ascii=False, indent=2)
  469. return _log_tool_output("get_element_co_occurrences", result)
  470. if __name__ == '__main__':
  471. TopicBuildAgentContext.set_execution_id(1)
  472. print(get_category_tree('实质'))