title_rewrite_task.py 9.9 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216
  1. """
  2. @author: luojunhui
  3. """
  4. import traceback
  5. from pymysql.cursors import DictCursor
  6. from tqdm import tqdm
  7. from applications import log
  8. from applications.api import fetch_deepseek_response
  9. from applications.const import TitleRewriteTaskConst
  10. from applications.db import DatabaseConnector
  11. from config import long_articles_config
  12. const = TitleRewriteTaskConst()
  13. def generate_prompt(ori_title):
  14. """
  15. 生成prompt
  16. """
  17. prompt = f"""
  18. 请将以下标题改写成适合公众号中小程序点击和传播的文章标题,文章标题的写作规范如下,请学习后进行文章标题的编写。直接输出最终的文章标题,文章标题撰写规范如下:
  19. 1. 标题结构:要点前置,信息明确
  20. 核心信息前置:标题开头直接点出文章的核心内容或亮点,吸引读者注意。例如:
  21. “我国存款最安全的五大银行,永远都不会倒闭,你知道是哪五家吗?”
  22. “亩产7000斤,被误认成萝卜却曾是‘救命粮’,如今成我国出口名蔬”。
  23. 简洁明了:标题通常在20字以内,信息集中且易于理解。
  24. 悬念前置结构:前半句设置反常/冲突场景(如"刑满释放蹬三轮")+后半句用结果反转制造悬念("政府领导登门分配工作")
  25. 多要素拼接:通过冒号/逗号分隔不同叙事主体(地域+人物冲突+权威评价),如"辽宁女子住高档小区被敲门,法院判决意外"
  26. 2. 情绪表达:激发共鸣,引发好奇
  27. 情感共鸣:通过情感化的语言触动读者,泪崩/守护/抱头痛哭等情感冲击词,配合家庭伦理场景
  28. 例如:
  29. “老母亲分家产,给亲闺女30万,给养女一筐青菜,养女意外摔倒,看到筐子里的东西,瞬间愣住了”。
  30. “儿子卖车卖房给母亲治病,母亲去世后儿媳收拾房间,打开床底柜,儿子突然痛哭”。
  31. 悬念与好奇心:通过提问或制造悬念,激发读者点击欲望。例如:
  32. “你知道是哪五家吗?”
  33. “打开床底柜,儿子突然痛哭”。
  34. 冲突性情绪词:拍桌大骂/气愤不已/眼红不已/算计等强对抗性词汇
  35. 结果反差刺激:用"风光善终/价值过亿/判决意外"等违反预期的结果
  36. 3. 语言风格:口语化、接地气
  37. 口语化表达:使用通俗易懂的语言,贴近读者生活。
  38. 刻意使用"赶都赶不走/各吃各的/我就知道你在家"等市井化用语。
  39. 例如:
  40. “狗屎运?江西男子钓鱼时发现青鱼尸骸,扒开后捡到鸡蛋大小的青鱼石”。
  41. “聪明的女人,不会帮婆家3种忙,而蠢女人才一再插手”。
  42. 接地气的词汇:使用“狗屎运”“蠢女人”等口语化词汇,增强亲切感。
  43. 身份反差构建:突出人物命运转折(老农→亿万富翁/囚犯→政府帮扶对象)
  44. 权威背书暗示:"专家气愤/法院判决/网友评价"等第三方视角增强可信度
  45. 4. 标点运用:增强语气,突出重点
  46. 问号与感叹号:通过问号制造悬念,感叹号强化情感。
  47. 在关键转折点使用("太气人了!/赔不了!")
  48. 问号制造互动:如"容嬷嬷是校花?"激发读者验证心理
  49. 例如:
  50. “你知道是哪五家吗?”
  51. “太无耻了!湖南,一名厨师被公司派到云南‘出差’被拒……”
  52. 引号与冒号:用于突出关键词或转折点。
  53. 破折号递进:用"——"引导关键信息("吃不完最好扔掉——")
  54. 例如:
  55. “被误认成萝卜却曾是‘救命粮’”。
  56. “女子归还后,失主拒绝支付报酬,还说:要有格局”。
  57. 5. 热点与话题性:结合社会热点或争议
  58. 社会热点:结合当前热点事件或争议话题,吸引关注。例如:
  59. “上海:男子超市连续购买46枚过期咸鸭蛋,2天分46次交易,向厂家索赔金14万,法院判了!”
  60. 争议性话题:通过争议性内容引发讨论。例如:
  61. “李玉成终于说出实话,公开吐槽马玉琴年纪太大,结婚28年疑似后悔”。
  62. 6. 数字与具体细节:增强可信度与吸引力
  63. 数字的运用:通过具体数字增强标题的可信度和吸引力。例如:
  64. “亩产7000斤”。
  65. “22年河南男子跳河救人,体力耗尽留遗言”。
  66. 细节描述:通过细节让标题更具画面感。例如:
  67. “打开床底柜,儿子突然痛哭”。
  68. “扒开后捡到鸡蛋大小的青鱼石”。
  69. 7. 价值诉求:传递实用信息或情感价值
  70. 实用信息:提供对读者有价值的信息。例如:
  71. “我国存款最安全的五大银行,永远都不会倒闭”。
  72. “72岁老人每天一个蒸苹果,半年后体检,看到指标变化让他乐开了花”。
  73. 情感价值:通过情感故事或人生哲理打动读者。例如:
  74. “父母越老越能暴露家庭最真实的一面:当父母70岁,子女不该抱有这三种期待”。
  75. 8. 名人效应与历史情怀:增强吸引力
  76. 名人效应:提及名人或历史事件,吸引关注。例如:
  77. “难怪王扶林说陈晓旭不够漂亮,看看他选的原黛玉候选人,那才叫美”。
  78. “1975年‘下馆子’的老照片,2元能吃些什么,勾起那段最难忘的时光”。
  79. 9.隐藏传播逻辑:通过标题中暗含的、能触发人性弱点(如猎奇、贪婪、同情)或社会痛点的心理机制,通过潜意识刺激读者点击欲望
  80. 人性弱点触发:贪婪(200万保单)、猎奇(林彪密件)、窥私(家庭算计)
  81. 生存焦虑关联:医疗(脑瘫儿)、养老(子女不孝)、食品安全(二次加热)
  82. 身份代入设计:选择"老太太/外甥女/退休母亲"等易引发群体共鸣的角色
  83. 输入的标题是: '{ori_title}'
  84. """
  85. return prompt
  86. class TitleRewriteTask:
  87. """
  88. 标题重写任务
  89. """
  90. def __init__(self):
  91. self.db = DatabaseConnector(db_config=long_articles_config)
  92. self.db.connect()
  93. def get_articles_batch(self, batch_size=1000):
  94. """
  95. 从数据库中获取文章
  96. """
  97. sql = f"""
  98. select content_trace_id, article_title
  99. from publish_single_video_source
  100. where bad_status = {const.ARTICLE_POSITIVE_STATUS}
  101. and audit_status = {const.ARTICLE_AUDIT_PASSED_STATUS}
  102. and title_rewrite_status = {const.TITLE_REWRITE_INIT_STATUS}
  103. limit {batch_size};
  104. """
  105. res = self.db.fetch(query=sql, cursor_type=DictCursor)
  106. return res
  107. def update_title_rewrite_status(self, content_trace_id, ori_status, new_status):
  108. """
  109. 更新标题重写状态
  110. """
  111. sql = f"""
  112. update publish_single_video_source
  113. set title_rewrite_status = %s
  114. where content_trace_id = %s and title_rewrite_status= %s;
  115. """
  116. affected_rows = self.db.save(
  117. query=sql, params=(new_status, content_trace_id, ori_status)
  118. )
  119. return affected_rows
  120. def insert_into_rewrite_table(self, content_trace_id, new_title):
  121. """
  122. insert into rewrite_table
  123. """
  124. insert_sql = f"""
  125. insert into video_title_rewrite
  126. (content_trace_id, new_title, status, prompt_version)
  127. values (%s, %s, %s, %s);
  128. """
  129. self.db.save(
  130. query=insert_sql,
  131. params=(
  132. content_trace_id,
  133. new_title,
  134. const.TITLE_USEFUL_STATUS,
  135. const.PROMPT_VERSION
  136. ),
  137. )
  138. def rewrite_each_article(self, article):
  139. """
  140. rewrite each article
  141. """
  142. content_trace_id = article["content_trace_id"]
  143. article_title = article["article_title"]
  144. # lock each task
  145. affected_rows = self.update_title_rewrite_status(
  146. content_trace_id=content_trace_id,
  147. ori_status=const.TITLE_REWRITE_INIT_STATUS,
  148. new_status=const.TITLE_REWRITE_LOCK_STATUS,
  149. )
  150. if not affected_rows:
  151. return
  152. try:
  153. prompt = generate_prompt(article_title)
  154. new_title = fetch_deepseek_response(model="default", prompt=prompt)
  155. # insert into rewrite table
  156. self.insert_into_rewrite_table(
  157. content_trace_id=content_trace_id, new_title=new_title
  158. )
  159. # unlock
  160. self.update_title_rewrite_status(
  161. content_trace_id=content_trace_id,
  162. ori_status=const.TITLE_REWRITE_LOCK_STATUS,
  163. new_status=const.TITLE_REWRITE_SUCCESS_STATUS,
  164. )
  165. except Exception as e:
  166. log(
  167. task="title rewrite task",
  168. function="rewrite_each_article",
  169. message=content_trace_id,
  170. status="fail",
  171. data={
  172. "error_message": str(e),
  173. "error_type": type(e).__name__,
  174. "traceback": traceback.format_exc(),
  175. },
  176. )
  177. self.update_title_rewrite_status(
  178. content_trace_id=content_trace_id,
  179. ori_status=const.TITLE_REWRITE_LOCK_STATUS,
  180. new_status=const.TITLE_REWRITE_FAIL_STATUS,
  181. )
  182. def deal(self):
  183. """
  184. get tasks && deal tasks
  185. """
  186. articles = self.get_articles_batch()
  187. bar = tqdm(articles, desc="title rewrite task")
  188. for article in bar:
  189. self.rewrite_each_article(article)
  190. bar.set_postfix({"content_trace_id": article["content_trace_id"]})