From e3ccf0db0dc2e65482b42af992bde4bf1e9175c9 Mon Sep 17 00:00:00 2001 From: MasonLiu <2857911564@qq.com> Date: Tue, 14 Jan 2025 10:17:47 +0800 Subject: [PATCH] fixed a bug --- Core.py | 2 +- UpdateLOG.md | 68 ++++++++++++++++--------------- resources/db/baidu.db | Bin 24576 -> 0 bytes resources/history/baidu_news.md | 70 -------------------------------- 4 files changed, 37 insertions(+), 103 deletions(-) delete mode 100644 resources/db/baidu.db diff --git a/Core.py b/Core.py index 31dc1d4..2f6d692 100644 --- a/Core.py +++ b/Core.py @@ -129,7 +129,7 @@ def send_job_RSS(time_1): check_avaliable(result_seebug_long, result_seebug_short, "Seebug社区资讯", webhook_url, timestamp, sign) def send_job_SX(): - Sogou_WX = get_kewords_config('Sogou_WX') + Sogou_WX = get_kewords_config('Sogou-WX') sougou_wx_main(Sogou_WX) result_sx_long = Src_sougou_wx(False) result_sx_short = Src_sougou_wx(True) diff --git a/UpdateLOG.md b/UpdateLOG.md index 19aa718..f10f97f 100644 --- a/UpdateLOG.md +++ b/UpdateLOG.md @@ -1,42 +1,46 @@ -### 问题反馈
-- 准点发送的文章在定点推送模式下可能会被遗漏推送
+### 问题反馈 +- 准点发送的文章在定点推送模式下可能会被遗漏推送 `已通过增加时间范围功能改善此问题,彻底解决需要重构代码` -- 钉钉/企业微信/蓝信webhook存在字节长度限制,需要优化程序推送逻辑
+- 钉钉/企业微信/蓝信webhook存在字节长度限制,需要优化程序推送逻辑 `尽力改善中,彻底解决需重构代码` -- 首次运行时若抓取RSS源失败,筛选模块无法获取json文件时会导致中断
+- 首次运行时若抓取RSS源失败,筛选模块无法获取json文件时会导致中断 `为项目添加一个初始json文件` +- 程序运行会产生越来越巨大的DB文件与Markdown文件,同时web网页显示的内容也会非常长,不利于节省服务器流量与加载速度 +`为系统添加性能限制模块` -### 下一步计划(待完成)
-- 添加更多RSS订阅源(持续进行中)
-- 添加更多推送方式,如邮件、微信等
-- 添加百度搜索、谷歌搜索等更多相关检测源,后续将支持谷歌语法
+### 下一步计划(待完成) +- 添加更多RSS订阅源(持续进行中) +- 添加更多推送方式,如邮件、微信等 +- 添加谷歌搜索等更多相关检测源,后续将支持谷歌语法 +- 添加性能限制模块 -### 下一步计划(已完成)
+### 下一步计划(已完成) - 将所有打印信息转为logging info并存档(已完成)
-- 将logging info转为异步的loguru(已完成)
-- 探查异常中断原因(已解决,获取rss源时的请求未做超时检测)
-- 添加超时机制,防止程序异常卡死(已完成)
-- 存档所有推送文章方便以后查看(已完成)
-- 创建Web网页以展示最新推送(info.masonliu.com,已完成)
-- 更换筛选模块,由时段筛选改为历史记录筛选以确保不会有资讯漏报(筛选条件增加了时间筛选和是否已发送筛选)
-- 添加GitHub等监测源(重构参考项目逻辑并上线)
+- 将logging info转为异步的loguru(已完成) +- 探查异常中断原因(已解决,获取rss源时的请求未做超时检测) +- 添加超时机制,防止程序异常卡死(已完成) +- 存档所有推送文章方便以后查看(已完成) +- 创建Web网页以展示最新推送(info.masonliu.com,已完成) +- 更换筛选模块,由时段筛选改为历史记录筛选以确保不会有资讯漏报(筛选条件增加了时间筛选和是否已发送筛选) +- 添加GitHub等监测源(重构参考项目逻辑并上线) +- 添加百度监测源 -### 下一步计划(已作废)
-- 添加Mysql作为数据库存储(现有sqlite已满足使用)
+### 下一步计划(已作废) +- 添加Mysql作为数据库存储(现有sqlite已满足使用) ### 更新日志 #### 从2024年12月15日开始记录 -- 2024年12月15日早:优化了文件结构,修复了日志记录时的小BUG,添加web展示日志功能
-- 2024年12月15日晚:修复了单次运行结束时的校验错误问题
-- 2024年12月18日早:添加了短文本推送机制,一定程度上解决了长字节推送问题(解决办法正在思考中)
-- 2024年12月24日晚:上传了测试0.1版本,修复了报错问题
-- 2024年12月25日早:优化了代码逻辑和表现
-- 2024年12月25日晚:优化了推送报文格式
-- 2024年12月30日:添加并完善了基于搜狗搜索的微信公众号文章监测
-- 2024年12月30日晚:为洞见微信资讯推送添加了关键词筛选
-- 2025年01月02日:更新并上线了Github项目监测功能,readme后续更新中
-- 2025年01月02日晚:再次优化了文件结构,提高可读性
-- 2025年01月05日晚:修复了doonsec相关配置的bug,程序现已可正常运行
-- 2025年01月06日:更新了配置信息自动获取的逻辑,添加关键词等现可在运行时添加,重要配置信息(config.yaml)仍需暂停重新运行
-- 2025年01月10日上午:修复了github推送的问题(时区,消息配置错误等)
-- 2025年01月10日下午:上线了百度搜索内容监测
\ No newline at end of file +- 2024年12月15日早:优化了文件结构,修复了日志记录时的小BUG,添加web展示日志功能 +- 2024年12月15日晚:修复了单次运行结束时的校验错误问题 +- 2024年12月18日早:添加了短文本推送机制,一定程度上解决了长字节推送问题(解决办法正在思考中) +- 2024年12月24日晚:上传了测试0.1版本,修复了报错问题 +- 2024年12月25日早:优化了代码逻辑和表现 +- 2024年12月25日晚:优化了推送报文格式 +- 2024年12月30日:添加并完善了基于搜狗搜索的微信公众号文章监测 +- 2024年12月30日晚:为洞见微信资讯推送添加了关键词筛选 +- 2025年01月02日:更新并上线了Github项目监测功能,readme后续更新中 +- 2025年01月02日晚:再次优化了文件结构,提高可读性 +- 2025年01月05日晚:修复了doonsec相关配置的bug,程序现已可正常运行 +- 2025年01月06日:更新了配置信息自动获取的逻辑,添加关键词等现可在运行时添加,重要配置信息(config.yaml)仍需暂停重新运行 +- 2025年01月10日上午:修复了github推送的问题(时区,消息配置错误等) +- 2025年01月10日下午:上线了百度搜索内容监测 \ No newline at end of file diff --git a/resources/db/baidu.db b/resources/db/baidu.db deleted file mode 100644 index 417468597485d862abc5f60686bd6bc4c5262b1b..0000000000000000000000000000000000000000 GIT binary patch literal 0 HcmV?d00001 literal 24576 zcmeHPTWniLdZyyov8^QDcCpAq5#a2DQW;B;Jd{X^G7MLCv{_>lCypKL28%+VDOzG8 zk+MYjl0{KcSL!a=y4j+vizQ2mt(z^$6sgP00)1#7`_#we%$&og1zL1piUR%S%prA1 zN%n4cTXfSy*c8v4x&HJ2|NQgM_s^BfANoT+;d-#4&Jz-fO+PT@<(d9Q5KJc15&S=f z|LIR2e!QN3z+d+Ks?QOVJHCvMK>>pT1_cZX7!)ulU{JuIfI$I+ z0tN*P3K$ePm;#@?cI=&>{3P%5kmp*hukl7L_N$eRz8g)xfH(K?$c0ZU%CA-kSIf_T zSRv%(Eev?-d}fq9-F!Unjd$LCH?PI3*6C>o`Msz*{r9!3TGFXP;YmUJ_^X7Am#$WP zQ1Pko$)^`TD*yCz;pY{f3+10({rKV~6#l5<(p7UNcgP>A^$AxieyK~V^#{JpNviTS zdK>)pA%8HC^QOM(+WQ`C(%;9>u3r48Vy|jXQ>Z4`kdysO-2iq95}VuQc8SHMqWIpe>kVfc>-|-}hWFrFIa}}5HzUXoT4{J* zSz92h52ZvOZ|ApLJ!Gkc#1=%i+etRpoHQ1dlG}9g5!vde(E<5Mx4sf&r?F0HYn04B zP@1Qucnm4Z?tRj>A;lL-PaExiioqZcX?sfg<49E2Tj}#*DUm??JP}2t_%}$wIHmXl zDLF^_yU6Saa`FuFB8sn)fgU;8N|FiI=-9Fp50j-0)@X8@L^oJ%!|f=}iTGW(8RL*P zCmA){7SM;(;}P1qsVwba2rTntABi{Xi?C|L$yCb%Sy`2~dqEPix{47YvmC=5JfQ1+ zq<54JaCwe*jK;!bb{-k{*ijJ8(VgdX?U@o8N;N;ubVg4!X*(vx6TJT<*eia?DSv zV^De6D~}J#OVgk(Sq*DMRa5XtyPl+C&*bqqX?w2qhK}vXvk5`pV}XoMk;O5_muyT@ zJgGc}d`y6o`1qtmH(7dUMu+LMX^fA*qn%;0GfFl$P&0kHLk6PC(li^oMYKChZFW$A zw6!o^QTf$OqV05OnZ^?IVJj>0Y+AJ2kjad$gFsqRu`9d08R?)R*$R`61RdQ-jjmyS zFl7wpIRs-(yU zzOo<2SCMy*oiN?`_(HC(l6I$2CF#ZYb7lF3vOCV$vJC?Kh)&Ka%QN5|2wrM>J_iIxn(#1qQ+K%~SjI0U{zUBGBbeEt>zx3(!DVFv+Ye9v(;QadqZkzhUUQjBs zAMWCU^Ui{b(t>iap!5R!f%MYyf(l20`=r?fY<>t63&loMa2%#{(oL}3X`-5=n~2HAN*UOde3B$@qMj%`6+(hPa))-6lO?+M)T1iUp|MzGG; zBf)Afc9ghmqRU~Im%>uAyDXcdUfz~jEZ%I+EU=g(DcJ}0 zs;teEctlShbrDN~{(Rn{-%{ZR%5FzyJYX$4yh3}Im|lH2kfrcm-c!=wEXDh1_c-ku z#>7MAg9F^qkY}JMVH)rjnSsy2{jagMrY2^X@z6gg z_pR_^C?H^}G2w!;HX|kG<;1SMHY4yqC9c#AMzkU&Uy$&YC?$5WL2#c~#IWVL1=in|HZ%Xj^u;ZH37rU&5Dg9vmqTxoZ_4cjmYOA*z zUtis}`mu?*ZK(;>)#}G3Kxcu+K#A0NyZk&UCt<&hk)9FK+X1!9*|<Q{}WID0G@E;AdJ+vTYUS%PuDpe!?) z<9e4@sfiq4_??H&^M$;VrnBeTK7ZLXA3DLXIbr6*JXU&I_yPgT2!xkkHY*}}*te_v4tE1Jb&T0N>+eenVbPby0*u)m2?G()2= z4y)e2*E1+cGPJ~)5B-K=f}T(68|IrIwt&x$P}M-@1Y^8DGr?^0-r+)K@S>b>dT&S> z#cA8Oc48lY^c22cKhDnP^G^M%3IB|bK>>pT1_cZX7!)ulU{JuIfI$I+0tN*P3K$eH zDDb_Zz?*qT-pxyc8h*(3|HpCM|907%pPu}O{7>G}U28*zRe?IY#Z~V*A ze>(D?cr-qLMigjuo_f<1`BB8(<_8uhOXa53y|(%RSx2X~Dmmz^QdwUiUAts_2jCZ= z?Sa^1tHLtC)+!PXaB~iS^LZLWb-{q|j*1y>3iz+zu{Kym3rE(SyWSA2JL|3WG&cIZ z@A+;50_P1@`Of~rcdb$_Ux}0k;3<9L%iwSvo(J>_?;P(NkZDq4h)zF}$HxF{#$zfx zAU_?F60>yd9t%#;f#}lcH9+EYF&$|Npk|Jd0e!y!v_UBmAoLuzb;F0Ipz1+v+OM}~!8eMl#E$;2ot&Y^cb9e`J| zw<@GZnQsP=mc3Q+d$jK^fKGS>Gz(Zry0S(#pR>2k(_~;?O56ov5W@#j^PsT;k_50) z2F_M|D1__7w@;eNKWn?33*jmf=s-;F9!0@@Xzj*eb&y9M+;jn9?X)`?7*F2~q42W5 zwn;b-Z29R7npGZJ<>4sYC}%^{MWkdBdGHB;1cI2yU}yj_HQ+=ak-|W=-A@r!!oynF z1Wj!*7D|Vv=z~nm;1!j)Vc-FI0R#jfeq|4vtBbs0aR&fu=b&^msu)N}1TK)iNz9U# z$fH^YqJW!oteF|8Gt|fc%^~veF@{z)Ap| z5#)iM%JVBZFlUW$$w$icLRqSLRZ0xXPo_A!nGG;DS;nYXWMlsrD3gh^8tYWHKkkRW zMh?Wkl%-l0>BcyHzChZ0xJZ==3_};|m0K185H2gR*_^f_x6@Ht%0-t?QCWtTsp$lL z_FS1B6C&$g?}(W|60|q}d&WDd8LKk;#NS9R@O<$5;VIuhp}Uqt0mT#F2e= z7LfE3NOa)MeABNZXIoi7(t(QtMg}0UoV7)E_(sc zqbz!ksg{xZv=wmb2?b=f(m;vM~Rm4N4I4Y*D+5HJqBbOP-DM zQd~}1HX8j#>A*6lYD_iSt5{^Yvthf+4p6h5E<2OGXgk&&1l*wKh0yM&nb4AFqhxT5 zyqFV9Z8mB9KB6I2?XHFjAoy&(6>$nq(Pb%iaPDCd8oU$IW;cnl=o-;Y!o6o$Y|r#2 z0J*?1qauKFK~9TfUopV`QO0iDE5otRyiBp9*rLTg?6s6GqDsDqMZjKUKOC9;S0`Z) z9*vx6Y0MRUho!_;2q`OZ7Gy_6yj=bdlKKXpr&bkh$Ul#eX{_NQZVh-XjZDh*I)yEI z%?q!#0QD9fHv-wh%_1dKWH>Xk1`y(?Cg}}2v)+C)L!2^p64qg6Ekf(k$g&x>1YW|{ z0`6UnbU=)Q-Xa5!AYkTj+lm#QThO8=5rCuC$|7de5G@uc`l^7r{1ccRD~mrCbK;K? zK?vpYUAPP1bZsWU(=@)0X?e@;oMtlS7mC!^4%G z4$*;7Wk(74-CZIgDANd6{+@*^UkVB#f1R%}5tXw*PeZf^!taY>KpqX zZp%^?^xjq-UTmY|I?Q-!{rkVHp^QbcO)VM*_t9t6YwtPWYE>m z^2m==M}NyS{C=c;JSTHHd=@TO+o8ektylg6xBh%k*M4rF;z;`y;YGu46B9uu!t&6% zvOK}>XQ|Z76VFt{d_i5qcqoJe3I_w3XH9Xa*HGaS7oFqwPR*?1*ed(5|q7 zzl>e{RETRN;KLDZxH##X{h3b-0(TH;`Ea?=!MXTlEm|(uA-Ujf#`P?GR4?fn=^2$0 zPX#)$hzms+kO)38fnAo6Xcv_3el@XI%|bSJ)u+D4sF!mUcM%+}*J^%{Z@LlrQO7&E zT&106S+4x-H1{}iZ(-3V7b<^tC38llxd5(iry2$_l diff --git a/resources/history/baidu_news.md b/resources/history/baidu_news.md index 190362e..e69de29 100644 --- a/resources/history/baidu_news.md +++ b/resources/history/baidu_news.md @@ -1,70 +0,0 @@ -#### 文章:[齐鲁银行信用卡申请进度入口查询 - 首页](https://ebank.qlbchina.com/pbank/) -描述:正在加载请稍候…… -**上传时间**:2025-01-08 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行5.40(-1.46%)_股票行情_新浪财经_新浪网](http://finance.sina.com.cn/realstock/company/sh601665/nc.shtml) -描述:新浪财经为您提供 齐鲁银行 (601665)股票实时行情走势,实时资金流向,实时新闻资讯,研究报告,股吧互动,交易信息,个股点评,公告,财务指标分析等与齐鲁银行(601665)股票相关的信息与服务. -**上传时间**:2025-01-08 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行山东省网点地址电话查询_齐鲁银行网点-金投网(手机金投网...](http://bank.cngold.org/yhwd/list_city_51_16.html) -描述:齐鲁银行 客服热线:40060-96588 简要名称:齐鲁银行 法定名称:齐鲁银行 银行性质: 城市商业银行 公司总部:济南市顺河街176号山东省-齐鲁银行网点查询 济南(共有105个齐鲁银行网点) 青岛(共有2个齐鲁银行网点) 聊城(共有7个齐鲁银行网点) 热门城市-齐鲁银行网点查询 北京 杭州 天津 重庆 苏州 南京 广州 厦门... -**上传时间**:2025-01-07 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行在您身旁总行](https://www.qlbchina.com/qlbchina/jrql/xwgg/cggg/zx/index.html) -描述:齐鲁银行 银企大集系统优化升级项目(二次)竞争性磋商公告 [2025-01-06] 齐鲁银行信用卡多渠道进件及信用卡审批系统人力外包项目(二次)竞争性磋商公告 [2025-01-06] 齐鲁银行村镇智能柜台系统改造项目竞争性磋商公告 [2025-01-03] 齐鲁银行商用密码安全评估服务项目 ... -**上传时间**:2025-01-06 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行(601665)_股票价格_行情_走势图—东方财富网](http://quote.eastmoney.com/unify/r/1.601665?from=classic&eventcode=Web_quote_entrance1) -描述:提供 齐鲁银行 (601665)股票的行情走势、五档盘口、逐笔交易等实时行情数据,及齐鲁银行(601665)的新闻资讯、公司公告、研究报告、行业研报、F10资料、行业资讯、资金流分析、阶段涨幅、所属板块、财务指标、机构观点、行业排名、估值水平、股吧互动等与齐鲁银行(601665)有关 -**上传时间**:2025-01-03 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行(601665)_股票行情,行情首页_中财网](https://gg.cfi.cn/quote.aspx?stockid=92680&contenttype=outline&client=pc) -描述:中财网提供 齐鲁银行 (601665)实时行情动态分析,全面报道齐鲁银行(601665)基本资料及重大新闻、行业资讯,浏览齐鲁银行(601665)财务数据、行情数据,公司公告,重大事件。 -**上传时间**:2024-12-31 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行(601665)股本结构_新浪财经_新浪网](http://vip.stock.finance.sina.com.cn/corp/go.php/vCI_StockStructure/stockid/601665.phtml) -描述:齐鲁银行 5.59 -0.06-1.06% 2024-12-31 15:00:01 昨收盘:5.65今开盘:5.65最高价:5.70最低价:5.59 市值:270.28亿元 流通:270.28成交:347797手 换手:0.72% 公司资料意见反馈 公司资料: 公司简介 股本结构 主要股东 流通股股东 基金持股 公司高管 公司章程 ... -**上传时间**:2024-12-31 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行在您身旁齐鲁银行信用卡多渠道进件及信用卡审批系统人力...](https://www.qlbchina.com/qlbchina/2025-01/06/article_2025010613411012428.html) -描述:齐鲁银行 信用卡多渠道进件及信用卡审批系统人力外包项目(二次)竞争性磋商公告 齐鲁银行信用卡多渠道进件及信用卡审批系统人力外包项目(二次)竞争性磋商公告.docx -**上传时间**:2024-12-27 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行股份有限公司德州分行 - 天眼查](https://www.tianyancha.com/company/2354701752) -描述:简介: 齐鲁银行 股份有限公司德州分行,成立于2014年,位于山东省德州市,是一家以从事货币金融服务为主的企业。通过天眼查大数据分析,齐鲁银行股份有限公司德州分行参与招投标项目9次;此外企业还拥有行政许可8个。风险方面共发现企业有 展开 财产线索 线索47预估价值1亿元 ... -**上传时间**:2024-12-09 -**来源**:百度快照 -**关键词**:齐鲁银行 - ----------------------------------------- -#### 文章:[齐鲁银行(601665.SH)公司高管-PC_HSF10资料](http://f10.eastmoney.com/f10_v2/CompanyManagement.aspx?code=sh601665) -描述:信贷处办事员、办公室科长,中国农业银行泰安市分行党委委员、副行长,中国农业银行山东省分行办公室副主任、主任,中国农业银行山东省分行党委委员、行长助理,中国农业银行山东省分行党委委员、行长助理兼东营市分行党委书记、行长,中国农业银行山东省分行党委委员、副行长,中国农业银行天津市分行党委书记、行长, 齐鲁银行 党委... -**上传时间**:2024-12-06 -**来源**:百度快照 -**关键词**:齐鲁银行 - -----------------------------------------