提交 afe226ba 作者: 丁双波

没有token,增加日志打印

上级 4a3bd851
...@@ -7,10 +7,11 @@ import pymysql ...@@ -7,10 +7,11 @@ import pymysql
import requests import requests
import urllib3 import urllib3
from pymysql.converters import escape_string from pymysql.converters import escape_string
import sys
from base.BaseCore import BaseCore sys.path.append('D:\\zzsn_spider\\base')
import BaseCore
urllib3.disable_warnings(urllib3.exceptions.InsecureRequestWarning) urllib3.disable_warnings(urllib3.exceptions.InsecureRequestWarning)
baseCore = BaseCore() baseCore =BaseCore.BaseCore()
log = baseCore.getLogger() log = baseCore.getLogger()
headers = { headers = {
...@@ -146,6 +147,7 @@ def getToken(): ...@@ -146,6 +147,7 @@ def getToken():
pass pass
else: else:
#没有查到token #没有查到token
log.info("没有拿到token")
return False return False
return row[0] return row[0]
...@@ -161,8 +163,11 @@ def getPageData(dic_url,page): ...@@ -161,8 +163,11 @@ def getPageData(dic_url,page):
if tokenAndCookie: if tokenAndCookie:
pass pass
else: else:
log.info("没有拿到token,开始递归")
while True: while True:
log.info("没有拿到token,开始休眠")
time.sleep(60) time.sleep(60)
log.info("没有拿到token,结束休眠")
tokenAndCookie = getToken() tokenAndCookie = getToken()
if tokenAndCookie: if tokenAndCookie:
break break
...@@ -262,8 +267,7 @@ if __name__=="__main__": ...@@ -262,8 +267,7 @@ if __name__=="__main__":
log.info("redis已经没有数据了,重新放置数据") log.info("redis已经没有数据了,重新放置数据")
getFromSql() getFromSql()
time.sleep(60) time.sleep(60)
continue infoSourceCode = baseCore.redicPullData('WeiXinGZH:infoSourceCode')
# infoSourceCode = baseCore.redicPullData('WeiXinGZH:infoSourceCode')
getWxList(infoSourceCode) getWxList(infoSourceCode)
# infoSourceCode = 'IN-20220917-0159' # infoSourceCode = 'IN-20220917-0159'
......
Markdown 格式
0%
您添加了 0 到此讨论。请谨慎行事。
请先完成此评论的编辑!
注册 或者 后发表评论