Skip to content
项目
群组
代码片段
帮助
当前项目
正在载入...
登录 / 注册
切换导航面板
Z
zzsn_spider
概览
概览
详情
活动
周期分析
版本库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
统计图
问题
0
议题
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
CI / CD
CI / CD
流水线
作业
日程表
图表
维基
Wiki
代码片段
代码片段
成员
成员
折叠边栏
关闭边栏
活动
图像
聊天
创建新问题
作业
提交
问题看板
Open sidebar
王景浩
zzsn_spider
Commits
a53c240e
提交
a53c240e
authored
11月 02, 2023
作者:
薛凌堃
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
企业负面信息
上级
9a1b6239
隐藏空白字符变更
内嵌
并排
正在显示
2 个修改的文件
包含
16 行增加
和
2 行删除
+16
-2
ccpg.py
comData/negative_news/ccpg.py
+1
-1
creditchina.py
comData/negative_news/creditchina.py
+15
-1
没有找到文件。
comData/negative_news/ccpg.py
浏览文件 @
a53c240e
...
@@ -155,7 +155,7 @@ def getProcessitem(bdetail):
...
@@ -155,7 +155,7 @@ def getProcessitem(bdetail):
nowDate
=
getNowDate
()
nowDate
=
getNowDate
()
content
=
bdetail
[
'content'
]
content
=
bdetail
[
'content'
]
if
content
!=
''
:
if
content
!=
''
:
sid
=
'1
706193555675926
530'
sid
=
'1
534600788921110
530'
processitem
=
{
processitem
=
{
"sid"
:
sid
,
"sid"
:
sid
,
"source"
:
"18"
,
"source"
:
"18"
,
...
...
comData/negative_news/creditchina.py
浏览文件 @
a53c240e
...
@@ -12,6 +12,7 @@
...
@@ -12,6 +12,7 @@
pageSize: 10
pageSize: 10
}
}
"""
"""
import
datetime
import
json
import
json
import
time
import
time
from
urllib
import
parse
from
urllib
import
parse
...
@@ -31,6 +32,15 @@ r = redis.Redis(host="114.115.236.206", port=6379, password='clbzzsn', db=0)
...
@@ -31,6 +32,15 @@ r = redis.Redis(host="114.115.236.206", port=6379, password='clbzzsn', db=0)
import
urllib3
import
urllib3
urllib3
.
disable_warnings
(
urllib3
.
exceptions
.
InsecureRequestWarning
)
urllib3
.
disable_warnings
(
urllib3
.
exceptions
.
InsecureRequestWarning
)
taskType
=
'企业负面新闻'
taskType
=
'企业负面新闻'
#获取当前时间
def
getNowDate
():
# 获取当前时间
current_time
=
datetime
.
datetime
.
now
()
# 将时间转换为字符串
currentdate
=
current_time
.
strftime
(
"
%
Y-
%
m-
%
d
%
H:
%
M:
%
S"
)
return
currentdate
def
sendKafka
(
dic_news
):
def
sendKafka
(
dic_news
):
start_time
=
time
.
time
()
start_time
=
time
.
time
()
try
:
# 114.116.116.241
try
:
# 114.116.116.241
...
@@ -293,15 +303,19 @@ def abnormal(headers,com_name,social_code):
...
@@ -293,15 +303,19 @@ def abnormal(headers,com_name,social_code):
return
url
,
list_abhormal
return
url
,
list_abhormal
def
dic_data
(
com_name
,
listData
,
type
,
detailurl
):
def
dic_data
(
com_name
,
listData
,
type
,
detailurl
):
nowDate
=
getNowDate
()
dic_news
=
{
dic_news
=
{
'title'
:
com_name
+
type
,
'title'
:
com_name
+
type
,
'structuredData'
:
listData
[:
1
],
'structuredData'
:
listData
[:
1
],
'ynStructure'
:
1
,
'ynStructure'
:
1
,
'content'
:
''
,
'content'
:
''
,
'contentHtml'
:
''
,
'contentHtml'
:
''
,
'source'
:
'信用中国'
,
'source'
:
17
,
'origin'
:
'信用中国'
,
'publishtime'
:
''
,
'publishtime'
:
''
,
'detailurl'
:
detailurl
,
'detailurl'
:
detailurl
,
'sid'
:
'1684760229991882754'
,
'createDate'
:
nowDate
}
}
return
dic_news
return
dic_news
...
...
编写
预览
Markdown
格式
0%
重试
或
添加新文件
添加附件
取消
您添加了
0
人
到此讨论。请谨慎行事。
请先完成此评论的编辑!
取消
请
注册
或者
登录
后发表评论