Skip to content
项目
群组
代码片段
帮助
当前项目
正在载入...
登录 / 注册
切换导航面板
M
meta_crawler
概览
概览
详情
活动
周期分析
版本库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
统计图
问题
0
议题
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
CI / CD
CI / CD
流水线
作业
日程表
图表
维基
Wiki
代码片段
代码片段
成员
成员
折叠边栏
关闭边栏
活动
图像
聊天
创建新问题
作业
提交
问题看板
Open sidebar
刘伟刚
meta_crawler
Commits
d7660618
提交
d7660618
authored
9月 19, 2022
作者:
song51930
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
采用webMagic框架实现爬虫
上级
e318dfae
隐藏空白字符变更
内嵌
并排
正在显示
1 个修改的文件
包含
0 行增加
和
6 行删除
+0
-6
LinksReadThread.java
...arch/src/main/java/com/zzsn/webMagic/LinksReadThread.java
+0
-6
没有找到文件。
baidu_search/src/main/java/com/zzsn/webMagic/LinksReadThread.java
浏览文件 @
d7660618
package
com
.
zzsn
.
webMagic
;
import
com.zzsn.search.entity.KeywordMsg
;
import
com.zzsn.search.util.SplitKeyword
;
import
com.zzsn.utility.index.Constants
;
import
com.zzsn.utils.GrabUtil
;
import
com.zzsn.utils.MyProxy
;
import
com.zzsn.webMagic.downloader.SeleniumDownloader
;
import
org.slf4j.Logger
;
import
org.slf4j.LoggerFactory
;
import
us.codecraft.webmagic.Request
;
import
us.codecraft.webmagic.Spider
;
import
us.codecraft.webmagic.downloader.HttpClientDownloader
;
import
us.codecraft.webmagic.monitor.SpiderMonitor
;
import
us.codecraft.webmagic.proxy.Proxy
;
import
us.codecraft.webmagic.proxy.SimpleProxyProvider
;
import
javax.management.JMException
;
import
java.net.URLEncoder
;
import
java.util.ArrayList
;
import
java.util.List
;
...
...
编写
预览
Markdown
格式
0%
重试
或
添加新文件
添加附件
取消
您添加了
0
人
到此讨论。请谨慎行事。
请先完成此评论的编辑!
取消
请
注册
或者
登录
后发表评论