夜月薇凉映银弩
夜月薇凉映银弩
全部文章
毕设开发日志
Android开发(14)
Echart(1)
javaweb学习(18)
java后端学习(18)
MySQL数据库(1)
python学习(27)
Unity学习(1)
XXX重大需求征集系统开发(14)
个人总结(4)
大二团队开发任务计划(26)
家庭记账本(12)
数据结构与算法(11)
未归档(85)
读书笔记(21)
题解(1)
归档
标签
去牛客网
登录
/
注册
夜月薇凉映银弩的博客
全部文章
/ 毕设开发日志
(共4篇)
2021.11.3
今天开始正式爬取中图分类号,遇到的问题,该网站无法承受我的并发访问,因而导致一些数据无法获取,只能一次又一次的重复爬取。该网站的地址为: https://www.clcindex.com/category/
2021-11-08
0
288
2021.11.2
今天对中图分类号的网站进行了解析,按照层级进行遍历,为解决普通类无法调用AutoWired,采用test注解来解决。 @Test public void testCode() throws Exception{ String url = "https://www....
2021-11-02
0
245
2021.11.1
今天学习了多线程的爬虫使用,准备开始爬取中图分类号,遇到的问题,在java的普通类中AutoWired无法获取到对象。
2021-11-01
0
286
2021年10月第四周进度计划
本周整体目标:构建整体数据治理部分的框架,参考GooSeeker的形式。 1、对查新报告的数据进行爬取 2、以任务的形式来对文件进行处理,包括进行批处理和单个处理,这里预计要注意多线程的使用,后续可能需要进行优化,对于任务的处理结果整体使用列表形式展示,点击列表可以下钻到具体单个文件的具体结果,可以...
2021-10-25
0
238