等OC的小菜鸟

项目记录

Algorithm(20) C++(3) Crawler(6) ELK(7) Git(1) JavaScript(1) JAVA高级(8) Linux(6) Little Tips(8) SQL(4) Vue(1)

/ 注册

全部文章 / 项目记录（共3篇）

爬取模块(WebMagic)

爬取模块(WebMagic) 一、概述该项目的职位数据主要来自爬虫自动爬取，现已对拉勾网、51job等网站的职位、公司信息进行成功爬取。本爬虫模块采用的是WebMagic框架，使用HttpClient生成post请求，然后将爬取的信息筛选存储至MySQL数据库。其中souzhi-crawler...

MySQL WebMagic

2020-04-19

0 521

搜职平台搭建历程

搜职平台搭建历程一、项目介绍该系统是在校大创参赛的项目，为满足当前日益增长的毕业生工作需求，切实的帮助他们找到自己心仪的工作，缓解大学生就业难的现状。对各大招聘网站(如:拉勾网、前程无忧等)的职位信息进行爬取，综合各家招聘网站的信息实现一个针对职位的垂直搜索引擎。主要有产品模块，用户模块，爬...

2020-04-16

0 476

SOA分布式架构搭建(dubbo)

SOA分布式架构搭建(dubbo) 一、分布式架构的演进 1.单一应用架构优点：适用于小型网站，小型管理系统，将所有功能都部署到一个功能里，简单易用。缺点： 1.性能扩展比较难 2.协同开发问题 3.不利于升级维护 2.垂直应用架构 javascript:void(0); 优点：通过...

SOA dubbo 分布式

2020-03-23

0 715