一、前言
最近因为有爬一些招聘网站的招聘信息的需要，而我之前也只是知道有“网络爬虫”这个神奇的名词，具体是什么、用什么实现、什么原理、如何实现比较好都不清楚，因此最近大致研究了一下，当然，研究的并不是很深入，毕竟一个高大上的知识即使站在巨人的肩膀上，也不能两三天就融会贯通。在这里先做一个技术储备吧，具体的疑难知识点、细节等以后一点一点的完善，如果现在不趁热打铁，以后再想起来恐怕就没印象了，那么以我的懒惰的性格估计就要抛弃对它的爱情了。废话不多说，让我们开始在知识的海洋里遨游吧。哎，等等，说到这我突然想到昨天新记的一首诗感觉挺好，给大家分享一下，缓解一下气氛，再给大家讲爬虫吧：
君生我未生，我生君已老 君恨我生迟，我恨君生早
君生我未生，我生君已老 恨不生同时，日日与君好
我生君未生，君生我已老 我离君天涯，君隔我海角
我生君未生，君生我已老 化蝶去寻花，夜夜栖芳草
二、什么是网络爬虫
是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。
三、优点
简单易理解，管理方便。
四、WebMagic总体架构
延伸阅读
- ssh框架 2016-09-30
- 阿里移动安全 [无线安全]玩转无线电——不安全的蓝牙锁 2017-07-26
- 消息队列NetMQ 原理分析4-Socket、Session、Option和Pipe 2024-03-26
- Selective Search for Object Recognition 论文笔记【图片目标分割】 2017-07-26
- 词向量-LRWE模型-更好地识别反义词同义词 2017-07-26
- 从栈不平衡问题 理解 calling convention 2017-07-26
- php imagemagick 处理 图片剪切、压缩、合并、插入文本、背景色透明 2017-07-26
- Swift实现JSON转Model - HandyJSON使用讲解 2017-07-26
- 阿里移动安全 Android端恶意锁屏勒索应用分析 2017-07-26
- 集合结合数据结构来看看(二) 2017-07-26
学习是年轻人改变自己的最好方式