首先url管理器添加了新的url到待爬取集合中，判断了待添加的url是否在容器中、是否有待爬取的url，并且获取待爬取的url，将url从待爬取的url集合移动到已爬取的url集合
页面下载，下载器将接收到的url传给互联网，互联网返回html文件给下载器，下载器将其保存到本地，一般的会对下载器做分布式部署，一个是提交效率，再一个是起到请求代理作用
2、内容提取
页面解析器主要完成的是从获取的html网页字符串中取得有价值的感兴趣的数据和新的url列表。数据抽取比较常用的手段有基于css选择器、正则表达式、xpath的规则提取。一般提取完后还会对数据进行一定的清洗或自定义处理，从而将请求到的非结构数据转化为大家需要的结构化数据。
3、数据保存
数据保存到相关的数据库、队列、文件等方便做数据计算和与应用对接。
爬虫采集成为很多公司企业个人的需求，但正因为如此，反爬虫的技术也层出不穷，像时间限制、IP限制、验证码限制等等，都可能会导致爬虫无法进行，所以也出现了很多像代理IP、时间限制调整这样的方法去解决反爬虫限制，当然具体的操作方法需要你针对性的去研究。兔子动态IP软件可以实现一键IP自动切换，千万IP库存，自动去重，支持电脑、手机多端使用。
CSS浮动，前端css统筹，eclipse 点击css查看，html css弹出登录窗口，css 图片五角，css中移动端图片居中，css js单独部署
有哪些让你眼前一亮的网站？
分享4个让你大开眼界的网站！全是私藏精品网站！超小众，但绝对是真香定理级别！让你看一个爱一个！世界是你的！绝对让你眼前一亮~
1.world68全世界好用的网站有哪些？这个网站轻松帮你获取！网站有点简陋，却收集了全世界最厉害的网站，涵盖各个方面，绝对的神器！网站按照不同得导航分类，让你轻松可以找到想看得国家网站!日本的一个知名的插画网站，是不是还不错在这里面全球的知名网站都帮你找好了！如果你是一名设计师，想要找一些插画得素材，可以去日本版块里找找有没有好用得插画网站：打开国家中的日本网站，可以轻松的找到设计素材选项，这里超多的插画素材等你来取：总之，绝对是一个可以让你开眼看世界的网站哦！收藏起来，每天看看收集点小灵感！欢迎关注偶的微信公众号【旁门左道PPT】，获取更多优质内容哦！另外回复关键字【头条神器】，分享给你偶一直在使用的14个超小众的效率神器！搞定你工作遇到的难题！2.fosshub这是一个超级好用的网站！很多知名科技，工具博主的神器都是在这里发掘的!最关键的一点，这里面的所有神器都是开源的！没错，就是你理解的免费！很精致的一个网页设计，包含无数的神器！工具分类超级全面：部分分类截图（偶翻译成了中文，页面有点不好看）随便点进去一个，都是宝藏！国内很多好用的收费软件吗，都可以在这里找到免费替换的软件哦！超级好用！偶的大部分神器都是在这里发现的！3.woshipm作为一名公众号博主，运营是必备功力，市面上的运营软件有很多，收藏了很多，每次打开都费半天力气，但这些网站又是必须要看的！如果解决这个问题呢，直到偶找到了这个网站：名字页特别有趣，阿猫阿狗导航，主要是做运营和产品的导航，所有与之有关系的网站都被搜录了，并且做了分类！NICE！个人比较喜欢数据分析板块，几乎偶日常需要用到的网站，全部都有了！打开这个网站运营不慌张！从选题到配图到素材再到分析全部具备!小众，但挺好用的！4.photopea免安装的网页版“ps完美替代者”——Photopea，走红国外！网页的界面与PS的相似度十分高，这为它强大的功能做了铺垫。利用这个在线网站，你几乎可以实现PS中的全部操作，PS中使用的快捷键，这个里面依然可以使用！比如一堆人：咱们只需要简单利用智能填充功能，就能轻松的只保留主人物：很方便哦！总之这个网页，让你告别PS卡顿，再也找不到利用不工作，另外手机版也能直接使用哦！
好了，今天先跟各位推荐了4个很实用，让你大开眼界的网站，偶还知道很多优秀的网站哦，以后不断为各位更新哈~希望偶的答案能在一定程度上帮助你！
另外，如果你觉得偶写的还不错，可以点赞鼓励下吗~感谢~
如何定义input标签中type？
第一种：
.style1{color:red;}
.style2{color:green;}
<input type=”text” class=”style1″ />
<input type=”password” class=”style2″ />
第二种：
<input type=”text” />
<input type=”password” />
第三种：css3选择器，ie低版本不支持
input[type=text]{color:red;}
input[type=password]{color:green;}
<input type=”text” />
<input type=”password” />
当然还可以根据js去做
css模块化多个class如何引用？
方法1：用css的属性选择器。 div[class^="aa"] { background-color:#d6d6d6; height: 50px; }1 2 3 方法2：用空格分隔多个class .aa { background-color:#d6d6d6; height: 50px; }1 2 3