标签：爬虫

Python爬虫之猫眼电影数据抓取

Vedu 发布于 2021-01-25

静态网页实战为大家展现一个完整爬虫的大致过程，此次项目内容为提取猫眼电影TOP100榜中的所有电影信息并存储至CSV文件中，其首页地址为http://maoyan.com/board/4。我们可以编写一个获取每页数据函数，接收参数就是页码数： import requests h...

Vedu 发布于 2020-10-27

在写爬虫的时候，为了效率我们通常会选择解析网页api来获取数据，但是有时候解析方式比较困难，或者我们纯粹是为了快速实现爬虫，会使用浏览器自动化操作，说起这一点，肯定第一个想到的就是selenium，但很多时候其实selenium使用起来是不太方便的，例如环境配置，要安装浏览器、下...

Vedu 发布于 2020-08-08

搜索引擎的蜘蛛是按照每个蜘蛛的抓取规则，进行自动的抓取你网站的内容。那么，你知道多少个“搜索引擎”蜘蛛程序呢？跟着郑州建站网一起来了解下：搜索引擎蜘蛛名大全、蜘蛛的作用是什么？作为SEO优化人员如何提升优化能力，如何掌握搜索引擎爬虫知识，又该如何利用搜索引擎提升网站排名，这些你...

lekia 发布于 2016-09-23

以前研究模拟登录的时候用superagent搞过一点，权当教务处的API，这次准备用Selenium做全套，主要还是实验室一直在吹Selenium怎么怎么好用，解决了多少多少难题，实际上！并没有！这篇文章默默的来分析一下一些遇到的问题以及为什么我得出了以上的结论。首先我们来考...

Vedu 发布于 2016-07-23

Sip是一款设计师和前端应该会需要的屏幕取色软件，你只需要鼠标点一下即可取得屏幕当前位置的颜色值，并将数据自动存到剪切板，方便随时粘贴出来。支持 CSS、UIColor 等多种格式。 [Sip 在官网上售价9.99美元，约合人民币60元] Sip for Mac 4.2.6 介...