目前说起爬虫，很多人都会想到 Python 语言，因为近年来关于 Python 的爬虫技术层出不穷。但爬虫不是 Python 的专利，本篇文章将会带大家用 Java 语言来爬取网页内容，并把爬取的数据导出到 Excel 文档中。

• 后端
• 猿友
• 31

我们知道爬虫的比较常见的应用都是应用在数据分析上，爬虫作为数据分析的前驱，它负责数据的收集。今天我们以python爬取二手房数据为例来进行一个python爬虫实战。（内附python爬虫源代码）

• 后端
• 诗与彼方
• 29

相信很多小伙伴都是喜爱英雄联盟的玩家，英雄联盟的皮肤制作还是比较精美的，有收集癖好的小编打算用爬虫将官网的皮肤爬取下来。接下来就看小编怎么用python爬取英雄联盟皮肤吧！（内附python爬虫源代码）

• 后端
• 猿友
• 27

许多小伙伴在学习爬虫的时候缺少一些实际项目进行练手，今天小编带来了一个python爬取房源数据的python爬虫源代码。接下来就让我们来看一看怎么爬取房源数据吧。

• 后端
• 猿友
• 25

很多小伙伴在求职的时候没有办法在短时间内看完很多的职位信息数据，可能就会因此错过一些好的岗位。今天小编带来一个python爬虫实战项目（附带数据分析）是有关于招聘岗位数据爬取的，那么接下来就让我们来看看python怎么爬取招聘岗位数据吧。

• 后端
• 猿友
• 30

很多小伙伴在刚开始学习使用爬虫爬取网页的时候都能够爬取一个页面完整内容正确的html界面下来。小编刚开始的时候也是如此，直到小编某天碰上了自家网站的数据，才知道自己还是太年轻了。为什么呢？因为小编爬到的页面一半是正常的html页面和标签，另一半夹杂着奇怪的乱码。今天我们就来讲解一下爬虫爬到乱码怎么办吧！

• 后端
• 猿友
• 28

很多小伙伴学习爬虫的一个原因就是想要爬取一些热门的电影下来，然后在自己有空的时候慢慢看，今天小编就带来了一个关于爬取某站热门电影的python爬虫实战项目（内附python爬虫源代码），接下来就让我们来看看python怎么爬取热门电影吧！

• 后端
• 猿友
• 21

随着近些年python大火，很多人有或多或少学习过一点python，而爬虫的技术又相对比较简单，这就导致了很多学有小成的爬虫开发者待着自己的爬虫在你的网站上爬取数据，对于大站而言，一些小小的爬虫并不会太多地影响他站点的运营。但小站就不一样了，轻则影响其他人的服务效果，重则爬虫掏干净了你的库，然后你的创作就不值钱了，那么作为一个站长，怎么进行python爬虫反爬呢？其实有一个比较简单的操作——使用https2.0。

• 后端
• 猿友
• 27

很多小伙伴在跟着视频学习爬虫的时候总是能完成一个爬虫，但自己独立开发就开发不了，原因是自己并没有网页分析的能力，不懂得如何从网页中获取相应的数据，更有甚者连网络分析的能力都没有，请求页面总是被服务器拒绝。实际上浏览器为我们提供的F12开发者工具是一个非常不错的网页分析和网络分析的工具。接下来我们就来讲讲如何用F12开发者工具进行网页和网络分析吧。

• 前端
• 猿友
• 26

天气与我们的生活息息相关，有很多事故就是对天气的不重视导致了重大人员伤亡。作为个人我们也要对天气有一定的关注意识而不是等着别人通知。今天我们就来介绍一个相关项目——使用python爬取天气信息并用python实现弹窗提醒。希望这个小工具可以给各位小伙伴提供一定的帮助。

• 后端
• 猿友
• 29

很多小伙伴有听故事或者听广播的习惯，但并不是什么时候都有网络，这时候把它们离线下来就可以随时听自己想听的内容了。基于此需求，今天的python爬虫实战我们就来介绍一下python批量下载音频怎么操作吧。

• 后端
• 猿友
• 32

我们在进行python爬虫开发的时候有时候会出现一些小错误，然而这个问题我们完全可以使用python的异常抛出机制来进行。另外python爬取到数据后需要对数据进行清洗，简单的讲，就是将一些标签进行过滤。今天的文章我们分为上下两个部分，上半部分我们介绍python异常捕捉，下半部分我们介绍python标签过滤，小伙伴们可以按需进行学习。

• 后端
• 猿友
• 22

对于爬虫管理平台而言，手写的简易爬虫只是小打小闹，系统化的可调参数的python爬虫管理平台才是真正的爬虫。多线程、爬取过程监控、ip代理、分布式等技术都在爬虫管理平台上实现。爬虫管理平台的种类有很多，今天我们就来介绍crawlab怎么部署吧。

• 后端
• 猿友
• 28

随着流媒体技术的发展，现在很多网站的视频已经采用m3u8格式来进行数据传输了，使用python爬取m3u8文件爬下来并不能直接观看。那么python怎么提取m3u8文件呢？接下来的这篇文章带你了解。

• 后端
• 闪城棒棒军
• 24

很多读者看到爬虫是不是第一反应就想到了某些蛛形纲的节肢动物？其实在互联网上爬虫还有另一种解释——网页机器人。今天我们就来介绍一下这些网页机器人的分类——互联网爬虫分类和一些python爬虫基础知识吧。

• 后端
• 偷得浮生
• 19

python爬虫的基础建立在对服务器的请求和对响应的解析上，所以对服务器请求响应过程的了解是每个爬虫工程师必不可少的技能。今天小编带来一篇python爬虫基础——爬虫的请求方法介绍，希望能对刚学习爬虫的小伙伴有所帮助。

• 后端
• 深巷的猫
• 23

我们学习的python爬虫，在没有涉及到多线程之前，都只能算小打小闹。一旦使用了多线程，python爬虫的效率就会像解除封印一样蹭蹭蹭的往上涨。那么怎么使用多线程来进行数据爬取呢？今天我们就来聊一聊线程池的使用。

• 后端
• 温柔尝尽了吗
• 21

我们刚开始学习爬虫的时候，往往学习的都是单线程的同步类型的爬虫。这样的爬虫在遇到阻塞的时候会将进程挂起，十分耗费时间。使用异步爬虫就可以在单个进程阻塞的时候其他进程也继续工作。那么python异步爬虫的怎么实现呢？今天小编就带来了一篇python异步爬虫的实现原理和知识总结。

• 后端
• 雨晨的清风
• 16

很多读者看到爬虫是不是第一反应就想到了某些蛛形纲的节肢动物？其实在互联网上爬虫还有另一种解释——网页机器人。今天我们就来介绍一下这些网页机器人的分类——互联网爬虫分类和一些python爬虫基础知识吧。

• 后端
• w3cschool小编
• 16

一、定义 jsoup官网[https://jsoup.org/cookbook/]，jsoup是一个用于处理HTML的Java库，它提供了一个非常方便类似于使用DOM，CSS和jQuery的方法的A.

• 前端
• AC编程
• 21