在爬取某些网站的数据时，经常会发现爬下来的数据夹杂着乱码；但是网页上明明是正常的，这就是此网站做了字体反扒技术；比如 https://su.58.com/qztech/ 这个网站，页面上看起来是正常的数据，但是审查元素会发现，都是乱码，如果我们去除了右下角红框标注的字体文件，会发现页面也会出现乱码其实，这种字体文件，实质上就是一个字典，记载了乱码余正确数据之间的对应关系，在显示的时候，把“乱码” 替换成正确的数据其实我们要做的很简单，就是把字体文件复制下来，保存为
最近考虑换个环境，打算去租个房子，但是租房信息那么多，我们能不能把它爬取下来做个统计，看看什么价位的房子最多，哪个地段的房子最便宜呢在爬取之前，请大家安装下BeautifulSoup库和requests库还有pymysql库安装方法有两种:1、cmd中pip install + 库名安装2、pycharm中File-setting-project-InterPreter,按照下图所示安装就可以了安装BeautifulSoup如果你是python3,请选择安装BeautifulSoup4解释下这几
爬虫入门知识及环境的搭建今天我们来学习下爬虫一、 什么是爬虫如果我们把互联网比作一张大的蜘蛛网，数据便是存放于蜘蛛网的各个节点，而爬虫就是一只小蜘蛛，沿着网络抓取自己的猎物（数据）爬虫指的是：向网站发起请求，获取资源后分析并提取有用数据的程序；从技术层面来说就是 通过程序模拟浏