【Python 爬虫】Boss直聘信息提取

2021/12/31 12:07:23

本文主要是介绍【Python 爬虫】Boss直聘信息提取,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

@

目录
  • 步骤
    • 方法1:
    • 方法2:
    • 爬取结果
    • 代码
    • 更新...

步骤

方法1:

使用resquest 获取不到网页的源码:

后来有的网友说要登录才能爬取,就想试一下登录:
在这里插入图片描述看来没法登录也解决不了!!!

方法2:

尝试使用无头浏览器进行爬取,还好能够爬取到信息!
接下来定位需要的信息就可以!!!

最后,由于直接进行测试,导致IP被反爬识别访问异常了!!!kule
IP 尝试多次被封!!!
在这里插入图片描述手动验证
在这里插入图片描述

  • 下次使用代理IP

爬取结果

在这里插入图片描述

代码

考试之后再贴上......初步代码,持续更新.......
数据爬取

更新...

  1. 添加gui界面
    python GUI 第一次写,先打一个最简单的设计。。。。
    在这里插入图片描述初步

  2. 输入城市名,输入职位名称,文件命名,点击保存格式。。。。
    在这里插入图片描述
    初步封装成类:

  • 总结:

self.button.clicked.connect(self.paqu) 绑定按钮
citys = self.CityEdit.toPlainText() 获取输入框的文本,这个函数没有text()函数
self.button = QPushButton('确定',self) self 是将按钮添加到当前窗口上这是一个继承父类的窗口
self.FileNEdit.move(280, 160) 布局,相对于父窗口的起点位置
self.FileNEdit.resize(130, 30) 自身窗口的大小



这篇关于【Python 爬虫】Boss直聘信息提取的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!


扫一扫关注最新编程教程