python爬虫怎么写

 时间:2024-11-02 13:00:03

1、首先我们需要确定要爬取的目标页面内容,如下图所示比如要获取温度值

python爬虫怎么写

2、然后我们需要打开浏览器的F12,查找所要获取内容的特征,比如他有哪些样式标签或者ID属性

python爬虫怎么写

3、接下来我们打开cmd命令行界面,导入requests库和html库,如下图所示,这个lxml需要大家自行下载安装

python爬虫怎么写

4、接着就是通过requests库将页面内容获取过来,然后用lxml下的html将其转化为文本,如下图所示

python爬虫怎么写

5、接下来就是通过xpath语法进行特定元素内容的查找,这里一般会用到class或者id的名称,如下图所示

python爬虫怎么写

6、最后运行程序就可以获取到需要的内容了,如下图所示

python爬虫怎么写

7、综上所述,运用python制作爬虫主要是运用requests获取内容,然后根据内容进行特定元素查找,这只是最简单的流程,不过即使在复杂的爬虫也是这几步

  • 第一次和男/女朋友约会应该注意的事情
  • 如何给女朋友/爱人一个惊喜
  • 怎样给女人吃豆豆
  • 如何让女朋友变成妻子?
  • 教你:如何“哄”女朋友!
  • 热门搜索
    猫见了老鼠为什么拔腿就跑 电脑恢复出厂设置会怎么样 逡怎么读 豆腐脑怎么做 舞蹈花儿为什么这样红 阙怎么读音 为什么不能打字 契税怎么算 怎么证明输卵管是通的 银项链变黑怎么清洗