相关文章
爬虫实战(自用)requests模块、聚焦爬虫(数据解析)、selenium模块
一、requests模块
一、爬取搜狗首页的页面数据
import requests
# 指定url
# 发起请求,get方法会返回一个响应对象
resrequests.get(rhttps://www.sogou.com/)
# 获取响应数据,text返回字符串类型的响应数据
strres.text
print(str)
# 持久化存储
with…
建站知识
2025/1/23 20:24:55
Python 爬虫总结——案例代码
目录
request的基本使用
urllib使用
图片爬取
获取动态数据
session和cokkie的处理
使用xpath解析
使用正则解析
BeautifulSoup使用
seleium自动化爬虫
其他自动化操作
实现无界面
自动化处理iframe标签
基于selenium的12306用户登录
代理的使用
验证码解析
协…
建站知识
2025/1/2 11:22:11
国内外日常上网必备,实用趣味网站合集
平时上网收集的实用,趣味的100个网站合集,赶紧收藏吧!!! 1.经典的“搜狗输入法” http://pinyin.sogou.com/ 2.免费发短信的站点【2015年还可以使用】 http://for-ever.us/ 特点: 外国的,可免费"匿名&…
建站知识
2025/1/2 4:09:59
日常上网必备趣味,实用的100个网站
日常上网必备趣味,实用的100个网站合集,赶紧收藏吧! 1.强大的“搜狗输入法” http://pinyin.sogou.com/ 2.免费发短信的网站【2015年还可以使用】 http://for-ever.us/ 特点: 外国的,可免费"匿名"发送英文短信、可以善意…
建站知识
2025/1/23 10:47:38
网站链接推广的一些技巧
连接很重要 一个是网站互换链接推广方法效果的递减效应,另一个是搜索引擎排名政策对网站链入数量权重可能降低所带来的影响。这两个问题最终的结果都是一样的,即网站链接推广策略的有效性在降低。该文中同时也提到,通过交换链接获得合作伙伴的…
建站知识
2025/1/11 6:42:11