avatar

skv Blog

欢迎来到skv的博客🤯

  • 首页
  • 订阅
  • 归档
  • 友链
  • 关于
主页 爬虫笔记速查
文章

爬虫笔记速查

发表于 2024-03-18 更新于 2024-04- 11
作者 Administrator
5~6 分钟 阅读

正则万能匹配

re.findall("txt(.*?)txt", r.text, re.DOTALL)

ddddocr

ocr = ddddocr.DdddOcr()
code = ocr.classification(r.content)

Http/2.0

pip3 install 'httpx[http2]'

import httpx
client = httpx.Client(http2=True)
r = client.get(url, headers=headers, cookies=cookies)
print(r.text)

requests.session

# 先实例化一个对象
session = requests.session()

# 后面用法和直接使用requests一样了
response = session.get(url)  # get请求
response = session.post(url, json=json_data)  # post请求
result = response.json()

Https证书验证

requests.get(url, verify=False)  # 不验证证书

import warnings
warnings.filterwarnings("ignore") # 关闭警告

http basic auth 认证

from requests.auth import HTTPBasicAuth
requests.get(url, auth=HTTPBasicAuth("user", "password"))

302不重定向

requests.get(url, allow_redirects=False)

默认分类
速查
许可协议:  CC BY 4.0
分享

相关文章

4月 11, 2024

命令速查

pip pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pip freeze > re

10月 16, 2025

一些好用的Java第三方库

Commons-io 开发者:Apache 简述:简化文件和流操作的库 <!-- https://mvnrepository.com/artifact/commons-io/commons-io --> <dependency> <groupId>commons-io</groupId>

9月 18, 2025

Java命名规范

包 全小写+域名倒置 package com.denox.java_demo.entity; package com.denox.java_demo.util; 类 大驼峰命名法:每个单词首字母大写 class User {} class UserStudent {} 方法 小驼峰命名法:第二个单

下一篇

Arch 安装指南

上一篇

加解密速查

最近更新

  • 命令速查
  • 一些好用的Java第三方库
  • Java命名规范
  • Java学习笔记
  • 张家界学院校园网一键登录

热门标签

前端 Linux 速查 Java 工具 大数据

目录

©2025 skv Blog. 保留部分权利。

使用 Halo 主题 Chirpy