当前位置： 首页 > news >正文

爬虫自动化之drissionpage+SwitchyOmega实现随时切换代理ip

news 2026/1/28 9:40:34

本文介绍了如何使用DrizzlePage进行爬虫自动化，并重点讲解了首次启动时设置代理IP以及通过SwitchyOmega插件实现随时切换代理IP的方法。

安装一次，后面调用就不会再去安装了

下载地址：https://github.com/FelisCatus/SwitchyOmega/releases

这两个文件随便那个都可以,下载后xpi改成zip或者crx改成zip解压到自己方便调用的地方
在这里插入图片描述
下面直接上代码

# -*- coding: utf-8 -*-
import warnings
warnings.filterwarnings('ignore')
import platform

相关文章：

爬虫自动化之drissionpage+SwitchyOmega实现随时切换代理ip

本文介绍了如何使用DrizzlePage进行爬虫自动化，并重点讲解了首次启动时设置代理IP以及通过SwitchyOmega插件实现随时切换代理IP的方法。 安装一次，后面调用就不会再去安装了 下载地址：https://github.com/FelisCatus/SwitchyOmega/releases 这两个文件随便那个都可以,下载…...

编程日记 2024/12/11 1:14:33

docker安装kettle（PDI）并实现web访问

我是MAC电脑M1版本，希望把软件交给docker进行管理，最近公司同事都通过kettle来实现外部数据对接，所以我本地也有安装kettle需求，在网上找到了这个解决方案操作很简单，但出现了无法访问的情况。我的排查方式是&#xff…...

编程日记 2024/12/11 1:12:31

[软件工程]十.可靠性工程（reliable engineering）

1.什么是可靠性工程 我们希望软件在给定的时间内，运行的时候不会崩溃或者发生失效，同时能保护我们的数据和个人信息。我们要能够信任我们所使用的软件，这意味着软件必须是可靠的。可靠性（reliability）：系统…...

编程日记 2024/12/11 1:10:29

【Makefile】编译日志之输出重定向符号 ＞

用法1 make all >& compilelog.txt make all > compilelog.txt这两个编译命令在功能上有一些细微的区别，主要在于标准输出和标准错误的处理方式。 make all >& compilelog.txt 这个命令会将标准输出（stdout）和标准错误&a…...

编程日记 2024/12/11 1:07:25

linux之less

less命令是Linux系统中一个功能强大的文件查看工具，它允许用户分页查看文件内容，并提供了多种快捷键和选项来增强用户体验。以下是less命令的一些常用操作： 基本使用 查看文件使用less命令的基本语法是less [选项] [文件名]。例如&#xff0…...

编程日记 2024/12/11 1:05:21

算法-字符串-165.比较版本号

一、题目 二、思路解析 1.思路： 比较的是两个版本号它们以“.”作为分割的部分的有效值（即数值）是否一致 2.常用方法： 1.s.split("\\规则")，将字符串按参数规则进行分割并存储在字符串数组中 String[] str …...

编程日记 2024/12/11 1:03:19

List与Set、数组与ArrayList、ArrayList与LinkedList的区别

List 与 Set 的区别： 项ListSet重复允许重复的对象（多个null也可以）不允许重复的对象（null也只能有一个）有序性有序的。 保持了每个元素的插入顺序。即输出顺序就是输入顺序。 有序和无序都有。 HashSet：无…...

编程日记 2024/12/11 0:59:13

如何在 Odoo18 视图中添加关联数据看板按钮 | 免费开源ERP实施诀窍

文 / 开源智造 Odoo亚太金牌服务 引言 关联数据看板按钮乃是 Odoo 当中的一项强效功能，它容许用户顺遂地访问相关记录，或者直接从模型的表单视图施行特定操作。它们为用户给予了对重要信息的疾速访问途径，并简化了工作流程，由此…...

编程日记 2024/12/11 0:58:12

Linux下mysql环境的搭建

1.mysql的下载 去MySQL官网下载mysql的linux压缩包 MySQL :: Download MySQL Community Server 如果下载慢请到网盘中自行下载 通过网盘分享的文件：mysql-8.0.40-1.el7.x86_64.rpm-bundle.tar 链接: https://pan.baidu.com/s/1vUJ-VuTwer1nLPT-haQCqw?pwd6342 提…...

编程日记 2024/12/11 0:56:10

视觉语言模型 Qwen2-VL

视觉语言模型 Qwen2-VL flyfish from PIL import Image import requests import torch from torchvision import io from typing import Dict from transformers import Qwen2VLForConditionalGeneration, AutoTokenizer, AutoProcessor from modelscope import snapshot_dow…...

编程日记 2024/12/11 0:55:09

浅谈新能源汽车感应钥匙一键启动的步骤和特点

随着汽车智能化技术的发展，无钥匙启动系统还可以与其他智能系统进行集成，如智能车载系统、远程控制系统等。这使得车主可以通过智能手机等智能设备远程控制车辆的启动、解锁、上锁等操作，进一步提升了使用的便捷性和智能化水平‌。新能源汽车…...

编程日记 2024/12/11 0:51:05

鸿蒙ArkTS语言基础语法详解

文章目录 鸿蒙ArkTS语言基础语法详解一、引言二、ArkTS语言概述1. ArkTS语言特点2. TypeScript基础语法2.1 类型注解2.2 接口2.3 泛型2.4 类的继承2.5 类的访问修饰符 三、ArkTS的基本组成3.1 装饰器3.2 UI描述3.3 自定义组件3.4 系统组件3.5 属性方法和事件方法 四、自定义组件…...

编程日记 2024/12/11 0:48:01

H5游戏出海如何获得更多增长机会？

海外H5小游戏的崛起给了国内众多中小厂商出海发展的机会，开发者如何在海外市场获得更多的增长机会？#APP出海# H5游戏如何在海外获得核心用户？ HTML5游戏的开发与运营者们首先可以利用量多质高的HTML5游戏，维持海外用户粘性&…...

编程日记 2024/12/11 0:43:56

Cmake+基础命令

一、版本要求&#xff1a; 检查 cmake 版本号的最低要求&#xff0c;不满足条件时报错。 cmake_minimum_required(VERSION <version>)参数&#xff1a; version&#xff1a;最低要求的版本号 例子&#xff1a; # 最低要求安装3.21版本的cmake cmake_minimum_required…...

编程日记 2024/12/11 0:39:51

python数据分析之爬虫基础：requests详解

1、requests基本使用 1.1、requests介绍 requests是python中一个常用于发送HTTP请求的第三方库&#xff0c;它极大地简化了web服务交互的过程。它是唯一的一个非转基因的python HTTP库&#xff0c;人类可以安全享用。 1.2、requests库的安装 pip install -i https://pypi.tu…...

编程日记 2024/12/11 0:37:46

PHP期末复习（通过30道填空题梳理知识点）

一、基本语法 PHP的开始标记是&#xff1a; <?php<?php 是PHP脚本的开始标签&#xff0c;所有PHP代码必须在这个标签内书写。 PHP文件的结束标记是&#xff1a; ?>?> 是PHP脚本的结束标签&#xff0c;在大多数PHP文件中&#xff0c;通常可以省略结束标记。 定…...

编程日记 2024/12/11 0:36:45

PostgreSQL 安装部署系列：使用YUM 方式在Centos 7.9 安装指定 PostgreSQL -15版本数据库

一、前言 千里之行始于足下&#xff0c;想学习一门数据库&#xff0c;首先要从安装部署开始&#xff0c;先拥有一套属于自己的学习测试库。为了更好的学习该数据库&#xff0c;可以选择一个在企业界使用率比较普及的操作系统&#xff0c;选择稳定版本的操作系统&#xff1b;如果…...

编程日记 2024/12/11 0:27:36

知识图谱8:深度学习各种小模型

1、知识图谱的展示有很多工具 Neo4j Browser - - - - 浏览器版本 Neo4j Desktop - - - - 桌面版本 graphX - - - - 可以集成到Neo4j Desktop Neo4j 提供的 Neo4j Bloom 是用户友好的可视化工具&#xff0c;适合非技术用户直观地浏览图数据。Cypher 是其核心查询语言&#xf…...

编程日记 2024/12/11 0:19:26

为什么 JavaScript 中的 `new` 运算符报错？

在 JavaScript 中&#xff0c;new 运算符通常用于创建一个新对象并调用构造函数来初始化对象。然而&#xff0c;new 运算符可能会引发一些错误&#xff0c;通常是由于以下原因导致的&#xff1a; 构造函数没有正确的定义&#xff1a; 如果使用 new 运算符调用的函数没有正确地定…...

编程日记 2024/12/11 0:18:24

Tomcat，javaweb， servlet , springBoot

在server.xml里配置服务器 <scope>provided</scope>打包的时候&#xff0c;这个jar包不会被打进去&#xff0c;因为tomcat已将封装了这个jar包&#xff0c;没必要要这个...

编程日记 2024/12/11 0:10:15

【Linux】shell脚本忽略错误继续执行

在 shell 脚本中&#xff0c;可以使用 set -e 命令来设置脚本在遇到错误时退出执行。如果你希望脚本忽略错误并继续执行&#xff0c;可以在脚本开头添加 set e 命令来取消该设置。 举例1 #!/bin/bash# 取消 set -e 的设置 set e# 执行命令&#xff0c;并忽略错误 rm somefile…...

编程新知 2025/9/11 15:27:32

【入坑系列】TiDB 强制索引在不同库下不生效问题

文章目录 背景SQL 优化情况线上SQL运行情况分析怀疑1：执行计划绑定问题？尝试：SHOW WARNINGS 查看警告探索 TiDB 的 USE_INDEX 写法Hint 不生效问题排查解决参考背景 项目中使用 TiDB 数据库，并对 SQL 进行优化了，添加了强制索引。 UAT 环境已经生效，但 PROD 环境强制索…...

编程新知 2026/1/22 8:15:00

电脑插入多块移动硬盘后经常出现卡顿和蓝屏

当电脑在插入多块移动硬盘后频繁出现卡顿和蓝屏问题时&#xff0c;可能涉及硬件资源冲突、驱动兼容性、供电不足或系统设置等多方面原因。以下是逐步排查和解决方案&#xff1a; 1. 检查电源供电问题 问题原因&#xff1a;多块移动硬盘同时运行可能导致USB接口供电不足&#x…...

编程新知 2025/10/28 15:02:57

Robots.txt 文件

什么是robots.txt&#xff1f; robots.txt 是一个位于网站根目录下的文本文件&#xff08;如&#xff1a;https://example.com/robots.txt&#xff09;&#xff0c;它用于指导网络爬虫&#xff08;如搜索引擎的蜘蛛程序&#xff09;如何抓取该网站的内容。这个文件遵循 Robots…...

编程新知 2025/9/9 5:38:23

【学习笔记】深入理解Java虚拟机学习笔记——第4章 虚拟机性能监控，故障处理工具

第2章 虚拟机性能监控&#xff0c;故障处理工具 4.1 概述 略 4.2 基础故障处理工具 4.2.1 jps:虚拟机进程状况工具 命令&#xff1a;jps [options] [hostid] 功能&#xff1a;本地虚拟机进程显示进程ID&#xff08;与ps相同&#xff09;&#xff0c;可同时显示主类&#x…...

编程新知 2026/1/15 1:34:10

C++八股 —— 单例模式

文章目录 1. 基本概念2. 设计要点3. 实现方式4. 详解懒汉模式 1. 基本概念 线程安全&#xff08;Thread Safety&#xff09; 线程安全是指在多线程环境下&#xff0c;某个函数、类或代码片段能够被多个线程同时调用时&#xff0c;仍能保证数据的一致性和逻辑的正确性&#xf…...

编程新知 2025/12/2 3:35:50

RNN避坑指南：从数学推导到LSTM/GRU工业级部署实战流程

本文较长&#xff0c;建议点赞收藏&#xff0c;以免遗失。更多AI大模型应用开发学习视频及资料&#xff0c;尽在聚客AI学院。 本文全面剖析RNN核心原理&#xff0c;深入讲解梯度消失/爆炸问题&#xff0c;并通过LSTM/GRU结构实现解决方案&#xff0c;提供时间序列预测和文本生成…...

编程新知 2026/1/20 17:16:46

以光量子为例，详解量子获取方式

光量子技术获取量子比特可在室温下进行。该方式有望通过与名为硅光子学&#xff08;silicon photonics&#xff09;的光波导&#xff08;optical waveguide&#xff09;芯片制造技术和光纤等光通信技术相结合来实现量子计算机。量子力学中&#xff0c;光既是波又是粒子。光子本…...

编程新知 2026/1/22 15:47:11

return this；返回的是谁

一个审批系统的示例来演示责任链模式的实现。假设公司需要处理不同金额的采购申请&#xff0c;不同级别的经理有不同的审批权限&#xff1a; // 抽象处理者&#xff1a;审批者 abstract class Approver {protected Approver successor; // 下一个处理者// 设置下一个处理者pub…...

编程新知 2026/1/26 16:58:09

Go 并发编程基础：通道（Channel）的使用

在 Go 中&#xff0c;Channel 是 Goroutine 之间通信的核心机制。它提供了一个线程安全的通信方式&#xff0c;用于在多个 Goroutine 之间传递数据&#xff0c;从而实现高效的并发编程。 本章将介绍 Channel 的基本概念、用法、缓冲、关闭机制以及 select 的使用。 一、Channel…...

编程新知 2025/12/4 8:54:35