当前位置： 首页 > news >正文

爬虫自动化之drissionpage+SwitchyOmega实现随时切换代理ip

news 2025/7/2 13:28:47

本文介绍了如何使用DrizzlePage进行爬虫自动化，并重点讲解了首次启动时设置代理IP以及通过SwitchyOmega插件实现随时切换代理IP的方法。

安装一次，后面调用就不会再去安装了

下载地址：https://github.com/FelisCatus/SwitchyOmega/releases

这两个文件随便那个都可以,下载后xpi改成zip或者crx改成zip解压到自己方便调用的地方
在这里插入图片描述
下面直接上代码

# -*- coding: utf-8 -*-
import warnings
warnings.filterwarnings('ignore')
import platform

相关文章：

爬虫自动化之drissionpage+SwitchyOmega实现随时切换代理ip

本文介绍了如何使用DrizzlePage进行爬虫自动化，并重点讲解了首次启动时设置代理IP以及通过SwitchyOmega插件实现随时切换代理IP的方法。 安装一次，后面调用就不会再去安装了 下载地址：https://github.com/FelisCatus/SwitchyOmega/releases 这两个文件随便那个都可以,下载…...

编程日记 2024/12/11 1:14:33

docker安装kettle（PDI）并实现web访问

我是MAC电脑M1版本，希望把软件交给docker进行管理，最近公司同事都通过kettle来实现外部数据对接，所以我本地也有安装kettle需求，在网上找到了这个解决方案操作很简单，但出现了无法访问的情况。我的排查方式是&#xff…...

编程日记 2024/12/11 1:12:31

[软件工程]十.可靠性工程（reliable engineering）

1.什么是可靠性工程 我们希望软件在给定的时间内，运行的时候不会崩溃或者发生失效，同时能保护我们的数据和个人信息。我们要能够信任我们所使用的软件，这意味着软件必须是可靠的。可靠性（reliability）：系统…...

编程日记 2024/12/11 1:10:29

【Makefile】编译日志之输出重定向符号 ＞

用法1 make all >& compilelog.txt make all > compilelog.txt这两个编译命令在功能上有一些细微的区别，主要在于标准输出和标准错误的处理方式。 make all >& compilelog.txt 这个命令会将标准输出（stdout）和标准错误&a…...

编程日记 2024/12/11 1:07:25

linux之less

less命令是Linux系统中一个功能强大的文件查看工具，它允许用户分页查看文件内容，并提供了多种快捷键和选项来增强用户体验。以下是less命令的一些常用操作： 基本使用 查看文件使用less命令的基本语法是less [选项] [文件名]。例如&#xff0…...

编程日记 2024/12/11 1:05:21

算法-字符串-165.比较版本号

一、题目 二、思路解析 1.思路： 比较的是两个版本号它们以“.”作为分割的部分的有效值（即数值）是否一致 2.常用方法： 1.s.split("\\规则")，将字符串按参数规则进行分割并存储在字符串数组中 String[] str …...

编程日记 2024/12/11 1:03:19

List与Set、数组与ArrayList、ArrayList与LinkedList的区别

List 与 Set 的区别： 项ListSet重复允许重复的对象（多个null也可以）不允许重复的对象（null也只能有一个）有序性有序的。 保持了每个元素的插入顺序。即输出顺序就是输入顺序。 有序和无序都有。 HashSet：无…...

编程日记 2024/12/11 0:59:13

如何在 Odoo18 视图中添加关联数据看板按钮 | 免费开源ERP实施诀窍

文 / 开源智造 Odoo亚太金牌服务 引言 关联数据看板按钮乃是 Odoo 当中的一项强效功能，它容许用户顺遂地访问相关记录，或者直接从模型的表单视图施行特定操作。它们为用户给予了对重要信息的疾速访问途径，并简化了工作流程，由此…...

编程日记 2024/12/11 0:58:12

Linux下mysql环境的搭建

1.mysql的下载 去MySQL官网下载mysql的linux压缩包 MySQL :: Download MySQL Community Server 如果下载慢请到网盘中自行下载 通过网盘分享的文件：mysql-8.0.40-1.el7.x86_64.rpm-bundle.tar 链接: https://pan.baidu.com/s/1vUJ-VuTwer1nLPT-haQCqw?pwd6342 提…...

编程日记 2024/12/11 0:56:10

视觉语言模型 Qwen2-VL

视觉语言模型 Qwen2-VL flyfish from PIL import Image import requests import torch from torchvision import io from typing import Dict from transformers import Qwen2VLForConditionalGeneration, AutoTokenizer, AutoProcessor from modelscope import snapshot_dow…...

编程日记 2024/12/11 0:55:09

浅谈新能源汽车感应钥匙一键启动的步骤和特点

随着汽车智能化技术的发展，无钥匙启动系统还可以与其他智能系统进行集成，如智能车载系统、远程控制系统等。这使得车主可以通过智能手机等智能设备远程控制车辆的启动、解锁、上锁等操作，进一步提升了使用的便捷性和智能化水平‌。新能源汽车…...

编程日记 2024/12/11 0:51:05

鸿蒙ArkTS语言基础语法详解

文章目录 鸿蒙ArkTS语言基础语法详解一、引言二、ArkTS语言概述1. ArkTS语言特点2. TypeScript基础语法2.1 类型注解2.2 接口2.3 泛型2.4 类的继承2.5 类的访问修饰符 三、ArkTS的基本组成3.1 装饰器3.2 UI描述3.3 自定义组件3.4 系统组件3.5 属性方法和事件方法 四、自定义组件…...

编程日记 2024/12/11 0:48:01

H5游戏出海如何获得更多增长机会？

海外H5小游戏的崛起给了国内众多中小厂商出海发展的机会，开发者如何在海外市场获得更多的增长机会？#APP出海# H5游戏如何在海外获得核心用户？ HTML5游戏的开发与运营者们首先可以利用量多质高的HTML5游戏，维持海外用户粘性&…...

编程日记 2024/12/11 0:43:56

Cmake+基础命令

一、版本要求&#xff1a; 检查 cmake 版本号的最低要求&#xff0c;不满足条件时报错。 cmake_minimum_required(VERSION <version>)参数&#xff1a; version&#xff1a;最低要求的版本号 例子&#xff1a; # 最低要求安装3.21版本的cmake cmake_minimum_required…...

编程日记 2024/12/11 0:39:51

python数据分析之爬虫基础：requests详解

1、requests基本使用 1.1、requests介绍 requests是python中一个常用于发送HTTP请求的第三方库&#xff0c;它极大地简化了web服务交互的过程。它是唯一的一个非转基因的python HTTP库&#xff0c;人类可以安全享用。 1.2、requests库的安装 pip install -i https://pypi.tu…...

编程日记 2024/12/11 0:37:46

PHP期末复习（通过30道填空题梳理知识点）

一、基本语法 PHP的开始标记是&#xff1a; <?php<?php 是PHP脚本的开始标签&#xff0c;所有PHP代码必须在这个标签内书写。 PHP文件的结束标记是&#xff1a; ?>?> 是PHP脚本的结束标签&#xff0c;在大多数PHP文件中&#xff0c;通常可以省略结束标记。 定…...

编程日记 2024/12/11 0:36:45

PostgreSQL 安装部署系列：使用YUM 方式在Centos 7.9 安装指定 PostgreSQL -15版本数据库

一、前言 千里之行始于足下&#xff0c;想学习一门数据库&#xff0c;首先要从安装部署开始&#xff0c;先拥有一套属于自己的学习测试库。为了更好的学习该数据库&#xff0c;可以选择一个在企业界使用率比较普及的操作系统&#xff0c;选择稳定版本的操作系统&#xff1b;如果…...

编程日记 2024/12/11 0:27:36

知识图谱8:深度学习各种小模型

1、知识图谱的展示有很多工具 Neo4j Browser - - - - 浏览器版本 Neo4j Desktop - - - - 桌面版本 graphX - - - - 可以集成到Neo4j Desktop Neo4j 提供的 Neo4j Bloom 是用户友好的可视化工具&#xff0c;适合非技术用户直观地浏览图数据。Cypher 是其核心查询语言&#xf…...

编程日记 2024/12/11 0:19:26

为什么 JavaScript 中的 `new` 运算符报错？

在 JavaScript 中&#xff0c;new 运算符通常用于创建一个新对象并调用构造函数来初始化对象。然而&#xff0c;new 运算符可能会引发一些错误&#xff0c;通常是由于以下原因导致的&#xff1a; 构造函数没有正确的定义&#xff1a; 如果使用 new 运算符调用的函数没有正确地定…...

编程日记 2024/12/11 0:18:24

Tomcat，javaweb， servlet , springBoot

在server.xml里配置服务器 <scope>provided</scope>打包的时候&#xff0c;这个jar包不会被打进去&#xff0c;因为tomcat已将封装了这个jar包&#xff0c;没必要要这个...

编程日记 2024/12/11 0:10:15

Unity3D中Gfx.WaitForPresent优化方案

前言 在Unity中&#xff0c;Gfx.WaitForPresent占用CPU过高通常表示主线程在等待GPU完成渲染&#xff08;即CPU被阻塞&#xff09;&#xff0c;这表明存在GPU瓶颈或垂直同步/帧率设置问题。以下是系统的优化方案&#xff1a; 对惹&#xff0c;这里有一个游戏开发交流小组&…...

编程新知 2025/7/1 1:39:32

智慧工地云平台源码，基于微服务架构+Java+Spring Cloud +UniApp +MySql

智慧工地管理云平台系统&#xff0c;智慧工地全套源码&#xff0c;java版智慧工地源码&#xff0c;支持PC端、大屏端、移动端。 智慧工地聚焦建筑行业的市场需求&#xff0c;提供“平台网络终端”的整体解决方案&#xff0c;提供劳务管理、视频管理、智能监测、绿色施工、安全管…...

编程新知 2025/6/28 14:16:11

电脑插入多块移动硬盘后经常出现卡顿和蓝屏

当电脑在插入多块移动硬盘后频繁出现卡顿和蓝屏问题时&#xff0c;可能涉及硬件资源冲突、驱动兼容性、供电不足或系统设置等多方面原因。以下是逐步排查和解决方案&#xff1a; 1. 检查电源供电问题 问题原因&#xff1a;多块移动硬盘同时运行可能导致USB接口供电不足&#x…...

编程新知 2025/6/27 0:52:23

Python实现prophet 理论及参数优化

文章目录 Prophet理论及模型参数介绍Python代码完整实现prophet 添加外部数据进行模型优化 之前初步学习prophet的时候&#xff0c;写过一篇简单实现&#xff0c;后期随着对该模型的深入研究&#xff0c;本次记录涉及到prophet 的公式以及参数调优&#xff0c;从公式可以更直观…...

编程新知 2025/6/21 6:18:34

ESP32 I2S音频总线学习笔记（四）： INMP441采集音频并实时播放

简介 前面两期文章我们介绍了I2S的读取和写入&#xff0c;一个是通过INMP441麦克风模块采集音频&#xff0c;一个是通过PCM5102A模块播放音频&#xff0c;那如果我们将两者结合起来&#xff0c;将麦克风采集到的音频通过PCM5102A播放&#xff0c;是不是就可以做一个扩音器了呢…...

编程新知 2025/6/26 5:16:24

如何为服务器生成TLS证书

TLS&#xff08;Transport Layer Security&#xff09;证书是确保网络通信安全的重要手段&#xff0c;它通过加密技术保护传输的数据不被窃听和篡改。在服务器上配置TLS证书&#xff0c;可以使用户通过HTTPS协议安全地访问您的网站。本文将详细介绍如何在服务器上生成一个TLS证…...

编程新知 2025/6/22 5:07:54

Psychopy音频的使用

Psychopy音频的使用 本文主要解决以下问题&#xff1a; 指定音频引擎与设备&#xff1b;播放音频文件 本文所使用的环境&#xff1a; Python3.10 numpy2.2.6 psychopy2025.1.1 psychtoolbox3.0.19.14 一、音频配置 Psychopy文档链接为Sound - for audio playback — Psy…...

编程新知 2025/6/21 18:09:34

OpenPrompt 和直接对提示词的嵌入向量进行训练有什么区别

OpenPrompt 和直接对提示词的嵌入向量进行训练有什么区别 直接训练提示词嵌入向量的核心区别 您提到的代码： prompt_embedding = initial_embedding.clone().requires_grad_(True) optimizer = torch.optim.Adam([prompt_embedding...

编程新知 2025/6/21 15:53:21

三分算法与DeepSeek辅助证明是单峰函数

前置 单峰函数有唯一的最大值&#xff0c;最大值左侧的数值严格单调递增&#xff0c;最大值右侧的数值严格单调递减。 单谷函数有唯一的最小值&#xff0c;最小值左侧的数值严格单调递减&#xff0c;最小值右侧的数值严格单调递增。 三分的本质 三分和二分一样都是通过不断缩…...

编程新知 2025/6/25 6:12:04

算术操作符与类型转换：从基础到精通

目录 前言&#xff1a;从基础到实践——探索运算符与类型转换的奥秘 算术操作符超级详解 算术操作符&#xff1a;、-、*、/、% 赋值操作符&#xff1a;和复合赋值 单⽬操作符&#xff1a;、--、、- 前言&#xff1a;从基础到实践——探索运算符与类型转换的奥秘 在先前的文…...

编程新知 2025/6/26 12:08:29