当前位置：首页 > news >正文

php爬虫实现把目标页面变成自己的网站页面

news 2025/8/27 2:22:51

最近又被烦的不行，琐事不断，要是比起懒来一个人比一个人懒，但是懒要转换成动力啊，能让自己真正的偷懒，而不是浪费时间。每天还是需要不断的学习的，才能更好的提高效率，把之前做的简单小功能爬虫分享一下，仅供参考，少抬杠！

先看简单的页面截图效果：

主要思路就是抓取页面，然后把一些内容替换为自己想要的内容，如果想实现一些简单的功能可以通过js来实现。废话不多说，上代码先

<!DOCTYPE html>
<html>
<head><title>华科云商-专业的ip资源提供商</title><link rel="stylesheet" href="https://cdn.bootcdn.net/ajax/libs/twitter-bootstrap/4.6.0/css/bootstrap.min.css"><style>.centered-table {margin: 0 auto;width: 50%;}.table {width: 60%;margin-bottom: 1rem;color: #212529;margin: auto;
}</style>
</head>
<body><div class="input-group input-group-lg" style="max-width: 750px;margin: auto;padding-top: 20px !important;"><input type="text" id="searchkey" class="form-control" placeholder="请输入关键词（省份 / 城市 / 域名）"></div><p class="alert alert-info margin-top" style="max-width: 750px;margin: auto;margin-top: 10px !important;">SSTP端口：4430 L2TP密钥：8899</p>
<?php
// 使用curl函数访问URL
$url = 'http://api.xxx.com/display.php?product=18';
//$curl = curl_init($url);
//curl_setopt($curl, CURLOPT_RETURNTRANSFER, true);
//$response = curl_exec($curl);
$response = file_get_contents($url);
//将内容中的.xxx.com替换为.duoip.cn
$replacedResponse = str_replace('.xxx.com', '.duoip.cn', $response);// 解析修改后的内容
$data = json_decode($replacedResponse, true);// 构建表格
$table = '<table class="table table-bordered table-striped table-hover" style="margin-top: 20px !important;">';
$table .= '<thead><tr>';
$table .= '<th>城市</th>';
$table .= '<th>运营商</th>';
$table .= '<th>域名</th>';
$table .= '<th>状态</th>';
$table .= '</tr></thead><tbody>';foreach ($data['data'] as $row) {$statusClass = '';if ($row['online'] === '正常') {$statusClass = 'badge badge-success';} elseif ($row['online'] === '故障') {$statusClass = 'badge badge-danger';}$table .= '<tr>';$table .= '<td>' . $row['city'] . '</td>';$table .= '<td>' . $row['supply'] . '</td>';$table .= '<td>' . $row['nasname'] . '</td>';$table .= '<td><span class="' . $statusClass . '">' . $row['online'] . '</span></td>';$table .= '</tr>';
}$table .= '</tbody></table>';// 输出表格
echo $table;
?><script src="https://cdn.bootcdn.net/ajax/libs/jquery/3.6.0/jquery.min.js"></script><script src="https://cdn.bootcdn.net/ajax/libs/twitter-bootstrap/4.6.0/js/bootstrap.min.js"></script><script>document.getElementById("searchkey").addEventListener("input", searchFunction);function searchFunction() {var searchkey = document.getElementById("searchkey").value.toLowerCase();var lines = document.getElementsByTagName("tr");for (var i = 0; i < lines.length; i++) {var line = lines[i].innerText.toLowerCase();if (line.includes(searchkey) || searchkey === '') {lines[i].style.display = "";} else {lines[i].style.display = "none";}}}</script>
</body>
</html>

简单说明一下：这里使用file_get_contents而不是curl 主要就是curl太慢，会卡下，具体可以直接测试。简单小功能和页面尽量在线cdn链接，省事。

以前的模式每次都整理成execl表格，然后更新，简直太麻烦，所以直接同步抓取更新，对自己和用户来说都很方便。

好了，为了偷懒而做这个事情，后面遇到相似的问题，都可以用这种方法实现，如果有其他问题欢迎随时留言或私信，拒绝杠精。

php爬虫实现把目标页面变成自己的网站页面

最近又被烦的不行，琐事不断，要是比起懒来一个人比一个人懒，但是懒要转换成动力啊，能让自己真正的偷懒，而不是浪费时间。每天还是需要不断的学习的，才能更好的提高效率，把之前做的简单小功能爬虫…...

编程日记 2023/12/1 7:57:42

[c语言c++]手写你自己的swap交换函数

函数传参有按值传递，指针传递，引用传递，分别看一下三种情况下的交换函数如何书写，应该使用哪种最方便。当书写一个交换两个值的 swap 函数时，我们可以分别使用按值传参、指针传参和引用传参的方式来实现。下面是示例和…...

编程日记 2023/12/1 7:56:42

技术类知识汇总（二）

在自己日常学习javaweb的过程中，做的一些笔记和总结，汇总如下： Springboot项目的静态资源(html，css，js等前端资源)默认存放目录为：classpath:/static classpath:/public classpath:/resources"三层架…...

编程日记 2023/12/1 7:55:40

简单好用！日常写给 ChatGPT 的几个提示词技巧

ChatGPT 很强，但是有时候又显得很蠢，下面是使用 GPT4 的一个实例： 技巧一：三重冒号 """ 引用内容使用三重冒号 """，让 ChatGPT 清晰引用的内容： 技巧二：角色设定…...

编程日记 2023/12/1 7:52:36

pytorch分布式训练

1 基本概念 rank：进程号，在多进程上下文中，我们通常假定rank 0是第一个进程或者主进程，其它进程分别具有1，2，3不同rank号，这样总共具有4个进程 node：物理节点，可以是一个…...

编程日记 2023/12/1 7:51:35

【PyTorch】（三）模型的创建、参数初始化、保存和加载

文章目录 1. 模型的创建1.1. 创建方法1.1.1. 通过使用模型组件1.1.2. 通过继承nn.Module类 1.2. 模型组件1.2.1. 网络层1.2.2. 函数包1.2.3. 容器 1.3. 将模型转移到GPU 2. 模型参数初始化3. 模型的保存与加载3.1. 只保存参数3.2. 保存模型和参数 1. 模型的创建 1.1. 创建方法…...

编程日记 2023/12/1 7:48:29

高效开发之：判断复杂list中的对象属性是否包含某个值

技术使用：使用了Java 8引入的Stream API以及Optional类。这些特性用于简化集合的处理和减少空指针异常。 List<ResourceInfoDto> authData chatBase.getData();String baseName dto.getBaseName();Optional<ResourceInfoDto> authWithResourceCode a…...

编程日记 2023/12/1 7:47:28

MacOS + Android Studio 通过 USB 数据线真机调试

环境：Apple M1 MacOS Sonoma 14.1.1 软件：Android Studio Giraffe | 2022.3.1 Patch 3 设备：小米10 Android 13 一、创建测试项目安卓 HelloWorld 项目: 安卓 HelloWorld 项目二、数据线连接手机 1. 手机开启开发者模式参考&#xff1…...

编程日记 2023/12/1 7:46:26

部署jekins遇到的问题

jdk问题我用的jdk版本是21的结果版本太新了，启动jekins服务的时候总是报错最后在jekins的安装目录下面的jekinsErr.log查看日志发现是jdk问题最后换了一个17版本的就解决了。 unity和jekins jekins和Git源码管理 jekins和Git联动使用我想让jekins每次打包的时…...

编程日记 2023/12/1 7:45:25

SQLY优化

insert优化 1.批量插入手动事务提交主键顺序插入，主键顺序插入性能高于乱序插入 2.大批量插入数据如果一次性需要插入大批量数据，使用Insert语句插入性能较低，此时可以使用MYSQL数据库提供的load指令进行插入主键优化主键设计原则 …...

编程日记 2023/12/1 7:44:21

设计模式——行为型模式（一）

行为型模式用于描述程序在运行时复杂的流程控制，即描述多个类或对象之间怎样相互协作共同完成单个对象都无法单独完成的任务，它涉及算法与对象间职责的分配。行为型模式分为类行为模式和对象行为模式，前者采用继承机制来在类间分派行为，后者采用组合或聚合在对象间分配行…...

编程日记 2023/12/1 7:42:19

Rust语言入门教程(六) - 字符串类型

在Rust中， 字符串类型其实是一个比较复杂的话题。在Rust的标准库中，至少都提供了6种字符串类型，我们平常使用的最多的是其中的两种。这两种类型互相之间也有所关联： str： 字符串切片String 字符串其中， 字…...

编程日记 2023/12/1 7:41:17

【MATLAB源码-第92期】基于simulink的QPSK调制解调仿真，采用相干解调对比原始信号和解调信号。

操作环境： MATLAB 2022a 1、算法描述 QPSK，有时也称作四位元PSK、四相位PSK、4-PSK，在坐标图上看是圆上四个对称的点。通过四个相位，QPSK可以编码2位元符号。图中采用格雷码来达到最小位元错误率（BER） —…...

编程日记 2023/12/1 7:40:16

关于C语言控制浮点数输出精度问题

众所周知 C语言在控制一个浮点数输出精度的时候是在%和f之间加上一个.(想要控制的精度) 如：printf("%.2f", num); 问，试问：（你就是我的御主吗？）如果输出的精度是根据输入的数字变化的怎么办&am…...

编程日记 2023/12/1 7:39:13

【Linux 静态IP配置】

静态IP配置 1.NAT模式设置2.设置静态ip3.重启网络4.查看ip 1.NAT模式设置首先设置虚拟机中NAT模式的选项，打开VMware，点击“编辑”下的“虚拟网络编辑器”，设置NAT参数注意： VMware Network Adapter VMnet8保证是启用状态 …...

编程日记 2023/12/1 7:38:13

【Linux 操作系统配置 SFTP】

Linux 操作系统配置 SFTP sftp采用的是ssh加密隧道，安装性方面较ftp强，而且依赖的是系统自带的ssh服务，不像ftp还需要额外的进行安装基于 ssh 的 sftp 服务相比 ftp 有更好的安全性（非明文帐号密码传输）和方便的权限管…...

编程日记 2023/12/1 7:37:10

信贷专员简历模板

这份简历内容，以信贷专员招聘需求为背景，我们制作了1份全面、专业且具有参考价值的简历案例，大家可以灵活借鉴。信贷专员简历在线编辑下载：百度幻主简历求职意向求职类型：全职意向岗位：信贷专员 …...

编程日记 2023/12/1 7:35:06

Python自动化测试面试经典题

相信大家经历过许多面试都会有这样的感受：好不容易通过了 2 -3轮技术面试，但是薪资不够理想；要么被面试的测试专家虐的不要不要的。但每一次的面试也能让自己认识到不足之处，这样才有利于后续拿到理想的offer。牛鹭学院的学子对…...

编程日记 2023/12/1 7:34:05

java+springboot物流管理系统设计与实现wl-ssmj+jsp

物流管理系统的开发和综合性的物流信息网站平台的建设。研究的重点是运输管理信息系统．本系统是一套基于运输作业流程的管理系统，该系统以运输任务、货品、商务三大线索设计开发。运输任务是该管理系统的核心，系统通过对运输任务中的接收、调…...

编程日记 2023/12/1 7:32:03

概念理论类-k8s ：架构篇

转载：新手通俗易懂 k8s ：架构篇 Kubernetes，读音是[kubə’netis]，翻译成中文就是“库伯奈踢死”。当然了，也可以直接读它的简称：k8s。为什么把Kubernetes读作k8s，因为Kubernetes中间有8个字母…...

编程日记 2023/12/1 7:30:00

Java 8 Stream API 入门到实践详解

一、告别 for 循环！ 传统痛点： Java 8 之前，集合操作离不开冗长的 for 循环和匿名类。例如，过滤列表中的偶数： List<Integer> list Arrays.asList(1, 2, 3, 4, 5); List<Integer> evens new ArrayList…...

编程新知 2025/7/7 9:09:17

【JVM】- 内存结构

引言 JVM：Java Virtual Machine 定义：Java虚拟机，Java二进制字节码的运行环境好处： 一次编写，到处运行自动内存管理，垃圾回收的功能数组下标越界检查（会抛异常，不会覆盖到其他代码…...

编程新知 2025/8/22 4:16:17

【解密LSTM、GRU如何解决传统RNN梯度消失问题】

解密LSTM与GRU：如何让RNN变得更聪明？ 在深度学习的世界里，循环神经网络（RNN）以其卓越的序列数据处理能力广泛应用于自然语言处理、时间序列预测等领域。然而，传统RNN存在的一个严重问题——梯度消失&#…...

编程新知 2025/8/3 16:10:07

【论文笔记】若干矿井粉尘检测算法概述

总的来说，传统机器学习、传统机器学习与深度学习的结合、LSTM等算法所需要的数据集来源于矿井传感器测量的粉尘浓度，通过建立回归模型来预测未来矿井的粉尘浓度。传统机器学习算法性能易受数据中极端值的影响。YOLO等计算机视觉算法所需要的数据集来源于…...

编程新知 2025/7/9 21:22:02

import java.util.Arrays; import java.util.Scanner;public class DemoTest3 {public static void main(String[] args) {Scanner in new Scanner(System.in);// 注意 hasNext 和 hasNextLine 的区别while (in.hasNextLine()) { // 注意 while 处理多个 caseint a in.nextIn…...

编程新知 2025/8/22 19:07:22

python如何将word的doc另存为docx

将 DOCX 文件另存为 DOCX 格式（Python 实现） 在 Python 中，你可以使用 python-docx 库来操作 Word 文档。不过需要注意的是，.doc 是旧的 Word 格式，而 .docx 是新的基于 XML 的格式。python-docx 只能处理 .docx 格式…...

编程新知 2025/8/5 19:18:33