当前位置: 首页 > article >正文

别再只用K-Means了!用MATLAB手把手教你搞定更抗噪的K-Medoids聚类(附完整代码)

超越K-Means用MATLAB实战K-Medoids聚类算法解决噪声数据难题当你的数据集里混入了异常值K-Means的表现往往会让你失望——那些偏离群体的数据点像磁铁一样把聚类中心拽离合理位置。这时候K-Medoids算法就该登场了。与K-Means不同K-Medoids选择实际存在的样本点作为聚类中心medoids这种特性让它对噪声和异常值有着天然的抵抗力。1. 为什么K-Means在噪声数据上会失败K-Means算法通过计算簇内数据点的均值来确定新的聚类中心这个看似合理的策略在面对异常值时却成了致命弱点。想象一下在一个客户消费数据集中99%的客户月消费在1000-5000元之间但有少数几个极端客户消费高达50万元。这些异常值会显著拉高均值导致聚类中心严重偏离大多数数据点的真实分布。K-Means的核心问题对异常值极度敏感聚类中心可能落在没有实际数据点的位置使用欧氏距离对数据分布形状有特定假设相比之下K-Medoids选择实际存在的数据点作为中心避免了均值带来的偏差。在同一个客户消费数据集中即使存在极端高消费客户K-Medoids也会选择一个最能代表群体的实际客户作为中心点而不是计算可能没有实际意义的平均值。2. K-Medoids算法原理深度解析K-Medoids算法的核心思想可以概括为选择能够最小化簇内不相似度的实际数据点作为代表。这种策略让它特别适合处理以下场景数据包含噪声和异常值距离度量不是欧氏距离如曼哈顿距离需要聚类中心有实际意义如零售选址问题2.1 算法步骤详解K-Medoids的标准实现PAM算法包含以下关键步骤初始化随机选择k个数据点作为初始medoids分配阶段将每个非medoid点分配到最近的medoid所在的簇交换阶段尝试用非medoid点替换当前medoid计算总代价变化迭代重复步骤2-3直到medoids不再变化或达到最大迭代次数% PAM算法核心交换阶段伪代码 for each medoid m for each non-medoid point o temp_medoids medoids; temp_medoids(m) o; total_cost calculate_total_cost(temp_medoids); if total_cost current_cost medoids temp_medoids; current_cost total_cost; end end end2.2 代价函数设计K-Medoids算法的优化目标是最小化总绝对误差Total Absolute ErrorTAE Σ Σ d(p, m_i) i p∈C_i其中d是距离度量常用曼哈顿距离m_i是第i个簇的medoidC_i是第i个簇的所有点。距离度量选择对比度量类型公式对异常值敏感度适用场景欧氏距离√(Σ(x_i-y_i)²)高球形分布数据曼哈顿距离Σx_i-y_i余弦相似度(x·y)/(x3. MATLAB实战从数据准备到结果可视化让我们通过一个完整的MATLAB示例演示如何处理含噪声数据的聚类问题。3.1 生成模拟数据首先创建包含三个簇和随机噪声的测试数据% 生成三个清晰簇 cluster1 randn(100,2) * 0.5 repmat([2,2],100,1); cluster2 randn(80,2) * 0.6 repmat([6,3],80,1); cluster3 randn(120,2) * 0.4 repmat([4,7],120,1); % 添加噪声点 noise [rand(10,2)*10; [8,0.5]; [1,8]; [0.5,0.5]; [9,9]]; % 合并数据 X [cluster1; cluster2; cluster3; noise]; % 可视化原始数据 figure; scatter(X(:,1), X(:,2), filled); title(含噪声的原始数据分布);3.2 实现K-Medoids算法下面是完整的K-Medoids算法MATLAB实现function [medoids, clusters] kmedoids(X, k, max_iter) % 输入参数 % X - 数据矩阵(n×d) % k - 簇数量 % max_iter - 最大迭代次数 [n, d] size(X); % 1. 随机初始化medoids rng(42); % 设置随机种子保证可重复性 medoid_indices randperm(n, k); medoids X(medoid_indices, :); % 2. 初始化变量 clusters zeros(n, 1); prev_medoids zeros(size(medoids)); iter 0; % 3. 主循环 while ~isequal(medoids, prev_medoids) iter max_iter prev_medoids medoids; % 3.1 分配点到最近的medoid distances pdist2(X, medoids, cityblock); % 使用曼哈顿距离 [~, clusters] min(distances, [], 2); % 3.2 更新每个簇的medoid for i 1:k cluster_points X(clusters i, :); if ~isempty(cluster_points) % 计算所有点作为medoid的代价 intra_distances pdist2(cluster_points, cluster_points, cityblock); total_cost sum(intra_distances, 2); % 选择代价最小的点作为新medoid [~, min_idx] min(total_cost); medoids(i, :) cluster_points(min_idx, :); end end iter iter 1; fprintf(迭代 %d: medoids变化量 %.4f\n, iter, norm(medoids - prev_medoids)); end end3.3 结果可视化与分析运行算法并可视化结果% 运行K-Medoids k 3; [medoids, clusters] kmedoids(X, k, 100); % 可视化聚类结果 figure; colors [r, g, b, c, m, y, k]; for i 1:k scatter(X(clustersi,1), X(clustersi,2), filled, MarkerFaceColor, colors(i)); hold on; end % 标记medoids scatter(medoids(:,1), medoids(:,2), 200, k, p, filled); title(K-Medoids聚类结果); legend(簇1, 簇2, 簇3, Medoids); hold off;提示在实际应用中建议多次运行算法不同随机初始化并选择代价最小的结果以减少局部最优的影响。4. 高级技巧与实战建议4.1 如何确定最佳K值确定合适的簇数量k是聚类分析中的关键挑战。以下是几种实用方法肘部法则绘制不同k值对应的总代价曲线选择拐点轮廓系数计算每个点的轮廓系数并取平均值Gap统计量比较实际数据与参考分布的聚类质量差异% 肘部法则实现示例 k_range 1:8; costs zeros(size(k_range)); for i 1:length(k_range) [~, ~, distances] kmedoids(X, k_range(i), 100); costs(i) sum(min(distances, [], 2)); end figure; plot(k_range, costs, -o); xlabel(簇数量 k); ylabel(总代价); title(肘部法则确定最佳k值);4.2 处理大规模数据的优化策略标准PAM算法的时间复杂度为O(k(n-k)²)对于大规模数据效率较低。可以考虑以下优化CLARA算法在数据子集上应用PAM选择最佳结果并行计算利用MATLAB的并行计算工具箱加速距离计算近似算法如FastPAM等改进版本算法变体对比算法时间复杂度适用数据规模精度PAMO(k(n-k)²)小规模(1000)高CLARAO(ks² k(n-k))中大规模中FastPAMO(n²)中等规模高BanditPAMO(n log n)大规模较高4.3 常见问题排查当K-Medoids表现不佳时可以检查以下方面距离度量选择不当尝试不同的距离度量如欧氏距离、曼哈顿距离、余弦距离异常值过多考虑先进行异常值检测和过滤数据尺度不一致对特征进行标准化处理初始medoids选择不佳尝试k-means风格的初始化% 改进的medoids初始化类似k-means function medoids kmedoids_plusplus(X, k) [n, ~] size(X); medoids zeros(k, size(X,2)); % 1. 随机选择第一个medoid medoids(1,:) X(randi(n),:); for i 2:k % 2. 计算每个点到最近medoid的距离 distances pdist2(X, medoids(1:i-1,:), cityblock); min_distances min(distances, [], 2); % 3. 按距离平方的概率选择下一个medoid probabilities min_distances.^2 / sum(min_distances.^2); medoids(i,:) X(find(rand cumsum(probabilities), 1), :); end end5. K-Medoids在实际项目中的应用案例5.1 零售店铺选址分析在连锁零售店铺选址中K-Medoids可以帮助识别具有相似特征的区域中心。与K-Means相比它的优势在于选择的中心点是实际存在的位置如现有商圈对异常区域如机场、火车站等特殊商圈不敏感结果更容易解释和落地% 店铺选址数据示例 load(store_locations.mat); % 加载经纬度数据 % 使用K-Medoids寻找区域中心 k 5; % 计划开设5家新店 [medoids, ~] kmedoids(store_locations, k, 50); % 在地图上可视化 figure; geoscatter(store_locations(:,1), store_locations(:,2), 20, b, filled); hold on; geoscatter(medoids(:,1), medoids(:,2), 200, r, p, filled); title(零售店铺选址分析 - K-Medoids聚类结果); legend(现有店铺, 推荐新店位置);5.2 医疗图像分析在医疗图像分割中K-Medoids可用于识别组织样本中的典型细胞形态选择最具代表性的细胞作为medoids排除异常细胞如病变细胞对聚类中心的干扰结果更符合医生的诊断习惯基于实际样本实际项目经验在处理病理切片图像时我们发现K-Medoids选择的代表性细胞比K-Means的虚拟中心更能帮助医生理解算法决策过程。特别是在排除异常细胞影响方面K-Medoids的表现明显优于K-Means。

相关文章:

别再只用K-Means了!用MATLAB手把手教你搞定更抗噪的K-Medoids聚类(附完整代码)

超越K-Means:用MATLAB实战K-Medoids聚类算法解决噪声数据难题 当你的数据集里混入了异常值,K-Means的表现往往会让你失望——那些偏离群体的数据点像磁铁一样把聚类中心拽离合理位置。这时候,K-Medoids算法就该登场了。与K-Means不同&#xf…...

Windows蓝牙图表突然不见了怎么办

重启电脑,注意不是关机后再启动,而是点击“重启”我试过一些其他的方法但都不奏效,只有这个快速解决了问题...

OpenOmniBot:端侧AI智能体实现Android自动化操作全解析

1. 项目概述:一个能“动手”的端侧AI助手在AI应用井喷的今天,我们早已习惯了与各种聊天机器人对话。它们能写诗、能编程、能解答疑问,但绝大多数都停留在“动口不动手”的阶段——它们理解你的指令,给出建议或生成文本&#xff0c…...

3秒破解百度网盘提取码:智能查询工具如何彻底改变你的资源获取体验

3秒破解百度网盘提取码:智能查询工具如何彻底改变你的资源获取体验 【免费下载链接】baidupankey 项目地址: https://gitcode.com/gh_mirrors/ba/baidupankey 你是否曾因找不到百度网盘提取码而错失重要资源?面对海量学习资料却卡在"请输入…...

智能体开发框架深度解析:从模块化设计到工程实践

1. 项目概述:从代码仓库到智能体开发框架的深度解构最近在GitHub上看到一个名为wshobson/agents的仓库,热度不低。乍一看标题“agents”,很容易让人联想到当下火热的AI智能体(Agent)领域。但作为一个在软件开发和AI应用…...

从‘内华达州离婚率’到‘A/B测试’:用可交换性思想理解分层模型的底层逻辑

从离婚率到A/B测试:用生活案例理解分层模型的底层逻辑 当内华达州的离婚率遇上统计学 1981年,美国内华达州的离婚率高达每千人13.9例,远高于其他州。这个看似简单的社会现象背后,隐藏着一个深刻的统计学问题:如何理解特…...

ComfyUI玩转WD1.4反推标签:避开onnxruntime-gpu与TensorRT的版本坑,保姆级环境配置指南

ComfyUI玩转WD1.4反推标签:避开onnxruntime-gpu与TensorRT的版本坑,保姆级环境配置指南 在AI图像生成领域,自动反推提示词(Tagging)功能正成为工作流中不可或缺的一环。WD1.4模型凭借其出色的识别准确率,成…...

从‘小乌龟’到命令行:一个老派Java程序员迁移到Git的心路历程与配置清单

从‘小乌龟’到命令行:一个老派Java程序员迁移到Git的心路历程与配置清单 第一次在IDEA终端里敲下git commit -m "initial"时,我的手悬在回车键上整整三秒——这行黑底白字的命令,怎么看都比TortoiseSVN那个绿色小乌龟图标少了些安…...

考场信号屏蔽器分布式信号屏蔽器手机信号屏蔽器

在当今信息时代,信号管控成为了众多场所的迫切需求。中科星月的分布式信号屏蔽器凭借其卓越的性能,成为了众多场所的理想选择。中科星月的分布式信号屏蔽器能有效屏蔽2.3.4.5G手机信号,还可屏蔽WiFi蓝牙信号。在学校考场中,曾有学…...

Python统计假设检验速查指南与实战技巧

## 1. 统计假设检验的核心价值与应用场景假设检验是数据分析师和研究人员最常使用的统计工具之一。在Python生态中,借助SciPy、StatsModels等库,我们可以快速实现各类统计检验。这个"17种统计检验速查表"的价值在于:当面对不同数据…...

家庭宽带问题(300兆带宽):手机能正常上网,但是笔记本电脑网速无法跑满。

一、首先是我的路由器设置如下: 二、一开始我手机连的是2.4G网络,使用“”全球网测“app测速如下: 测速网站:相对靠谱公正的22个测速网站(或APP或软件)大全(不断更新中)建议先收藏 后来我手机连上5Gwifi后…...

大模型这把锤子,能砸破多少芯片工程师的护城河

"大力出奇迹"——这是大模型最让人惊讶的地方。你以为某些任务需要专业积累,需要特定知识,需要领域经验,结果大模型上来就能给出一个像模像样的答案。这种"一力降十会"的感觉,出现的频率将会越来越高。现在很…...

AI写论文秘籍!4款AI论文生成工具,帮你轻松完成学术大作

2025 - 2026年AI论文写作工具:学术写作的得力助手 在2025年的学术写作智能化潮流中,越来越多的人开始尝试使用AI写论文的工具。不过,许多现有的AI论文写作工具在撰写硕士和博士论文等长篇作品时,常常面临着缺乏理论深度和逻辑严谨…...

报名实操篇(03)——人工智能训练师培训机构怎么选?5个硬标准+避坑指南

培训机构怎么选?5个硬标准避坑指南卷二报名实操篇 第3篇 核心解决:在鱼龙混杂的培训市场里,快速找到靠谱机构开篇:这个市场真的乱 2026 年,人工智能训练师市场越来越火,培训机构也越来越多。 随便在某度搜&…...

Bebas Neue:开源几何无衬线字体在现代化设计中的技术架构与应用实践

Bebas Neue:开源几何无衬线字体在现代化设计中的技术架构与应用实践 【免费下载链接】Bebas-Neue Bebas Neue font 项目地址: https://gitcode.com/gh_mirrors/be/Bebas-Neue Bebas Neue是一款基于SIL Open Font License v1.1许可证的免费开源显示字体&#…...

如何快速搭建个人哔咔漫画离线图书馆:picacomic-downloader完整指南

如何快速搭建个人哔咔漫画离线图书馆:picacomic-downloader完整指南 【免费下载链接】picacomic-downloader 哔咔漫画 picacomic pica漫画 bika漫画 PicACG 多线程下载器,带图形界面 带收藏夹,已打包exe 下载速度飞快 项目地址: https://gi…...

从电池装配到整车下线:YC8000-Q赋能三菱PLC的产线互联方案

一、行业背景与项目概况1.1 新能源汽车制造行业技术需求新能源汽车制造是高端装备制造的核心赛道,其产线需实现焊接、装配、检测等工序的高度自动化与数据互联互通,核心诉求涵盖设备协同联动、数据实时采集、远程运维效率提升,以保障产品一致…...

计算机视觉工具:Python+OpenCV的常用函数汇总

计算机视觉工具:PythonOpenCV的常用函数汇总📚 本章学习目标:深入理解PythonOpenCV的常用函数汇总的核心概念与实践方法,掌握关键技术要点,了解实际应用场景与最佳实践。本文属于《计算机视觉教程》计算机视觉入门篇&a…...

可复用Agent开发框架、多智能体协同系统、安全管控方案

可复用Agent开发框架、多智能体协同系统、安全管控方案 目录 可复用Agent开发框架、多智能体协同系统、安全管控方案 一、核心概念定义与通俗解读 1. 可复用Agent开发框架 2. 多智能体协同系统(Multi-Agent System, MAS) 3. Agent安全管控方案 二、2026年行业头部方案详解 1…...

专栏B-产品心理学深度-04-稀缺性策略

第4篇 | 稀缺性与紧迫感的设计艺术 本文你将获得 稀缺性策略选择器:根据产品类型和场景选择最合适的稀缺性策略紧迫感设计梯度表:5级紧迫感强度及适用场景稀缺性滥用的5个危险信号:帮你判断是否过度使用了稀缺性稀缺性设计A/B测试框架&#x…...

FloPy 完整指南:Python 驱动的 MODFLOW 地下水建模终极解决方案

FloPy 完整指南:Python 驱动的 MODFLOW 地下水建模终极解决方案 【免费下载链接】flopy A Python package to create, run, and post-process MODFLOW-based models. 项目地址: https://gitcode.com/gh_mirrors/fl/flopy 地下水建模是水文地质学和环境工程中…...

【Linux从入门到精通】第22篇:Shell变量与数据类型——数字与字符串处理

目录 一、引言:变量不只是“存个值” 二、环境变量 vs 局部变量:作用域的秘密 2.1 用实验理解差别 2.2 什么时候用哪种? 2.3 查看当前所有环境变量 2.4 持久化环境变量 三、只读变量与常量保护 3.1 readonly:让变量变成“常…...

为什么92%的AI PoC项目因容器隔离失效被叫停?Docker Sandbox 6步硬核配置手册(含GPU透传避坑指南)

更多请点击: https://intelliparadigm.com 第一章:Docker Sandbox 运行 AI 代码隔离技术配置总览 Docker Sandbox 是一种轻量级、可复现的容器化运行环境,专为安全执行第三方 AI 代码而设计。它通过命名空间(namespaces&#xff…...

头插法多线程不可用的原因

为什么头插法多线程下不可用?我们以HashMap扩容时用的头插法举例子: JDK 1.7 HashMap 扩容时的头插法迁移逻辑 // 旧数组 Entry[] oldTable table; // 新数组(容量翻倍) Entry[] newTable new Entry[oldCapacity * 2];// 遍历旧数组的每个桶…...

VS Code Copilot Next 配置实战手册(企业级自动化工作流搭建全流程)

更多请点击: https://intelliparadigm.com 第一章:VS Code Copilot Next 自动化工作流配置概览 VS Code Copilot Next 是微软与 GitHub 联合推出的下一代智能编程助手,它深度集成于 VS Code 编辑器中,支持上下文感知的代码生成、…...

视频孪生赋能智慧能源园区:黎阳之光打造全域数智化新标杆

在“双碳”战略与新型电力系统建设加速推进的背景下,能源园区正面临安全管控升级、能效提升压力、协同效率不足三大核心挑战。传统依赖人工巡检、分散系统、经验决策的管理模式,已难以适配现代化能源园区的发展需求。北京黎阳之光科技有限公司作为国内视…...

LLM应用开发模块化工具箱:从设计模式到实战构建智能体

1. 项目概述:一个面向LLM应用开发的模块化工具箱 如果你正在尝试构建基于大语言模型的应用,无论是想做一个能自动处理邮件的智能助手,还是一个能分析文档并生成报告的系统,你大概率会面临一个共同的起点:从零开始。这意…...

PyTorch Lightning深度学习工程化实战指南

1. 课程定位与核心价值 这个Python深度学习迷你课程的设计初衷,是帮助具备基础Python编程能力的学习者,在最短时间内掌握深度学习核心技术的工程化应用能力。不同于传统学院派教学,我们采用"问题驱动案例实战"的模式,重…...

【独家首发】MCP 2026医疗数据安全配置验证工具包(含自动化扫描脚本+等保测评报告生成器),仅限前200家三级医院申领

更多请点击: https://intelliparadigm.com 第一章:MCP 2026医疗数据安全配置标准体系概览 MCP 2026(Medical Configuration Protocol 2026)是由国际医疗信息技术联盟(IMITF)发布的全新医疗数据安全配置基准…...

OpenCV中SVM算法原理与图像分类实战

1. 支持向量机与OpenCV的深度整合支持向量机(SVM)作为机器学习领域的经典算法,在OpenCV计算机视觉库中有着成熟的实现。我在实际图像分类项目中多次采用这种组合方案,特别是在处理小样本、高维度数据时,SVM的决策边界优…...