当前位置: 首页 > article >正文

Docker部署Loki+Grafana+Vector实现全服务器日志监控(含N8N/SSH/Fail2ban监控)

Docker部署LokiGrafanaVector实现全服务器日志监控含N8N/SSH/Fail2ban监控一、前言很多自建服务玩家、服务器运维新手都想把Docker容器日志N8N/Airflow等、服务器SSH登录日志、Fail2ban攻防拦截日志统一收集在Grafana图形界面集中查看、检索、回溯。本文全程小白向无复杂命令、无专业术语绕弯手把手教你用Docker Compose 一键部署 Loki Grafana Vector实现所有Docker容器日志自动采集服务器SSH登录/失败日志收集Fail2ban拦截黑客暴力破解日志收集Grafana可视化检索、按关键词过滤、按时间回溯二、架构原理Vector日志采集搬运工负责抓取容器日志、系统日志转发给LokiLoki日志存储仓库专门存放所有日志不占大量磁盘Grafana可视化面板用来查询、看日志、做监控面板简单理解Vector收日志 → Loki存日志 → Grafana看日志三、前置准备一台Linux云服务器Ubuntu/Debian均可已安装docker和docker-compose服务器开放3000(Grafana)、3100(Loki)端口四、目录准备新建专属部署目录后续所有配置都放这里mkdir-p~/apps/log-monitorcd~/apps/log-monitor五、编写docker-compose.yml在log-monitor目录创建docker-compose.yml复制以下内容直接使用version:3.8services:loki:image:grafana/loki:2.9.0container_name:lokirestart:alwaysports:-3100:3100volumes:-./loki-data:/lokicommand:-config.file/etc/loki/local-config.yamlgrafana:image:grafana/grafana:latestcontainer_name:grafanarestart:alwaysports:-3000:3000volumes:-./grafana-data:/var/lib/grafanaenvironment:-GF_SECURITY_ADMIN_PASSWORDadminXXXXXdepends_on:-lokivector:image:timberio/vector:0.55.0-alpinecontainer_name:vectorrestart:alwaysvolumes:-./vector.toml:/etc/vector/vector.toml-/var/run/docker.sock:/var/run/docker.sock-/var/log:/host/var/log:ro说明挂载docker.sock让Vector能监听所有Docker容器日志挂载/var/log:ro只读挂载系统日志目录用来采集auth.log、fail2ban.logGrafana默认账号admin密码adminxxx可自行修改六、编写Vector核心配置 vector.toml在同目录创建vector.toml最终稳定可用版无语法报错、无429限流data_dir /var/lib/vector # 1. 采集所有Docker容器日志 [sources.docker_logs] type docker_logs docker_host unix:///var/run/docker.sock # 2. 采集服务器SSH登录日志 auth.log [sources.host_auth] type file include [/host/var/log/auth.log] read_from end # 3. 采集Fail2ban拦截日志 [sources.fail2ban] type file include [/host/var/log/fail2ban.log] read_from end # 输出所有日志到Loki [sinks.loki] type loki inputs [docker_logs, host_auth, fail2ban] endpoint http://loki:3100 encoding.codec json # 固定标签保证Loki正常接收 labels.job vector配置关键点小白解释read_from end只采集后续新产生日志不加载海量历史日志避免Loki被限流报429错误三个数据源容器日志、SSH日志、Fail2ban日志统一发给Loki七、启动整套服务在log-monitor目录执行dockercompose up-d等待1分钟三个容器全部后台启动完成。查看Vector运行日志确认无报错dockercompose logs-fvector出现Healthcheck passed即为正常启动。八、配置Grafana对接Loki浏览器访问服务器IP:3000账号admin密码admin123456左侧菜单 →Connections → Data sources点击Add data source→ 选择LokiURL填写http://loki:3100拉到最下方 →Save test显示成功即可九、日常日志查询用法小白直接复制进入Grafana左侧Explore数据源选Loki直接用下面语句查询1. 查看所有采集的日志{jobvector}2. 只看N8N容器日志{containern8n}3. 只看SSH登录、登录失败日志{jobvector} | sshd4. 只看Fail2ban黑客拦截、封禁IP日志{jobvector} | fail2ban十、常见问题避坑全程踩坑总结问题1Grafana打开日志一片空白明明Vector已采集原因Grafana默认只显示前1000行Docker容器日志太多把系统日志挤没了解决右上角Limit默认1000改成10000不用全量查询直接用| 关键词过滤问题2Vector报 429 Too Many Requests原因一次性读取海量历史日志Loki限流拒绝解决配置里统一用read_from end只收集新日志不加载历史问题3看不到Fail2ban/SSH日志Vector能读到文件但不显示原因1日志文件权限限制Vector无读取权限执行命令开放权限sudochmod644/var/log/auth.log /var/log/fail2ban.log原因2混用动态标签模板Loki解析失败解决直接用本文极简配置不搞复杂标签模板只用固定jobvector问题4Vector配置文件报TOML语法错误原因缩进、冒号格式不对解决直接复制本文完整vector.toml不要手动改格式十一、使用总结整套架构一条命令启动无需复杂安装自动全覆盖Docker容器日志 SSH安全日志 Fail2ban攻防日志不用登录服务器看日志浏览器随时随地检索、回溯只需复制配置无需懂日志原理即可落地使用避开了429限流、标签解析、行数限制、权限不足等所有坑

相关文章:

Docker部署Loki+Grafana+Vector实现全服务器日志监控(含N8N/SSH/Fail2ban监控)

Docker部署LokiGrafanaVector实现全服务器日志监控(含N8N/SSH/Fail2ban监控) 一、前言 很多自建服务玩家、服务器运维新手,都想把 Docker容器日志(N8N/Airflow等)、服务器SSH登录日志、Fail2ban攻防拦截日志 统一收集&…...

无盘启动技术/dev/SDB:企业级网络启动解决方案

1. 无盘启动技术演进与企业痛点解析 计算机启动过程从最初的本地磁盘加载,发展到今天的网络化启动,经历了三次重大技术迭代。早期每台计算机必须配备本地存储设备存放操作系统,这不仅增加了硬件成本,还带来了管理难题——想象一下…...

GEO是什么意思?它的规则是什么?

你有没有发现,现在的搜索方式正在悄悄改变?以前我们遇到问题习惯打开百度、Google,敲入关键词,然后在一堆蓝色链接里寻找答案。而现在,越来越多的人直接打开DeepSeek、ChatGPT或豆包,像和朋友聊天一样提问&…...

Wokwi在线模拟器:零门槛学习嵌入式开发

1. Wokwi在线模拟器:硬件编程学习的新范式作为一名在嵌入式开发领域摸爬滚打多年的工程师,我见证了无数初学者因为硬件获取门槛而放弃学习的案例。直到最近帮朋友的孩子调试ESP32作业时,我才真正意识到Wokwi这类在线模拟器的革命性价值——它…...

使用 Taotoken 后如何清晰观测各模型的用量与成本

使用 Taotoken 后如何清晰观测各模型的用量与成本 1. 用量看板的核心功能 Taotoken 控制台提供了直观的用量看板,帮助用户实时追踪各模型的使用情况。在控制台的「用量分析」页面,系统默认展示最近7天的调用数据,包括总请求次数、成功率和各…...

Nginx 反向代理+负载均衡+动静分离整合 Tomcat

一、环境准备 1. 服务器准备角色IP地址端口核心功能Nginx192.168.81.13380反向代理、负载均衡、静态资源处理Tomcat节点1192.168.81.1348080处理动态请求(JSP/Servlet)Tomcat节点2192.168.81.1358081处理动态请求(JSP/Servlet)静态…...

LeetCode:226翻转二叉树

方法一:递归法/*** Definition for a binary tree node.* public class TreeNode {* int val;* TreeNode left;* TreeNode right;* TreeNode() {}* TreeNode(int val) { this.val val; }* TreeNode(int val, TreeNode left, TreeNode righ…...

基于MCP协议构建AI Agent与SQLite数据库的安全交互桥梁

1. 项目概述:一个为AI Agent赋能SQLite数据库操作的MCP服务器最近在折腾AI Agent的生态工具,发现一个挺有意思的项目:ofershap/mcp-server-sqlite。简单来说,这是一个实现了模型上下文协议(Model Context Protocol&…...

视觉注意力评分(VAS)原理与多模态优化实践

1. 视觉注意力评分(VAS)的技术本质视觉注意力评分(Visual Attention Score)本质上是一种量化模型关注度的计算机制。在计算机视觉领域,VAS通过计算特征图中各空间位置的权重分布,让模型能够像人类一样"聚焦"于关键区域。这个技术最早源于2014年…...

Ledger 官方回应“后门”传闻:秘语盾技术支持可信度分析

秘语盾正式发布:Ledger 硬件钱包全系列中文官方说明书(2026版) 对于大中华区用户而言,语言壁垒与网络环境往往是安全管理资产的第一道障碍。为了彻底解决这一痛点,Ledger 大中华区官方授权服务商——秘语盾&#xff0…...

可学习小波卷积一维信号异常诊断【附代码】

✨ 本团队擅长数据搜集与处理、建模仿真、程序设计、仿真代码、EI、SCI写作与指导,毕业论文、期刊论文经验交流。 ✅ 专业定制毕设、代码 ✅ 如需沟通交流,查看文章底部二维码(1)参数化连续小波变换与卷积层融合的预处理模块&…...

别再只当自拍杆!用Osmo Mobile 6的FPV和旋转模式拍出电影感Vlog(含运镜分解)

别再只当自拍杆!用Osmo Mobile 6的FPV和旋转模式拍出电影感Vlog(含运镜分解) 当你手持Osmo Mobile 6时,它绝不仅仅是一个防抖自拍杆——那些被90%用户忽略的FPV模式和旋转拍摄功能,正是专业创作者与普通用户的分水岭。…...

关于前端打包

一、为什么需要打包&#xff0c;或者说打包解决了什么问题1、模块化管理&#xff1a;存在的问题&#xff1a;过去用 <script> 标签手动管理依赖&#xff0c;会出现“全局变量冲突”、“顺序错误”、“难以维护”的问题。解决的方法&#xff1a;支持 ES Modules、CommonJS…...

保姆级教程:在Ubuntu 20.04上从零搭建ROS Noetic + Realsense D435i开发环境(含清华源加速)

保姆级教程&#xff1a;Ubuntu 20.04上ROS Noetic与Realsense D435i开发环境全栈部署指南 在机器人视觉开发领域&#xff0c;环境配置往往是新手面临的第一个挑战。想象一下&#xff0c;当你满怀期待地拆开崭新的Realsense D435i深度相机&#xff0c;准备大展身手时&#xff0c…...

中国加密货币投资者必备:Ledger 硬件钱包选购指南

对于中国加密货币投资者而言&#xff0c;在复杂的网络环境与多变的监管政策下&#xff0c;“私钥主权离线化”已不再是进阶选项&#xff0c;而是保护资产的生存底线。 针对大中华区用户面临的 App Store 区域限制、网络同步卡顿及硬件供应链安全等痛点&#xff0c;本指南将为您…...

WHAT - GitLens supercharged 插件

文章目录一、核心能力1. 行级追踪&#xff08;Blame&#xff09;2. 历史回溯&#xff08;History / Timeline&#xff09;3. Commit 详情增强4. 分支与仓库可视化5. CodeLens&#xff08;代码上方增强信息&#xff09;6. 快捷操作二、解决了什么问题1. 代码“归因问题”2. 上下…...

车间设备实时监控难在哪?边缘计算网关才是答案

某家年产值过亿的机械加工厂。生产车间里六十八台设备。数控车床、加工中心、磨床、冲压机&#xff0c;品牌五花八门。老板花了四十万上了MES系统。结果呢。数据还是靠人抄。每两小时巡一次线&#xff0c;拿手写板记设备状态。设备编号、运行时间、报警代码&#xff0c;全部手填…...

NOKOV动捕系统坐标系偏移实战:5分钟搞定机器人定位校准(附计算工具推荐)

NOKOV动捕系统坐标系校准实战&#xff1a;从原理到工具链全解析 在机器人研发和动作捕捉应用领域&#xff0c;坐标系对齐问题就像两个说不同语言的人试图合作——看似简单&#xff0c;实则充满细节陷阱。上周在实验室调试机械臂时&#xff0c;我们遇到了一个典型场景&#xff1…...

越疆焊接机器人实测:免示教到底是不是噱头?8年集成商的选型避坑指南

最近这半年&#xff0c;我接到的关于焊接产线改造的咨询&#xff0c;比过去两年加起来都多。而且大家的痛点出奇的一致&#xff1a;“招不到靠谱的老焊工”、“焊工工资太高了”、“传统工业机器人不会用&#xff0c;换型太折腾”。前几天&#xff0c;有个长三角做冲压件和五金…...

PHP中HTML嵌入与布局问题解析

在PHP编程中&#xff0c;常常会遇到将动态生成的HTML插入到静态HTML结构中的情况。然而&#xff0c;有时候这些动态生成的HTML会影响到页面的布局和CSS样式。本文将详细讨论这种常见的编程问题&#xff0c;并提供解决方案。 问题描述 假设我们有一个PHP文件&#xff0c;它从数据…...

无需复杂配置使用Taotoken快速验证大模型创意想法

无需复杂配置使用Taotoken快速验证大模型创意想法 1. 分钟级接入体验 当新产品创意需要快速验证时&#xff0c;传统的大模型接入流程往往需要开发者花费大量时间在账号申请、API文档研究和服务配置上。Taotoken提供的标准化接入方式让这一过程缩短到分钟级别。开发者只需完成…...

巧用NumPy:处理不规则列索引的向量模计算

在数据处理和科学计算中,NumPy是一个不可或缺的工具。它的高效计算能力能够帮助我们快速处理大规模的数值数据。今天,我们要探讨一个有趣的问题:如何在NumPy数组中,根据一个不规则的列索引列表,计算每个行向量的模长。 问题描述 假设我们有一个NxM的数组my_arr,以及一个…...

我的大模型实践:思考模式、提示词与边界的权衡之道

在与大模型打交道的过程中&#xff0c;我逐渐意识到&#xff1a;没有放之四海皆准的“最佳实践”&#xff0c;只有基于模型规模、任务复杂度和容错成本的动态权衡。这篇文章将我近期关于“思考模式 vs 非思考模式”、“限制性提示词 vs 意图式提示词”、“提示词边界如何设计”…...

BFloat16指令集解析与机器学习优化实践

1. BFloat16指令集概述与核心价值BFloat16&#xff08;Brain Floating Point 16&#xff09;是专为机器学习设计的16位浮点格式&#xff0c;由Google Brain团队于2018年提出。与传统FP16相比&#xff0c;BFloat16保留了与FP32相同的8位指数位&#xff0c;仅将尾数位从23位缩减到…...

R语言做病害预测还停留在glm?2024最新R包farmML正式开源:支持多源传感器+气象+基因型数据联合建模

更多请点击&#xff1a; https://intelliparadigm.com 第一章&#xff1a;R语言在作物病害预测中的演进与范式变革 R语言已从早期的统计建模工具&#xff0c;逐步演变为融合遥感数据解析、时间序列异常检测与可解释机器学习的农业智能预测核心平台。其生态中 caret、tidymodel…...

如何快速实现Figma界面汉化:面向中文设计师的完整指南

如何快速实现Figma界面汉化&#xff1a;面向中文设计师的完整指南 【免费下载链接】figmaCN 中文 Figma 插件&#xff0c;设计师人工翻译校验 项目地址: https://gitcode.com/gh_mirrors/fi/figmaCN 还在为Figma的英文界面而烦恼吗&#xff1f;专业术语看不懂&#xff0…...

科技圈一夜巨震:马斯克薪酬绑定火星殖民,华为小艺接入DeepSeek V4 懂游宝打手用户突破5000万,游戏服务市场正经历结构性变革

科技圈一夜巨震&#xff1a;马斯克薪酬绑定火星殖民&#xff0c;华为小艺接入DeepSeek V4【合集次标题】腾讯混元离线翻译、游戏打手破5000万、国产华龙一号、OPPO Find X9s Pro评测01. 腾讯混元开源440MB离线翻译模型&#xff0c;支持33种语言面对多数翻译应用必须联网才能保证…...

当网盘下载变成一场耐心测试,我们找到了更聪明的办法

当网盘下载变成一场耐心测试&#xff0c;我们找到了更聪明的办法 【免费下载链接】Online-disk-direct-link-download-assistant 一个基于 JavaScript 的网盘文件下载地址获取工具。基于【网盘直链下载助手】修改 &#xff0c;支持 百度网盘 / 阿里云盘 / 中国移动云盘 / 天翼云…...

TX3 Mini S905W电视盒运行Armbian终极指南:快速免费改造为Linux服务器

TX3 Mini S905W电视盒运行Armbian终极指南&#xff1a;快速免费改造为Linux服务器 【免费下载链接】amlogic-s9xxx-armbian Supports running Armbian on Amlogic, Allwinner, and Rockchip devices. Support a311d, s922x, s905x3, s905x2, s912, s905d, s905x, s905w, s905, …...

数据增强不平衡样本轴承故障诊断【附代码】

✨ 本团队擅长数据搜集与处理、建模仿真、程序设计、仿真代码、EI、SCI写作与指导&#xff0c;毕业论文、期刊论文经验交流。 ✅ 专业定制毕设、代码 ✅ 如需沟通交流&#xff0c;查看文章底部二维码&#xff08;1&#xff09;决策融合的Trans-ResNet模型用于不平衡诊断&#x…...