15分钟学 Go 第 46 天 : 监控与日志
第46天:监控与日志
学习目标
了解如何实现应用监控与日志管理,掌握相关工具和最佳实践。
内容结构
- 引言
- 监控的概念与工具
- 监控的定义
- 常见监控工具
- 日志管理的概念与工具
- 日志的重要性
- 常见日志管理工具
- 实现监控与日志的最佳实践
- 监控指标
- 日志格式
- 实战案例
- 使用Prometheus进行监控
- 使用Logrus进行日志管理
- 代码示例
- 代码运行流程图
- 总结
1. 引言
监控与日志是现代应用程序管理中不可或缺的重要部分。有效的监控能够在系统故障发生前及早警报,而良好的日志管理则能帮助我们快速定位问题。在这一天的内容中,我们将深入研究如何在Go语言中实现应用监控和日志管理。
2. 监控的概念与工具
2.1 监控的定义
监控是指对系统状态的实时观察与记录,通常以指标(Metrics)的形式表现。这些指标可以包括CPU使用率、内存占用、请求响应时间、错误率等。
2.2 常见监控工具
| 工具 | 描述 |
|---|---|
| Prometheus | 一个用于监控系统和服务的开源系统,采用Pull模型。 |
| Grafana | 用于展示监控数据的开源工具,支持多种数据源。 |
| Datadog | 提供云监控和应用性能管理的商业平台。 |
Prometheus与Grafana
Prometheus是一款流行的监控工具,它使用时间序列数据库存储数据。Grafana可以与Prometheus配合,进行数据可视化。
3. 日志管理的概念与工具
3.1 日志的重要性
日志记录是追踪应用程序行为和问题的手段,通过分析日志我们可以洞悉系统运行情况,并进行性能优化。
3.2 常见日志管理工具
| 工具 | 描述 |
|---|---|
| Logrus | Go语言中一个结构化、标准化的日志库。 |
| ELK Stack | Elasticsearch, Logstash, Kibana的集合,用于集中管理和展示日志。 |
| Fluentd | 用于统一管理日志的开源数据收集器。 |
4. 实现监控与日志的最佳实践
4.1 监控指标
- 可用性(Availability):服务是否在线。
- 性能(Performance):响应时间、吞吐量等。
- 错误率(Error Rate):应用程序中的错误次数与总请求数之比。
4.2 日志格式
采用统一的日志格式,有助于后期的分析与检索。通常使用JSON格式进行结构化日志记录。
示例日志格式:
{"level": "info","msg": "User logged in","user_id": "12345","timestamp": "2024-11-01T12:00:00Z"
}
5. 实战案例
在本节中,我们将实现一个简单的Go应用程序,使用Prometheus进行监控,并使用Logrus进行日志管理。
5.1 使用Prometheus进行监控
首先,我们需要安装Prometheus并在Go应用中集成。
go get github.com/prometheus/client_golang/prometheus
go get github.com/prometheus/client_golang/prometheus/promhttp
创建一个简单的Go应用
// main.go
package mainimport ("log""net/http""github.com/prometheus/client_golang/prometheus""github.com/prometheus/client_golang/prometheus/promhttp"
)var (requests = prometheus.NewCounterVec(prometheus.CounterOpts{Name: "app_requests_total",Help: "Total number of requests",},[]string{"method"},)
)func init() {prometheus.MustRegister(requests)
}func handler(w http.ResponseWriter, r *http.Request) {requests.WithLabelValues(r.Method).Inc()w.Write([]byte("Hello, World!"))
}func main() {http.HandleFunc("/", handler)http.Handle("/metrics", promhttp.Handler())log.Fatal(http.ListenAndServe(":8080", nil))
}
运行应用
go run main.go
访问 http://localhost:8080/metrics 查看Prometheus指标。
5.2 使用Logrus进行日志管理
安装Logrus:
go get github.com/sirupsen/logrus
修改应用以集成Logrus
// main.go
package mainimport ("log""net/http""github.com/prometheus/client_golang/prometheus""github.com/prometheus/client_golang/prometheus/promhttp""github.com/sirupsen/logrus"
)var (requests = prometheus.NewCounterVec(prometheus.CounterOpts{Name: "app_requests_total",Help: "Total number of requests",},[]string{"method"},)
)func init() {prometheus.MustRegister(requests)logrus.SetFormatter(&logrus.JSONFormatter{})
}func handler(w http.ResponseWriter, r *http.Request) {requests.WithLabelValues(r.Method).Inc()logrus.WithFields(logrus.Fields{"method": r.Method,"path": r.URL.Path,}).Info("Received request")w.Write([]byte("Hello, World!"))
}func main() {http.HandleFunc("/", handler)http.Handle("/metrics", promhttp.Handler())log.Fatal(http.ListenAndServe(":8080", nil))
}
查看日志
运行应用后,访问各路径,并在控制台查看相应的日志信息。
6. 代码示例
完整代码示例:
// main.go
package mainimport ("log""net/http""github.com/prometheus/client_golang/prometheus""github.com/prometheus/client_golang/prometheus/promhttp""github.com/sirupsen/logrus"
)var (requests = prometheus.NewCounterVec(prometheus.CounterOpts{Name: "app_requests_total",Help: "Total number of requests",},[]string{"method"},)
)func init() {prometheus.MustRegister(requests)logrus.SetFormatter(&logrus.JSONFormatter{})
}func handler(w http.ResponseWriter, r *http.Request) {requests.WithLabelValues(r.Method).Inc()logrus.WithFields(logrus.Fields{"method": r.Method,"path": r.URL.Path,}).Info("Received request")w.Write([]byte("Hello, World!"))
}func main() {http.HandleFunc("/", handler)http.Handle("/metrics", promhttp.Handler())log.Fatal(http.ListenAndServe(":8080", nil))
}
7. 代码运行流程图
+---------------------+
| HTTP Request |
+----------+----------+|v
+---------------------+
| Request Handler |
+----------+----------+|v
+---------------------+
| Increment Metrics |
| Log Request Info |
+----------+----------+|v
+---------------------+
| HTTP Response |
+---------------------+
8. 总结
在本节内容中,我们通过学习监控与日志管理的概念和工具,掌握了如何在Go语言中实现监控与日志的功能。通过结合Prometheus和Logrus,我们可以有效地收集应用程序的性能指标和日志信息,帮助我们进行性能分析和故障排查。监控与日志管理是构建高可用、高性能应用的核心部分,后续可以根据项目需求选择合适的工具进行深入学习与应用。
怎么样今天的内容还满意吗?再次感谢观众老爷的观看,关注GZH:凡人的AI工具箱,回复666,送您价值199的AI大礼包。最后,祝您早日实现财务自由,还请给个赞,谢谢!
相关文章:
15分钟学 Go 第 46 天 : 监控与日志
第46天:监控与日志 学习目标 了解如何实现应用监控与日志管理,掌握相关工具和最佳实践。 内容结构 引言监控的概念与工具 监控的定义常见监控工具 日志管理的概念与工具 日志的重要性常见日志管理工具 实现监控与日志的最佳实践 监控指标日志格式 实战…...
BFS 算法专题(四):多源 BFS
目录 1. 01 矩阵 1.1 算法原理 1.2 算法代码 2. 飞地的数量 2.1 算法原理 2.2 算法代码 3. 地图中的最高点 3.1 算法原理 3.2 算法代码 4. 地图分析 4.1 算法原理 4.2 算法代码 1. 01 矩阵 . - 力扣(LeetCode) 1.1 算法原理 采用 BFS 正难…...
基于Spring Boot+Vue的养老院管理系统【原创】
一.系统开发工具与环境搭建 1.系统设计开发工具 后端使用Java编程语言的Spring boot框架 项目架构:B/S架构 运行环境:win10/win11、jdk17 前端: 技术:框架Vue.js;UI库:ElementUI; 开发工具&…...
Linux screen和cscope工具使用总结
1 minicom使用 1.1 minicom配置 第一次启动时: 如果输入sudo minicom提示错误,则需: sudo minicom -s 启动 出现配置菜单:选serial port setup 进入串口配置 输入A配置串口驱动为/dev/ttyUSB0 输入E配置速率为115200 8N1 输入F将 …...
深度学习面试八股汇总
按序发布: 深度学习——优化算法、激活函数、归一化、正则化 进入 深度学习——权重初始化、评估指标、梯度消失和梯度爆炸 进入 深度学习——前向传播与反向传播、神经网络(前馈神经网络与反馈神经网络)、常见算法 进入 深度学习——卷积神…...
微服务架构面试内容整理-API 网关-Gateway
Spring Cloud Gateway 是一个用于构建 API 网关的框架,它为微服务架构提供了灵活的路由和过滤功能。作为 Spring Cloud 生态的一部分,Gateway 提供了易于使用的 API 和强大的功能,适合用于现代微服务架构中的请求管理和服务交互。以下是 Spring Cloud Gateway 的主要特点、工…...
22.04Ubuntu---ROS2使用rclcpp编写节点C++
节点需要存在于功能包当中,功能包需要存在于工作空间当中。 所以我们要想创建节点,就要先创建一个工作空间,再创建功能包。 第一步:创建工作空间 mkdir -p chapt2_ws/src/ 第二步:创建example_cpp功能包,…...
XML 现实案例:深入解析与应用
XML 现实案例:深入解析与应用 XML(可扩展标记语言)自1998年成为W3C推荐标准以来,一直是数据交换和存储的重要工具。它是一种用于标记电子文件的结构化语言,使得数据不仅人类可读,而且机器可处理。本文将探讨XML在现实世界中的应用案例,展示其如何在不同领域中发挥作用。…...
Spring源码(十二):Spring MVC之Spring Boot
本篇将详细讨论Spring Boot 的启动/加载、处理请求的具体流程。我们先从一个简单的Spring Boot项目日志开始分析(这里假设读者已经仔细阅读完了前面的文章,且对Spring源码有一定深度的了解,否则会看得一脸懵逼)。 本文为2024重置…...
Kafka 之事务消息
前言: 在分布式消息系统中,事务消息也是一个热门课题,在项目的实际业务场景中,如果用到事务消息的场景也不少见,那 Kafka 作为一个高性能的分布式消息中间件,同样也支持事务消息,本篇我们将对 …...
小菜家教平台(四):基于SpringBoot+Vue打造一站式学习管理系统
前言 昨天配置完了过滤器,权限检验,基本的SpringSecurity功能已经配置的差不多了,今天继续开发,明天可能会暂停一天整理一下需求,然后就进行CRUD了。 今日进度 补充SpringSecurity异常处理和全局异常处理器 详细操作…...
解决 Vue3、Vite 和 TypeScript 开发环境下跨域的问题,实现前后端数据传递
引言 本文介绍如何在开发环境下解决 Vite 前端(端口 3000)和后端(端口 80)之间的跨域问题: 在开发环境中,前端使用的 Vite 端口与后端端口不一致,会产生跨域错误提示: Access to X…...
量化交易系统开发-实时行情自动化交易-3.3.数据采集流程
19年创业做过一年的量化交易但没有成功,作为交易系统的开发人员积累了一些经验,最近想重新研究交易系统,一边整理一边写出来一些思考供大家参考,也希望跟做量化的朋友有更多的交流和合作。 接下来说说数据采集流程,后…...
探索PyAV:Python中的多媒体处理利器
文章目录 探索PyAV:Python中的多媒体处理利器第一部分:背景介绍第二部分:PyAV是什么?第三部分:如何安装PyAV?第四部分:简单的库函数使用方法1. 打开文件2. 查看流3. 遍历帧4. 编码帧5. 关闭输出…...
SpringBoot源码解析(三):启动开始阶段
SpringBoot源码系列文章 SpringBoot源码解析(一):SpringApplication构造方法 SpringBoot源码解析(二):引导上下文DefaultBootstrapContext SpringBoot源码解析(三):启动开始阶段 目录 前言一、入口二、SpringApplicationRunListener1、作用…...
C# const与readonly关键字的区别
在C#中,readonly关键字用于定义在对象创建后不能更改的字段。它可以与常量(const)有些相似,但也有显著不同。以下是readonly关键字的一些关键点: 定义与用法: readonly字段可以在类的构造函数中初始化,而const字段必须…...
【数据分享】1901-2023年我国省市县镇四级的逐年降水数据(免费获取/Shp/Excel格式)
之前我们分享过1901-2023年1km分辨率逐月降水栅格数据和Shp和Excel格式的省市县四级逐月降水数据,原始的逐月降水栅格数据来源于彭守璋学者在国家青藏高原科学数据中心平台上分享的数据!基于逐月数据我们采用求年累计值的方法得到逐年降水栅格数据&#…...
hhdb数据库介绍(9-4)
访问安全 权限体系 计算节点有两类用户,一类是计算节点数据库用户,用于操作数据,执行SELECT,UPDATE,DELETE,INSERT等SQL语句。另一类是关系集群数据库可视化管理平台用户,用于管理配置信息。此…...
苍穹外卖的分层所用到的技术以及工具+jwt令牌流程图(jwt验证)
分层用到的技术以及工具: jwt令牌流程图:...
Python——数列1/2,2/3,3/4,···,n/(n+1)···的一般项为Xn=n/(n+1),当n—>∞时,判断数列{Xn}是否收敛
没注释的源代码 from sympy import * n symbols(n) s n/(n1) print(数列的极限为:,limit(s,n,oo))...
业务系统对接大模型的基础方案:架构设计与关键步骤
业务系统对接大模型:架构设计与关键步骤 在当今数字化转型的浪潮中,大语言模型(LLM)已成为企业提升业务效率和创新能力的关键技术之一。将大模型集成到业务系统中,不仅可以优化用户体验,还能为业务决策提供…...
大数据学习栈记——Neo4j的安装与使用
本文介绍图数据库Neofj的安装与使用,操作系统:Ubuntu24.04,Neofj版本:2025.04.0。 Apt安装 Neofj可以进行官网安装:Neo4j Deployment Center - Graph Database & Analytics 我这里安装是添加软件源的方法 最新版…...
QMC5883L的驱动
简介 本篇文章的代码已经上传到了github上面,开源代码 作为一个电子罗盘模块,我们可以通过I2C从中获取偏航角yaw,相对于六轴陀螺仪的yaw,qmc5883l几乎不会零飘并且成本较低。 参考资料 QMC5883L磁场传感器驱动 QMC5883L磁力计…...
【HTTP三个基础问题】
面试官您好!HTTP是超文本传输协议,是互联网上客户端和服务器之间传输超文本数据(比如文字、图片、音频、视频等)的核心协议,当前互联网应用最广泛的版本是HTTP1.1,它基于经典的C/S模型,也就是客…...
css3笔记 (1) 自用
outline: none 用于移除元素获得焦点时默认的轮廓线 broder:0 用于移除边框 font-size:0 用于设置字体不显示 list-style: none 消除<li> 标签默认样式 margin: xx auto 版心居中 width:100% 通栏 vertical-align 作用于行内元素 / 表格单元格ÿ…...
[免费]微信小程序问卷调查系统(SpringBoot后端+Vue管理端)【论文+源码+SQL脚本】
大家好,我是java1234_小锋老师,看到一个不错的微信小程序问卷调查系统(SpringBoot后端Vue管理端)【论文源码SQL脚本】,分享下哈。 项目视频演示 【免费】微信小程序问卷调查系统(SpringBoot后端Vue管理端) Java毕业设计_哔哩哔哩_bilibili 项…...
Selenium常用函数介绍
目录 一,元素定位 1.1 cssSeector 1.2 xpath 二,操作测试对象 三,窗口 3.1 案例 3.2 窗口切换 3.3 窗口大小 3.4 屏幕截图 3.5 关闭窗口 四,弹窗 五,等待 六,导航 七,文件上传 …...
GitHub 趋势日报 (2025年06月06日)
📊 由 TrendForge 系统生成 | 🌐 https://trendforge.devlive.org/ 🌐 本日报中的项目描述已自动翻译为中文 📈 今日获星趋势图 今日获星趋势图 590 cognee 551 onlook 399 project-based-learning 348 build-your-own-x 320 ne…...
Git常用命令完全指南:从入门到精通
Git常用命令完全指南:从入门到精通 一、基础配置命令 1. 用户信息配置 # 设置全局用户名 git config --global user.name "你的名字"# 设置全局邮箱 git config --global user.email "你的邮箱example.com"# 查看所有配置 git config --list…...
怎么让Comfyui导出的图像不包含工作流信息,
为了数据安全,让Comfyui导出的图像不包含工作流信息,导出的图像就不会拖到comfyui中加载出来工作流。 ComfyUI的目录下node.py 直接移除 pnginfo(推荐) 在 save_images 方法中,删除或注释掉所有与 metadata …...
