1.SNMP Exporter详细解析（1）
2.请具体介绍一下 SNMP4J-Agent ，SNMP4J，SNMP4J-AgentX
3.linux下SNMP的源码安装配置
4.net-SNMP简介
5.TCP/IP详解卷1：协议目录
6.基于Prometheus + Grafana搭建IT监控报警最佳实践(2)

SNMP Exporter详细解析（1）

       SNMP协议

       SNMP协议，在此不做过多介绍，详解详情可参阅华为对SNMP协议的源码介绍。

       support.huawei.com/ente...

       具体RFC文档如下：SNMP相关的详解RFC很多，可根据实际需求查看，源码但在本文中不需要深入探讨。详解源码牛贝

       rfc2cn.com/rfc.html

       SNMP的源码组织结构

       SNMP由三部分组成：SNMP内核、管理信息结构SMI和管理信息库MIB。详解

       SNMP内核负责协议结构分析，源码根据分析结果执行网管动作；SMI是详解一种通用规则，用于命名对象、源码定义对象类型，详解以及编码对象和对象值；MIB在被管理实体中创建命名对象，源码即一个实例。详解SMI规定游戏规则，源码在规则基础上由MIB实现实例化，而SNMP则是实例化的终极执行BOSS。

       常见术语：

       企业码：组成OID对象的厂商遵守的标识

       iana.org/assignments/en...

       比如华为的企业码：

       SMI编号结构

       iana.org/assignments/sm...

       如果需要深入研究SNMP协议，建议阅读TCP/IP详解卷1：协议

       MIB介绍

       MIB全称Management Information Base，其主要负责为所有的被管理网络节点建立一个接口，本质上类似于IP地址的一串数字。例如，在使用SNMP时，我们经常看到这样一组数字串：

       在这串数字中，每个数字都代表一个节点，其含义可参考下表：

       显然，这个数字串可以直接理解为系统的名字。在实际使用中，我们将其作为参数读取该节点的值，如果有写权限的话还可以更改该节点的值，因此，SNMP为系统管理员提供了一套极为便利的工具。但在一般使用中，我们一般不使用这种节点的表达方式，而是使用更为容易理解的方式，对于上面的例子，其往往可以使用SNMPv2-MIB::sysName.0所替代。堪称绝品源码你可能会想，系统能理解它的含义吗？那你就多虑了，一般在下载SNMP工具包的时候还会下载一个MIB文件包，其提供了所有节点的树形结构。在该结构中可以方便地查找对应的替换表达。

       NetSNMP介绍

       NetSNMP是一个简单的SNMP协议library库，提供支持SNMP的一套应用程序和开发库，包括代理端软件和管理端查询工具。通俗地理解，SNMP可以看作是一个C/S结构。在客户机中，一般会部署一个snmpd的守护进程，而在服务端（管理端）会下载一个SNMP工具包，这个包中包含了许多用于管理客户端网络节点的工具，例如get、set、translate等等。下图可能会帮助你更清晰地理解这个概念：

       上图中，表示的是双方进行通信时所用的默认端口号，被管理端会打开一个守护进程，负责监听端口发来的请求；管理端会提供一个SNMP工具包，利用工具包中的命令可以向被管理端的端口发送请求包，以获取响应。除此之外，管理端还会开启一个SNMPTrapd守护进程，用于接受被管理端向自己的端口发送来的snmptrap请求，这一机制主要用于被管理端的自动报警中，一旦被管理端的某个节点出现故障，系统会自动发送snmptrap包，从而远端的系统管理员可以及时得知问题。

       我们在Linux中，针对SNMP协议的操作（解析MIB文件）主要依赖这个NetSNMP库，相当于中间代理人的角色，下面我简单画出关于NetSNMP和SNMP Exporter以及配置生成器之间的关系。Telegraf默认支持NetSNMP和gosmi，默认使用gosmi，twrf指标源码而SNMP Exporter默认使用NetSNMP的库，暂不支持gosmi。

       SNMP Exporter读取snmp.yml配置文件信息，snmp.yml配置文件中定义了需要采集指标的OID信息和数据类型以及结构，但是有一点需要明确，手写snmp.yml是一个吃力不讨好的事情，对工程师非常不友好，那工具开发者其实也是想到了这一点，故提供了一套SNMP Exporter配置文件生成器工具，可以通过配置文件生成器生成自己需要的自定义的snmp.yml配置文件，通过自己自定义指标可以得到相关指标数据，然后在通过数据做可视化和监控告警。

       SNMP Exporter默认使用GET BULK遍历数据，NetSNMP有实现对给定管理树进行遍历的工具，如snmpbulkwalk、snmpbulkget等等。

       snmpbulkwalk和snmpwalk的区别：

       snmpwalk是一个逐步遍历的工具，它会从指定的根OID（对象标识符）开始，按照字典序逐步获取下一个OID的值，直到遍历完整个MIB树或者达到指定的终止条件。这意味着snmpwalk逐步获取每个OID的值，一个接一个。

       snmpbulkwalk是一种更为高效的遍历工具，它使用了SNMP的BulkWalk操作，允许一次性获取多个OID的值，减少了往返的SNMP请求次数。这使得snmpbulkwalk在获取大量数据时更为高效。

       SNMP Exporter如果使用SNMP v1版本，默认使用的是snmpwalk，如果使用的是SNMP v2c版本或v3，默认使用snmpbulkwalk。

       SNMP Exporter部署

       SNMP Exporter采集器目前只支持snmpd 端口，暂不支持snmptrapd即端口，端口可自行修改哦，建议使用默认端口。

       SNMP Exporter推荐使用源码包编译安装使用，呼吸指标源码在这里我主要介绍两种部署安装方式，源码编译安装和Docker Compose部署。

       Docker Compose部署

       新建初始化挂载目录：

       创建compose.yml，并启动SNMP Exporter，Docker引擎安装可前往改篇文章查看具体步骤：

       启动

       源码编译安装

       主要介绍CentOS 7.9系统和Ubuntu ..2 LTS中部署SNMP Exporter

       到此就完成了SNMP Exporter源码编译安装。

       添加systemd服务管理

       如果为了安全，需要使用普通用户执行，可以新建普通用户snmp_exporter

       SNMP Exporter配置生成器部署

       上面已经完成SNMP Exporter的部署，前面说了，手写snmp.yml是非常不友好的。

       故我们需要一款配置生成工具进行配置生成，只需要我们填写一些关键的信息即可得到我们想要的配置文件，比如想要采集交换机的指标，采集无线网络AC和AP的指标，其他SNMP协议设备指标。

       SNMP Exporter提供了一套这样的配置生成器工具，接下来就来看下如何部署，其实SNMP Exporter主要难点就是在处理配置生成工具和协调mib库上。

       部署SNMP Exporter配置生成器

       CentOS 7.9系统会出现curl版本太低导致make generator mibs错误的问题

       运行过程说明：

       配置生成器从generator.yml中读取简化的收集指令并把相应的配置写入snmp.yml。snmp_exporter可二进制执行文件仅使用snmp.yml文件从开启了snmp的设备收集数据。

       示例：

       args参数解析

       示例：

       flags参数解析

       --snmp.mibopts的作用：

       这个参数具体什么作用呢？主要解决的是有些mib库文件中，某些厂商并没有按照默认标准来，而是在MIB文件中使用了特殊符号，我们应该指定MIB解析的参数，比如某些MIB文件描述中有下划线_，那么如果使用某个指标去解析这个库应该是失败的，需要添加--snmp.mibopts=u，允许使用下划线。

       目录规划

       建议不同类型的设备都有一个目录，其中包含不同设备类型的mibs目录、生成器可执行文件和generator.yml配置文件。这是为了避免MIB定义中的名称空间冲突。仅在设备的mibs目录中保留所需的MIB文件。

       下一篇以实际案例讲解具体场景，包括如何规划目录，如何生成配置，头像签名源码上述参数如何具体使用。

请具体介绍一下 SNMP4J-Agent ，SNMP4J，SNMP4J-AgentX

       SNMP4J是用于java开发网管系统，通过SNMP协议访问设备的。

       SNMP4J-Agent是用于开发SNMP Agent程序的，是别人通过SNMP协议来访问你的Agent，你的Agent为别人提供数据，另外，这个API的License是Apachae 2.0，所以可以免费使用且不用公开源码。

       SNMP4J-AgentX跟SNMP4J-Agent的区别就在于License是GPL，需要购买Commercial License或是公开源码。

       è¯¦æƒ…请看两种License官方文档。

linux下SNMP的安装配置

       以redhat的安装配置为例：

       编译和安装

       首先我们需要下载Net-SNMP的源代码，选择一个版本，比如最新版5.7.1，地址如下 ：

       -snmp-5.7.1.tar.gz

       然后通过configure来生成编译规则，如下：

       cd net-snmp-5.7.1

       ./configure --prefix=/usr/local/snmp --with-mib-modules=ucd-snmp/diskio --with-default-snmp-version="3"

       --with-mib-modules=ucd-snmp/diskio 选项，可以让服务器支持磁盘I/O监控。

       --with-default-snmp-version 选项，是默认装V3版本

       --with-sys-location 位置

       --with-sys-contact 联系人

       --with-logfile 日志文件目录

       --with-persistent-directory

       接下来，开始编译和安装

       make make install

       到现在为止，我们已经有了可以运行的SNMP代理程序，它位于/usr/local/snmp/sbin/snmpd，在启动它之前，我们还要进行一些必要的设置

       配置V3版本

       拷贝源码包下面的EXAMPLE.CONF 到=/usr/local/snmp/share/snmp/snmpd.conf

       cp /home/net-snmp-5.7.1/EXAMPLE.conf /usr/local/snmp/share/snmp/snmpd.conf

       修改snmpd.conf文件

       rouser unimas auth

       注意：添加用户时，请确保snmp服务没有运行，否则无法添加。

       可以看到，在v3中，“rouser”用于表示只读帐号类型，随后的“jiankongbao”是指定的用户名，后边的“auth”指明需要验证。

       createUser unimas MD5 mypassword

       这行配置的意思是创建一个名为“unimas ”的用户，密码为“mypassword”，并且用MD5进行加密传输。这里要提醒的是：

       密码至少要有8个字节

       cp /usr/local/snmp/share/snmp/snmpd.conf /var/net-snmp/snmpd.conf

       设置net-snmp的环境变量

       设置环境变量 在/etc/profile文件下追加

       PATH=/usr/local/snmp/bin:/usr/local/snmp/sbin:$PATH

       export PATH

       添加到启动文件

       在/etc/rc.local文件末尾追加

       /usr/local/snmp/sbin/snmpd -c /usr/local/snmp/share/snmp/snmpd.conf

       重新启动net-snmp服务

       /usr/local/snmp/sbin/snmpd -c /usr/local/snmp/share/snmp/snmp.conf

       或者用service snmpd stop

       service snmpd start

       测试

       /usr/local/snmp/bin/snmpwalk -v 3 -l authNoPriv -a MD5 -u unimas -A hzhz .0.0.1: sysDescr

       正常的话会出现

       SNMPv2-MIB::sysDescr.0 = STRING: Linux localhost.localdomain 2.6.-.el5 #1 SMP Fri Jul :: EDT x_

       测试/usr/local/snmp/bin/snmpwalk -v 3 -l authNoPriv -a MD5 -u unimas -A hzhz .0.0.1: if

       回出现网卡等信息

       表示安装配置成功

net-SNMP简介

       Net-SNMP是一个免费、开源的SNMP实现，原名UCD-SNMP。它包含agent和多种管理工具的源代码，支持多种扩展方式，不仅扩展了数据获取方式，还对数据类型进行了扩展。

       Net-SNMP不仅提供管理工具，还提供了一些开发配置工具，这些工具大多使用Perl语言的脚本提供，如mib2c、net-snmp-config等。这些工具使得开发者在进行开发时更加便捷。

       随着技术的发展，Net-SNMP也在不断更新迭代，例如在年1月日，Net-SNMP 5.6.1.1版本发布。这一版本的发布，标志着Net-SNMP在功能上又有了新的突破，为用户提供更加全面、高效的数据管理解决方案。

       Net-SNMP的特点在于其强大的功能和灵活的扩展性，使其在SNMP实现中具有极高的竞争力。无论是用于数据获取还是数据类型扩展，Net-SNMP都能提供高效、稳定的解决方案。同时，Net-SNMP的开源特性，使得其在社区中得到了广泛的认可和支持，其用户群体也在不断壮大。

       总的来说，Net-SNMP是一个功能强大、灵活扩展、高效稳定且开源的SNMP实现。随着其不断迭代更新，Net-SNMP在数据管理领域的应用将越来越广泛，为用户带来更多的便利和价值。

TCP/IP详解卷1：协议目录

       译者序

       前言

       第1章 概述1

       第2章 链路层

       第3章 IP：网际协议

       第4章 ARP：地址解析协议

       第5章 RARP：逆地址解析协议

       第6章 ICMP：Internet控制报文协议

       第7章 Ping程序

       第8章 Traceroute程序

       第9章 IP选路

       第章 动态选路协议

       第章 UDP：用户数据报协议

       第章 广播和多播

       第章 IGMP：Internet组管理协议

       第章 DNS：域名系统

       第章 TFTP：简单文件传送协议

       第章 BOOTP: 引导程序协议

       第章 TCP：传输控制协议

       第章 TCP连接的建立与终止

       第章 TCP的交互数据流

       第章 TCP的成块数据流

       第章 TCP的超时与重传

       第章 TCP的坚持定时器

       第章 TCP的保活定时器

       第章 TCP的未来和性能

       第章 SNMP：简单网络管理协议

       第章 Telnet和Rlogin：远程登录

       第章 FTP：文件传送协议

       第章 SMTP：简单邮件传送协议

       第章 网络文件系统

       第章 其他的TCP/IP应用程序

       附录A tcpdump程序

       附录B 计算机时钟

       附录C sock程序

       附录D 部分习题的解答

       附录E 配置选项

       附录F 可以免费获得的源代码

       参考文献

       缩略语

基于Prometheus + Grafana搭建IT监控报警最佳实践(2)

       见字如面，大家好，我是小斐。延续前文，本文将深入探讨Prometheus和Grafana的监控体系。

       首先，我们需要打开Prometheus和Grafana进行操作，访问地址分别为：...:/ 和 ...:/。

       以node_exporter数据采集器为例，先确保其已安装于需要监控的主机。若要获取...主机的状态数据，需在该主机安装node_exporter采集器。

       在prometheus.yml中添加需要抓取的目标源信息，具体操作为：在scrape_configs下添加job_name，指定静态目标，添加...:目标。

       配置文件配置完成后，由于是静态的，需要重新加载配置文件，重启Prometheus以生效。

       在targets中查看是否已抓取到目标，根据上图可见，...的主机节点数据已抓取到。在Prometheus中验证数据正确性，点击http://...:/metrics 可查看抓取的所有数据。

       查看数据信息，输入node_memory_MemTotal_bytes查询该主机内存数据是否正确，可以看到G总内存，与我本机内存相符，说明数据正确。

       至此，我们可以确定数据抓取是成功的。

       数据生成大屏数据UI，展示放在Grafana中，打开Grafana：http://...:/，点击数据源：关联Prometheus数据源。

       输入Prometheus的地址：http://...:，下载Grafana的面板，json模版可在Grafana官网模版库中找到。在此，我选择了一个模版，具体链接为：Linux主机详情 | Grafana Labs。

       添加模版：点击import，导入下载下来的json文件。

       或者根据ID来加载。如果对面板数据和展示的风格不适用，可单独编辑变量和数据查询语句，关于Grafana的变量和数据查询语句后续单独开篇说明，在此只采用通用的模版展示数据。

       关于SNMP数据采集，我们可以通过SNMP协议来监控交换机、路由器等网络硬件设备。在一台Linux主机上，我们可以使用snmpwalk命令来访问设备通过SNMP协议暴露的数据。

       简单查看后，我们需要长期监控，这个时候就要借助SNMP Exporter这个工具了。SNMP Exporter是Prometheus开源的一个支持SNMP协议的采集器。

       下载docker image使用如下命令，使用中请切换对应的版本。如果使用二进制文件部署，下载地址如下。

       对于SNMP Exporter的使用来说，配置文件比较重要，配置文件中根据硬件的MIB文件生成了OID的映射关系。以Cisco交换机为例，在官方GitHub上下载最新的snmp.yml文件。

       关于采集的监控项是在walk字段下，如果要新增监控项，写在walk项下。我新增了交换机的CPU和内存信息。

       在Linux系统中使用Docker来运行SNMP Exporter可以使用如下脚本。

       在Linux系统部署二进制文件，使用系统的Systemd来控制服务启停，系统服务文件可以这么写。该脚本源自官方提供的脚本，相比于官方脚本增加了SNMP Exporter运行端口的指定。

       运行好以后，我们可以访问http://localhost:来查看启动的SNMP Exporter，页面上会显示Target、Module、Submit、Config这几个选项和按钮。

       在Target中填写交换机的地址，Module里选择对应的模块，然后点击Submit，这样可以查到对应的监控指标，来验证采集是否成功。

       target可以填写需要采集的交换机IP，模块就是snmp.yml文件中命名的模块。

       点击Config会显示当前snmp.yml的配置内容。

       如果上面验证没有问题，那么我们就可以配置Prometheus进行采集了。

       配置好Prometheus以后启动Prometheus服务，就可以查到Cisco交换机的监控信息了。

       接下来就Prometheus配置告警规则，Grafana进行画图了。这些操作和其他组件并无区别，就不再赘述。

       关于手动生成snmp.yml配置文件，当官方配置里没有支持某些设备时，我们需要通过MIB文件来自己生成配置文件。

       以华为交换机为例，在单独的CentOS7.9的一台虚拟机中部署snmp_exporter，在这里我以源码编译部署。

       在此我贴出generator.yml文件的模版：模块中，if_mib是指思科模块提供公共模块，HZHUAWEI是我自定义的模块名，根据walk下的OID和变量下的mib库文件路径生成snmp.yml配置文件，然后根据snmp.yml配置文件采集交换机信息。

       generator.yml文件格式说明：参考官网。

       这次我贴一份比较完整的snmpv3版本的模版：参考网络上，后续我内部的完整模版贴出来，形成最佳实践。

       主要的消耗时间就是想清楚需要采集的交换机监控指标信息，并到官网找到OID，贴到generator.yml文件中，最后执行./generator generate命令遍历OID形成snmp.yml配置文件，启动snmp_exporter时指定新形成的snmp.yml文件路径。

       启动后在浏览器中，打开http://...5:/。

       在此需要说明下，交换机需要开启snmp使能。如内部交换机比较多，可采用python或者ansible批量部署snmp使能，python这块可学习下@弈心 @朱嘉盛老哥的教程，上手快并通俗易懂，ansible后续我会单独出一套针对华为设备的教程，可关注下。

       一般情况下，交换机都是有多台，甚至几百上千台，在如此多的设备需要监控采集数据，需要指定不同模块和不同配置文件进行加载采集的，下面简单介绍下多机器部署采集。

       编辑prometheus.yml文件，snmp_device.yml的内容参照如下格式即可。我在下面的示例中添加了architecture与model等变量，这些变量Prometheus获取目标信息时，会作为目标的标签与目标绑定。

       重启服务器或重加载配置文件即可，后续贴出我的实际配置文件。

       此篇到此结束，下篇重点说明配置文件细节和我目前实践的配置文件讲解。