如何搭建日志监控系统_运维日志监控系统

ELK(,Logstash,Kibana)搭建实时日志分析平台（开源实时日志分析ELK平台部署）

日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷，性能安全性，从而及时采取措施纠正错误。

通常，日志被分散的储存不同的设备上。如果你管理数十上百台服务器，你还在使用依次登录每台机器的传统方法查阅日志。这样是不是感觉很繁琐和效率低下。当务之急我们使用集中化的日志管理，例如：开源的syslog，将所有服务器上的日志收集汇总。

集中化管理日志后，日志的统计和检索又成为一件比较麻烦的事情，一般我们使用grep、awk和wc等Linux命令能实现检索和统计，但是对于要求更高的查询、排序和统计等要求和庞大的机器数量依然使用这样的方法难免有点力不从心。

开源实时日志分析ELK平台能够完美的解决我们上述的问题，ELK由、Logstash和Kiabana三个开源工具组成。官方网站：

85是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。

85Logstash是一个完全开源的工具，他可以对你的日志进行收集、分析，并将其存储供以后使用（如，搜索）。

85kibana也是一个开源和免费的工具，他Kibana可以为Logstash和提供的日志分析友好的Web界面，可以帮助您汇总、分析和搜索重要数据日志。工作原理如下所示：

在需要收集日志的所有服务上部署logstash，作为logstashagent（logstashshipper）用于监控并过滤收集日志，将过滤后的内容发送到logstashindexer，logstashindexer将日志收集在一起交给全文搜索服务，可以用进行自定义搜索通过Kibana来结合自定义搜索进行页面展示。

四大组件：

Logstash:logstashserver端用来搜集日志；

:存储各类日志；

Kibana:web化接口用作查寻和可视化日志；

LogstashForwarder:logstashclient端用来通过lumberjack网络协议发送日志到logstashserver；

开源的运维工具都很难用。商业好些但大部分太庞大也都不太好用，比如北塔。可以用些新的运维设备，比如蚁巡运维平台来方便、统一的监控机房里的设备的运行状况。蚁巡是一台简单实用的运维设备，只需要接入网络，按向导简单配置，就可以使用。蚁巡能自动发现需要监控的网络设备、服务器和服务，主动巡检网络设备、服务器和服务的运行状态，发现业务系统隐患，智能预警，保障业务正常运转。

服务器监控软件和工具可以帮助我们从任何一个地方实时了解服务器的性能和功能。由于复杂的社交网络系统以及我们对于互联网的高度依赖，我们绝不允许那些宝贵的客户因自身系统停运而流失。选用实用的服务器工具和软件是一个明智的决定，能够同时为你带来短期效益和长期效益。下面是10款超实用的服务器监控工具和软件：
1 Simple Server Monitor
Simple Server Monitor是一款成本合理、功能强大、使用方便的服务器监控工具，它会不断监控服务器和Web应用程序的运行状况。
2 Pingdom
Pingdom服务可以监控互联网上多个地方的网站和服务器，确保它们运行正常。你可以使用Pingdom来监控你的公共网站和受密码保护的网站、FTP服务器、电子邮件服务器，以及可以通过互联网来访问的其他各种服务。
3 迈克菲SECURE技术
迈克菲技术可以帮助你应对网上风险。无论你向迈克菲求助是为了扫描安全漏洞、PCI认证还是验证信任标记，它都可以提供简单、有效、成本合理的安全解决方案。
4 interSeptor Pro
interSeptor Pro是一款高级的以太网数据中心和机架监控系统，它可以监控机房和机架的环境状况；而且一旦出现空调系统故障以及可能危及业务连续性的其他情况，就会发出预警警报。
5 AppFirst
AppFirst适用于用任何一门语言编写的每一个应用程序。有了AppFirst，你根本不需要自己的用户告诉你哪里又出了问题。你可以下载这款服务器监控软件的免费试用版。
6 PA Server Monitor
如果在IT部门工作，要处理好工作与生活的关系有些难度。但是PA Server Monitor可以帮助IT人员减轻压力，因为它可以不断监控服务器，同时又不妨碍你处理其他工作。
7 Uptime software
该软件具有虚拟服务器监控、物理服务器监控和云环境监控等功能。这一款服务器监控工具适用于多种平台。可以监控服务、监控应用程序、监控系统资源用量，又没有“企业级”监控工具的那种复杂性。
8 Nimsoft
可以通过监控获得所需的详细信息，以便优化贵企业中重要服务器的性能和可用性。面向服务器的Nimsoft监控解决方案（NMS）支持Windows、iSeries AS400、Netware、Linux和UNIX等 *** 作系统——这一切均借助易于使用的控制台即可实现。NMS可以监控服务器的核心资源（处理器、内存、磁盘、事件日志和计数器等），能够集中管理远程进程和服务（如自动和手动的开始/重启/终止）。你可以下载这款服务器监控工具的免费试用版。
9 Neustar Webmetrics
Webmetrics监控服务让公司企业能够在客户受到影响之前，跟踪、查明、解决和防止Web性能问题。Webmetrics可以测试、监控和测量网站、Web应用程序、Web服务、网络服务和流媒体的性能，从而确保不间断的正常运行时间和性能完整性。
10 Dotcom-Monitor
Dotcom-Monitor是一项高级的网站监控服务，它把监控、报告、通知、上报和分析等功能结合起来，做成最适合贵公司需要的套件，以确保贵公司电子商务的性能和正常运行时间。

众安基于云原生技术构建新一代DevOps实践，其中SERAPH运维监控平台是面向应用的全方位可视化、态势感知监控运维平台，通过自定义监控大屏，将不同监控指标的可视化图表做统一展示，实现面向不同监控场景的开箱即用，并通过统一告警平台，秒级捕获线上故障，使企业实时、精准地捕获业务及IT资源的健康状态，提升运维质量。
监控对象包括应用所依赖的基础设施、容器、中间件、网关，以及应用自身的接口、调用链、前端性能、日志等。可访问官网联系客服试用 >