服务器日志先按症状分类再查看:系统日志看开机、内核与登录,应用日志看程序报错,访问日志看请求与状态码。排障时先定时间窗口,再定位、过滤、对照,全程只读。
要点速览
- 日志分系统、应用、访问三类,先按症状选类别再翻
- 四步查看:定时间窗口、定位置、按关键字级别过滤、多类对照
- 全程只读:不清空、不删除、不随意改日志级别
- 托管服务器提前确认日志外送、带外管理与导出流程
- 日志外发前先脱敏;AI 只做整理与提示,结论由人负责
服务器日志怎么查看,结论是:先按症状判断该看哪一类日志,再去对应的位置读。日志大体分三类。系统日志记录开机、内核、登录和服务启停,在 Linux 上多数可以用 journalctl 或 /var/log 下的 messages、syslog 查看。应用日志记录程序报错和业务异常,放在哪里由程序自己的配置决定。访问日志记录每一次 Web 请求的时间、来源 IP 和状态码,常见于 Nginx、Apache 的日志目录。排障时按四步走:先定时间窗口,再按类别定位文件或 journal,接着按关键字和级别过滤,然后把同一时间点的几类日志放在一起对照。整个过程只读,不清空、不删除、不随意改日志级别。
日志是排障的证据,先分清再翻
服务器出了问题,很多人的第一反应是登录上去,对着 /var/log 整个目录搜一遍 error。这样做往往会得到几千行结果,里面混着几个月前的旧报错、无关服务的告警和正常的调试信息,真正和这次故障相关的那几行反而被淹没了。
日志的作用是证据,不是线索堆。它回答的是「在某个时间点,某个组件做了什么、遇到了什么」。所以查看日志之前,要先想清楚两件事。
- 问题发生在什么时候。用户反馈的时间、监控告警的时间、自己发现的时间,三者可能差出几分钟甚至几小时,要尽量对齐到一个窗口。
- 问题落在哪一层。是整台机器不对劲,是某个程序不对劲,还是只有网站访问不对劲。这一层的判断决定了先看哪一类日志。
另一件容易被忽略的事是日志的归属。系统日志通常归运维管,应用日志归开发团队管,访问日志可能同时被网站、安全和审计部门使用。动手之前先确认这份日志是谁的、能不能动、有没有正在被采集或审计,这和排查 CPU、内存、磁盘问题时先确认进程归属是一个道理。
三类日志分别在哪、看什么
系统日志:机器本身发生了什么
系统日志记录操作系统层面的事件:开机过程、内核消息、硬件报错、用户登录、服务的启动和停止。
- 常见位置。使用 systemd 的 Linux 发行版,大部分系统日志可以通过 journalctl 查看;同时 RHEL 系一般写到 /var/log/messages,Debian 和 Ubuntu 一般写到 /var/log/syslog。登录相关记录在 RHEL 系是 /var/log/secure,在 Debian 系是 /var/log/auth.log。内核消息可以用 dmesg 或 journalctl -k 查看。Windows 服务器则在事件查看器的「Windows 日志」下,分为系统、安全等几个分类。
- 看什么。内核报出的内存不足并杀掉进程、磁盘读写错误、文件系统只读、网卡掉线、服务反复重启、短时间内大量登录失败。
- 对应症状。机器突然重启、某个进程莫名消失、服务起不来、SSH 登录不上或登录记录异常。查上一次启动的日志可以用 journalctl -b -1,适合排查意外重启。
应用日志:程序自己说了什么
应用日志由程序自己写,记录业务逻辑里的报错、异常堆栈、外部依赖调用失败等信息。
- 常见位置。没有统一路径,要看程序的配置文件。常见的有 /var/log 下以程序名命名的目录、程序安装目录下的 logs 子目录。以 systemd 服务方式运行、日志输出到标准输出的程序,可以用 journalctl -u 服务名 查看;容器里的程序通常用 docker logs 容器名 查看。Windows 上部分程序会写到事件查看器的「应用程序」分类。
- 看什么。ERROR、FATAL 级别的条目,异常堆栈,数据库连接失败、调用超时、配置读取失败之类的提示。注意一个故障常常引发一串连锁报错,要找的是时间上起头的那一条,而不是数量多的那一类。
- 对应症状。页面报 500、接口超时、某个功能异常但机器本身看起来正常、定时任务没有执行。
访问日志:外面来了哪些请求
访问日志由 Web 服务器或网关记录,每一次请求一行,是判断「用户到底遇到了什么」的直接依据。
- 常见位置。Nginx 一般在 /var/log/nginx 下的 access.log 和 error.log;Apache 在 /var/log/httpd 或 /var/log/apache2 下;Windows 上的 IIS 一般在 inetpub 目录下的 logs 子目录。实际路径以配置文件为准。
- 看什么。请求时间、来源 IP、请求方法和路径、状态码、返回字节数,如果配置了还会有响应耗时。Nginx 的 error.log 也值得一看,比如上游超时、上游拒绝连接这类提示,往往指向后端应用。
- 对应症状。用户说网站打不开、5xx 状态码突然变多、某个 IP 短时间内大量请求、流量或带宽突然上涨。
把三类放在一起,可以先按下面的对应关系决定从哪里入手:
- 机器重启、进程消失、登录异常:先看系统日志。
- 功能报错、接口失败、任务没跑:先看应用日志。
- 用户访问异常、状态码异常、请求量异常:先看访问日志。
- 说不清是哪一层:从访问日志入手,它能告诉你请求有没有到达、在哪一步失败。
四步查看法:定窗口、定位置、过滤、对照
- 先定时间窗口。根据告警或用户反馈,把范围收窄到前后十几分钟或半小时。确认服务器时区和时间是否准确,日志时间和你手里的时间可能相差几个小时。journalctl 可以用 --since 和 --until 限定时间范围;文本日志可以先用 less 打开,按时间搜索定位。
- 按类别定位文件或 journal。根据上一节的对应关系,选定要看的日志类别,再到配置文件里确认实际路径。注意日志轮转:较早的内容可能已经被切到带数字后缀或压缩成 .gz 的文件里,压缩文件可以用 zless、zgrep 直接读,不需要先解压。
- 按关键字与级别过滤。用 grep 按关键字筛,配合 -i 忽略大小写、-C 显示上下文几行;journalctl 可以用 -p err 只看错误及以上级别,用 -u 只看某个服务。实时观察时可以用 tail -f 跟踪新增内容。过滤的目的是缩小范围,不是只看命中的那一行,命中之后要回到上下文读完整。
- 把同一时间点的多类日志对照。找到关键时间点之后,去另外两类日志里看同一时刻发生了什么。比如访问日志里 10 点 05 分开始出现 502,应用日志里同一时刻有数据库连接超时,系统日志里同一时刻有内核杀进程的记录,三条放在一起,因果链就清楚了。
这四步全部是只读操作。有几件事要特别避免:
- 不清空。不要用重定向把日志文件置空,也不要为了「看得清楚」先清一遍再复现。
- 不删除。不要手动删除日志文件,也不要执行 journal 的清理命令。日志占满磁盘的情况应当按磁盘排查的思路处理,可以参考服务器磁盘满了怎么排查:四步定位,删前先确认归属。
- 不随意改日志级别。临时把级别调成 DEBUG 能看到更多信息,但日志量可能成倍上涨,影响磁盘和性能。确需调整时,先和程序负责人确认,记下原值,排查完按时改回。
- 需要分析时复制一份。要做批量处理或交给别人分析,把相关片段复制到临时目录,原文件保持原样。
日志常常只是排查的起点。如果日志里看到大量超时,同时机器负载偏高,可以接着按服务器CPU占用高怎么排查?四步定位,动手前先确认归属里的步骤往下走。
服务器托管在机房时,日志怎么留、怎么导
服务器放在机房托管,平时远程登录看日志和本地没什么区别,麻烦出在机器出故障、远程连不上的时候。这时本机日志读不到,能用的证据就取决于事先做了哪些安排。以下几项建议在上架前和机房确认清楚。
- 日志另存一份。把系统日志和关键应用日志实时发送到另一台服务器或集中日志服务。这样主机宕机时,宕机前的记录依然可查。另存的位置不要和主机在同一台设备上。
- 带外管理能否使用。服务器的带外管理口可以查看硬件事件日志、打开远程控制台,在系统起不来时尤其有用。要问清机房是否为带外口提供网络、通过什么方式访问、访问权限怎么管。
- 现场协助的流程。远程手段都失效时,可能需要请机房人员到机柜前查看屏幕、拍照或按指示操作。提前约定申请方式、响应时间和操作边界,现场人员只做约定范围内的事。
- 导出方式。大量日志通过网络导出会占用带宽,要考虑时段;用移动介质带出需要走机房的出入和审批流程,先问清手续。
- 留存时长与责任。等保 2.0 对审计日志的留存有相应要求,具体按所在系统的测评要求执行。日志由谁保存、存多久、机房侧能提供哪些记录,建议写进合同或服务说明,签约时可以参考服务器托管合同除了价格还要看什么?签约前五个问题。
还有一件事经常被忽略:日志里往往有敏感信息。账号名、内网和公网 IP、手机号、访问令牌、Cookie、请求参数里的个人信息,都可能出现在应用日志和访问日志里。把日志发给外部厂商、发到工作群,或者粘贴给任何外部工具之前,先做脱敏,替换或删去这些字段。这既是《中华人民共和国数据安全法》和《中华人民共和国个人信息保护法》层面的要求,也是避免排障过程中造成新问题的基本做法。
润迅在深圳自建并运营前海云与田心两处数据中心,托管客户在上架前可以把上面这几项和机房逐条对一遍,出了问题时就不至于手里没有证据。
用 AI 帮着读日志,判断留给人
日志读起来费力,一部分原因是格式各异、报错信息晦涩,另一部分原因是连锁报错太多,一时分不清主次。这类整理和解释的工作,可以交给 AI 辅助。
润迅的 MaxTerm 是一款终端 AI 运维工具,支持 macOS 和 Windows,个人免费。在排查日志时,它能做的事情是:
- 解释日志字段和报错含义,比如某个内核消息或状态码代表什么;
- 把一段混杂的报错归纳成几类,标出时间上靠前的那条;
- 根据现有线索给出下一步排查建议和对应命令。
它给出的命令会先展示出来,由运维人员确认后再执行;日志说明了什么、故障原因是什么、要不要重启或回滚,这些结论和处置由人负责。AI 在这里做的是整理和提示,不替人下判断。交给它的日志片段,同样建议先脱敏。
如果是团队一起用 AI 读日志,还要考虑日志发到了哪个模型。MaxModel 是润迅的模型统一管理平台,用一个 Key 接入多个大模型,可以按场景设置路由,比如把包含内部信息的运维请求固定发往企业自己部署的模型,同时保留调用审计记录,方便事后核查谁在什么时候调用了什么。
行动建议:把查日志变成固定动作
- 写一页日志清单。把每台服务器上三类日志的实际路径、轮转规则、负责人写下来,放进运维手册,出事时不用临时去翻配置。
- 检查时间同步。确认所有服务器时区一致、时间同步正常,否则多类日志对照时会对不上。
- 托管机器配置日志外送。关键服务器的日志另存到另一台设备,并和机房确认带外管理、现场协助和导出流程。
- 约定脱敏规则。明确哪些字段在外发前必须替换,形成团队共识。
- 试用辅助工具。日志阅读量大、报错难读的团队,可以先在个人环境试用 MaxTerm 终端 AI 运维,用一次真实的历史故障日志验证它的归纳和建议是否贴合实际,再决定是否在团队推广。
需要了解服务器托管或 AI 运维工具的具体安排,也可以拨打润迅业务热线 400-854-5566 咨询。
常见问题
Linux服务器日志在哪个目录?
系统日志多数可用 journalctl 查看,RHEL 系在 /var/log/messages,Debian 和 Ubuntu 在 /var/log/syslog;应用日志路径由程序配置决定;Nginx、Apache 的访问日志一般在 /var/log 下对应目录。
服务器报错了应该先看哪个日志?
按症状选:机器重启、进程消失、登录异常先看系统日志;接口报错、功能异常先看应用日志;用户打不开页面、状态码异常先看访问日志。说不清时从访问日志入手。
日志文件太大可以直接删除吗?
不建议直接删除或清空。先确认日志归属和是否在被采集审计,再按磁盘排查思路处理,通过调整轮转和留存规则释放空间,改动前和负责人确认。
服务器托管在机房,宕机后怎么查日志?
本机日志在宕机时往往读不到,建议平时把日志实时另存到另一台设备;同时提前和机房确认带外管理是否可用、现场协助流程和日志导出方式。
可以把服务器日志发给AI分析吗?
可以作为辅助,但发送前先脱敏账号、IP、令牌等信息,并确认日志发往哪个模型。AI 负责解释和归纳,命令执行需人工确认,故障结论与处置由运维人员负责。