作为一个Java开发者，尤其是维护线上系统时，问题总是接踵而至。应用突然崩溃、响应慢得像蜗牛、内存泄漏一发不可收拾……你能做的，就是迅速响应，像个老司机一样，第一时间精准找到问题的根源。要知道，生产环境的“掉链子”可不比本地环境那样轻松，线上问题的解决，往往决定了项目的存亡。
本文总结了Java开发者在生产环境中常用的排查命令，涵盖系统资源监控、JVM性能分析、网络问题检测、日志分析等。通过这些命令，你可以迅速定位性能瓶颈、内存泄漏、网络延迟等问题，提升线上问题解决效率。立即学习这些实用技巧，助你成为高效的线上问题排查高手！
Java开发者线上问题排查常用命令
1. top - 系统进程实时监控
# 基本使用，查看系统资源
top
示例：假设你在生产环境中部署了Spring Boot应用，应用出现了响应慢的情况。执行top命令后，你可以看到系统中所有进程的CPU、内存占用情况，快速识别占用系统资源过多的进程。
# 按内存使用排序，找出占用内存最多的进程
top -o %MEM
示例：如果你的Spring Boot应用在内存使用上表现不佳，可能存在内存泄漏问题。使用top -o %MEM，你可以快速排序并找出占用内存最多的进程，快速定位问题。
# 查看特定用户的进程
top -u java_user
示例：当你只关心由java_user用户启动的进程时，使用这个命令可以过滤出该用户的所有Java进程，帮助你聚焦Spring Boot应用。
# 监控特定Spring Boot应用进程，假设你已经知道其PID
top -p $(pgrep -d',' springboot-app)
示例：如果你已经知道Spring Boot应用的PID，可以直接用top -p命令监控该进程的资源使用情况，持续观察它的CPU和内存占用。
2. htop - 增强版系统监控
# 启动htop
htop
示例：htop是top的增强版，提供更友好的界面，支持鼠标操作，能够查看每个CPU核心的使用情况。适用于多核系统，特别是在Spring Boot应用有多个线程时，htop帮助你查看线程级别的资源占用。
3. vmstat - 系统资源统计
# 每2秒输出一次，共10次
vmstat 2 10
示例：如果你怀疑系统资源是性能瓶颈所在，vmstat能够帮助你监控CPU、内存、IO等资源的使用情况。比如，你可以判断是否存在CPU密集型的操作，或者内存和IO成为系统瓶颈。
4. free - 查看内存使用情况
# 显示内存使用情况（易读格式）
free -h
示例：在排查内存问题时，free -h可以帮助你快速了解系统的内存使用情况。你可以看到系统总内存、已用内存、可用内存等信息，判断是否存在内存压力。
# 每3秒更新一次内存使用情况
free -h -s 3
示例：如果你在监控一个长时间运行的Spring Boot应用，想实时查看内存使用变化，可以使用free -h -s 3命令，它每3秒刷新一次，帮助你实时观察内存是否出现异常波动。
5. iostat - IO统计信息
# 查看设备IO统计，每2秒一次，共5次
iostat -xd 2 5
示例：如果你怀疑Spring Boot应用的数据库查询操作占用过多IO资源，使用iostat命令可以查看磁盘的读取和写入情况。通过%util（设备利用率）和await（IO等待时间）等信息，你能确认IO是否成为瓶颈。
JVM监控命令
JVM是Java应用的核心，内存管理、垃圾回收、线程调度等都在JVM层面发生。以下命令帮助你快速排查JVM相关问题。
6. jps - 列出Java进程
# 列出简单的进程信息
jps
示例：假设你在生产环境中部署了多个Spring Boot应用，执行jps命令会列出当前所有Java进程的PID，帮助你快速定位你需要监控的进程。
# 列出完整的包名和进程参数
jps -lvm
示例：当你需要查看Spring Boot应用的启动参数，或者确认某个进程使用的JVM参数时，可以执行jps -lvm，它会列出应用的完整包名和启动时使用的JVM参数。
7. jstat - JVM统计信息监控
# 监控GC情况，每1000毫秒一次，共10次
jstat -gc [pid] 1000 10
示例：对于一个长时间运行的Spring Boot应用，执行jstat -gc能够监控其垃圾回收（GC）的频率和耗时，帮助你判断GC是否对应用性能产生了影响。
# 查看类加载情况
jstat -class [pid]
示例：如果你的应用启动慢，或者内存占用高，可能是类加载出现了问题。通过jstat -class命令，你可以查看JVM加载类的数量和相关信息，帮助你排查类加载是否是瓶颈。
8. jmap - 内存映射
# 查看堆内存使用概况
jmap -heap [pid]
示例：执行jmap -heap可以帮助你查看Spring Boot应用的堆内存使用情况。你可以分析各个内存区域的使用情况，查看是否存在内存过高的风险。
# 查看JVM堆内存的对象统计信息
jmap -histo [pid] | head -20
示例：如果你怀疑内存泄漏问题，可以通过jmap -histo查看堆中的对象统计，找出占用内存最多的对象类型。通过分析这些对象，可以帮助你定位潜在的内存泄漏问题。
# 生成堆转储文件
jmap -dump:format=b,file=heap_dump.hprof [pid]
示例：如果你在生产环境中遇到OutOfMemoryError，可以通过jmap -dump生成堆转储文件。之后可以使用工具如MAT或jhat分析堆转储文件，查找内存泄漏的根源。
9. jstack - 线程堆栈分析
# 生成线程堆栈快照
jstack [pid] > thread_dump.log
示例：当你发现Spring Boot应用卡顿，响应变慢时，执行jstack命令生成线程堆栈快照，帮助你查看线程的执行情况，发现是否存在阻塞或死锁。
# 获取带有锁信息的线程堆栈
jstack -l [pid]
示例：如果你怀疑死锁或者线程竞争问题，可以通过jstack -l生成带锁信息的线程堆栈，分析线程之间的锁竞争情况。
# 检测死锁
jstack -F [pid] | grep -A 30 "Found.*deadlock"
示例：如果Spring Boot应用出现死锁或线程挂起问题，可以执行此命令，快速检测到死锁，并输出相关信息。
10. jinfo - 查看和修改JVM参数
# 查看所有JVM参数
jinfo -flags [pid]
示例：执行jinfo -flags查看当前Java进程的JVM参数。对于Spring Boot应用，你可以确认JVM参数是否正确设置，比如堆内存大小、垃圾回收策略等。
# 查看特定参数值
jinfo -flag MaxHeapSize [pid]
示例：使用此命令，你可以查看JVM的最大堆内存设置，确保内存配置符合你的应用需求。
# 动态修改某些参数
jinfo -flag +HeapDumpOnOutOfMemoryError [pid]
示例：当你想要在应用出现OutOfMemoryError时自动生成堆转储文件，可以使用jinfo -flag命令动态修改JVM参数，这样可以帮助你在生产环境下快速进行内存问题排查。
网络相关命令
网络问题在分布式应用中非常常见，尤其是与数据库、外部API的连接和请求时延。以下命令将帮助你快速定位网络相关的瓶颈。
11. netstat - 网络连接状态
# 查看所有TCP连接
netstat -ant
示例：如果你在部署Spring Boot应用后遇到连接异常，可以使用netstat -ant查看所有TCP连接，帮助你了解当前连接的状态和占用的端口。
# 查看监听端口
netstat -tnlp
示例：当你在生产环境中查看Spring Boot应用的监听端口时，使用netstat -tnlp可以列出所有正在监听的端口，确认应用是否在指定的端口上运行。
# 查看特定进程的网络连接
netstat -anp | grep [pid]
示例：如果你想查看Spring Boot应用所使用的网络连接，可以通过netstat -anp | grep [pid]查看特定进程的网络连接状态，帮助你确认进程是否正常建立了连接。
12. ss - 更快的socket统计
# 显示所有TCP连接
ss -ta
示例：如果你想查看所有TCP连接，ss是netstat的高效替代品。ss -ta将列出所有TCP连接的状态，帮助你了解应用的网络连接情况。
# 查看连接统计
ss -s
示例：通过ss -s，你可以查看连接的统计信息，比如当前的连接数、已关闭的连接数等。这对于发现过多的TIME_WAIT状态连接或者异常连接数很有用。
# 查看特定端口连接
ss -tn sport = :8080
示例：如果你想检查某个端口（比如8080）上的连接状态，可以使用此命令。通过ss，你能够快速查看特定端口的连接情况。
13. lsof - 列出打开的文件
# 查看进程打开的所有文件
lsof -p [pid]
示例：假设你有一个正在运行的Spring Boot应用，并怀疑它是否打开了过多的文件或网络连接，可以使用此命令查看该进程的打开文件和网络连接。
# 查看特定端口使用情况
lsof -i:8080
示例：如果你的Spring Boot应用使用的是8080端口，你可以通过lsof -i:8080查看该端口是否已被占用，帮助排查端口冲突问题。
# 查看所有网络连接
lsof -i
示例：使用lsof -i命令可以查看所有活动的网络连接，包括TCP、UDP等。适用于你需要排查系统网络连接状况时。
14. ping - 网络连通性测试
# 基本使用，测试与远程服务器的连通性
ping www.example.com
示例：假设你有一个依赖外部API的Spring Boot应用，可以通过ping命令测试与外部API服务器的连通性，判断网络连接是否正常。
# 限制发送次数
ping -c 5 www.example.com
示例：你可以使用-c 5来限制ping命令只发送5次请求。这可以帮助你快速检查网络延迟和丢包情况。
15. curl - HTTP请求测试
# 简单GET请求
curl http://localhost:8080/api/status
示例：当你需要检查Spring Boot应用的某个API是否能正常响应时，可以使用curl发起GET请求。通过返回的HTTP状态码和响应内容，你可以了解服务是否正常。
# 带超时控制的请求
curl --connect-timeout 5 -m 10 http://api.example.com
示例：使用curl时，可以设置超时控制，例如：--connect-timeout设置连接超时，-m 10设置总的请求超时时间。通过此命令，你可以测试外部API的响应速度和稳定性。
# POST请求
curl -X POST -d '{"name":"test"}' -H "Content-Type: application/json" http://localhost:8080/api/users
示例：在Spring Boot应用中，如果你需要测试一个POST请求，curl可以帮助你发送JSON数据并查看响应，判断服务是否正常处理请求。
网络数据包分析命令
当网络性能问题复杂或出现不明的延迟时，分析网络数据包非常重要。以下命令能够帮助你捕获并分析网络流量。
16. tcpdump - 网络数据包分析
# 捕获特定端口的数据包
tcpdump -i any port 8080 -n
示例：如果你怀疑Spring Boot应用的某个端口（比如8080）的请求出现延迟，可以使用tcpdump捕获相关的数据包。-i any表示监听所有接口，port 8080过滤出该端口的流量。
# 捕获特定主机的数据包
tcpdump host 192.168.1.100
示例：如果你想监控和某个主机的通信，比如数据库服务器或外部API，可以使用tcpdump host来捕获与该主机的所有数据包。
# 保存数据包到文件
tcpdump -i any -w capture.pcap
示例：执行tcpdump捕获网络数据时，使用-w将数据包保存到文件（例如capture.pcap），然后可以在Wireshark等工具中打开，详细分析网络通信问题。
日志和文件分析命令
在生产环境中，日志是我们排查问题的关键工具。通过日志，你可以快速定位到出错的位置，下面是一些常用的日志分析命令。
17. tail - 查看文件尾部
# 实时查看日志
tail -f app.log
示例：当你部署Spring Boot应用时，可能需要实时查看日志输出。tail -f命令能帮助你持续输出最新的日志，及时捕获错误或警告信息。
# 显示最后100行日志
tail -n 100 app.log
示例：当你只关心最近的100条日志时，可以使用tail -n 100，快速查看最新的日志内容，尤其在排查运行时错误时非常有用。
# 从第1000行开始显示日志
tail -n +1000 app.log
示例：如果你的日志文件很大，想从某个特定行开始查看，可以使用tail -n +1000，它会显示日志文件从第1000行开始的内容。
18. grep - 文本搜索
# 搜索错误日志
grep "ERROR" app.log
示例：当你在排查Spring Boot应用的错误日志时，可以用grep "ERROR"快速过滤出日志中的错误信息，快速定位问题。
# 显示匹配行的前后5行
grep -A 5 -B 5 "OutOfMemoryError" app.log
示例：如果你要查看与特定错误（如OutOfMemoryError）相关的上下文，可以使用grep -A 5 -B 5，显示匹配行的前后5行，帮助你理解发生错误的上下文。
# 递归搜索多个文件
grep -r "Connection refused" /var/log/
示例：当你需要搜索多个日志文件中的某个关键字（例如Connection refused）时，使用grep -r递归地搜索指定目录下的所有文件，帮助你快速找到相关错误日志。
19. awk - 文本处理
# 提取特定列
awk '{print $1, $4}' access.log
示例：假设你想从Spring Boot应用的访问日志中提取IP地址和请求方法，使用awk '{print $1, $4}'可以快速提取出这些信息，帮助你分析访问模式。
# 统计HTTP响应码分布
awk '{print $9}' access.log | sort | uniq -c | sort -nr
示例：如果你想查看日志中不同HTTP响应码的分布情况，使用awk提取出响应码（假设它在第9列），然后使用sort和uniq统计每个响应码出现的次数，帮助你快速分析常见的错误响应。
# 计算平均响应时间
awk '{sum+=$10; count++} END {print sum/count}' access.log
示例：在排查Spring Boot应用响应时间时，使用awk计算访问日志中第10列（假设为响应时间）的平均值，帮助你评估系统性能。
20. sed - 流编辑器
# 替换文本
sed 's/ERROR/CRITICAL/g' app.log
示例：你可以用sed命令替换日志中的文本，比如将ERROR替换成CRITICAL，这样做能让日志中的重要信息更加醒目，方便后续分析。
# 只显示特定行范围
sed -n '1000,2000p' app.log
示例：当你只关心某个日志文件的特定行范围时，sed -n '1000,2000p'可以帮助你显示从第1000行到第2000行的日志内容，适合大文件分析。
21. find - 文件查找
# 查找大文件
find / -type f -size +100M
示例：如果你发现磁盘空间紧张，可以使用find命令查找所有大于100MB的文件，帮助你定位占用大量空间的日志文件或数据文件。
# 查找最近修改的文件
find /var/log -mtime -1 -type f -name "*.log"
示例：如果你想找出最近修改过的日志文件，find /var/log -mtime -1会列出过去一天内修改过的日志文件，帮助你聚焦于最近发生的事件。
# 查找并删除老旧日志文件
find /var/log -name "*.log" -mtime +30 -exec rm {} ;
示例：如果日志文件堆积太多，可以使用find命令查找并删除超过30天未修改的日志文件，释放磁盘空间。
22. du - 磁盘使用统计
# 查看目录大小
du -sh /var/log
示例：如果Spring Boot应用生成了大量的日志文件，占用了过多磁盘空间，使用du -sh可以查看指定目录（如/var/log）的大小，帮助你发现占用空间较大的日志文件夹。
# 按大小排序显示子目录
du -h --max-depth=1 /var | sort -hr
示例：使用du -h --max-depth=1显示/var目录下的各个子目录大小，并通过sort对结果进行排序，找出最大的文件夹，帮助你定位磁盘空间的使用情况。
进程管理命令
对于生产环境中的Java应用，进程管理命令是非常重要的。它能帮助你了解进程状态、管理资源、以及处理异常进程。
23. ps - 进程状态
# 查看所有进程
ps aux
示例：当你怀疑Spring Boot应用的某个进程异常时，可以使用ps aux列出所有进程，并查看CPU、内存占用，帮助你快速发现占用资源异常的进程。
# 查看特定用户的进程
ps -u tomcat
示例：如果你的Spring Boot应用是以tomcat用户启动的，执行此命令能查看该用户下所有进程的状态。
# 按CPU使用率排序
ps aux --sort=-%cpu | head -10
示例：想要找出占用CPU最多的进程？使用这个命令按CPU使用率降序排列，快速找出CPU负载高的进程。
# 按内存使用率排序
ps aux --sort=-%mem | head -10
示例：如果你怀疑Spring Boot应用占用内存过高，可以使用此命令按内存使用率排序，找出占内存最多的进程。
24. pstree - 进程树
# 显示进程树
pstree
示例：pstree命令会显示进程的树状结构，帮助你查看Spring Boot应用与其子进程的关系，适用于排查进程间的父子关系。
# 显示特定进程的进程树
pstree -p [pid]
示例：当你想查看某个特定进程（比如Spring Boot应用）的子进程时，使用pstree -p [pid]可以帮助你查看该进程的所有子进程。
25. kill - 发送信号给进程
# 正常终止进程
kill [pid]
示例：假设你有一个Spring Boot进程卡死或异常，可以通过kill [pid]正常终止该进程，释放系统资源。
# 强制终止进程
kill -9 [pid]
示例：如果普通的kill命令无法终止进程，可以使用kill -9强制终止进程。适用于Spring Boot应用或其他进程无法正常退出的情况。
# 生成Java线程转储
kill -3 [java_pid]
示例：在遇到Java应用卡住或响应慢时，可以使用kill -3命令生成Java进程的线程转储（Thread Dump），用于后续分析线程问题。
26. pkill - 按名称终止进程
# 终止特定名称的进程
pkill java
示例：假设你有多个Java应用正在运行，通过pkill java命令，可以终止所有Java相关的进程，适用于批量操作。
# 向所有Java进程发送SIGTERM信号
pkill -15 java
示例：pkill -15 java向所有名为java的进程发送SIGTERM信号，尝试正常关闭这些进程。
27. pgrep - 查找进程ID
# 查找Java进程ID
pgrep java
示例：当你想查找正在运行的Java进程ID时，可以使用pgrep java，这将返回所有Java进程的PID。
# 查找并显示命令行
pgrep -a java
示例：pgrep -a可以列出匹配的进程及其完整的命令行，适用于你想确认某个Spring Boot应用的启动参数或执行命令。
系统性能分析命令
这些命令有助于分析系统的整体性能，包括CPU、内存、磁盘等资源的使用情况，帮助你在生产环境中深入排查性能瓶颈。
28. sar - 系统活动报告
# 查看CPU使用情况
sar -u 1 5
示例：sar -u命令用来查看CPU使用情况，1表示每秒钟采样一次，5表示采样5次。你可以用它查看CPU的空闲率、使用率，帮助你判断是否存在CPU瓶颈。
# 查看内存使用
sar -r 1 5
示例：sar -r可以帮助你查看内存使用情况，适用于你怀疑系统内存不足，导致Spring Boot应用出现性能下降时。
# 查看磁盘IO
sar -b 1 5
示例：使用sar -b来查看磁盘的IO使用情况，适用于排查磁盘瓶颈，特别是在Spring Boot应用需要大量读写数据库时。
# 查看网络统计
sar -n DEV 1 5
示例：sar -n DEV用来查看网络流量信息，适用于当你怀疑网络延迟或带宽瓶颈时，帮助你定位问题。
29. mpstat - 多处理器统计
# 查看所有CPU核心使用情况
mpstat -P ALL 2 5
示例：mpstat -P ALL可以帮助你查看所有CPU核心的使用情况，特别是多核系统下，你可以检查每个核心的负载，判断是否有某个核心过载。
30. dmesg - 内核消息
# 查看内核消息
dmesg
示例：dmesg命令可以显示系统的内核消息，尤其是在Spring Boot应用崩溃时，内核日志能提供重要的线索，帮助你排查底层硬件或驱动问题。
# 只查看错误和警告
dmesg --level=err,warn
示例：通过dmesg --level=err,warn过滤出错误和警告信息，这对于排查硬件、驱动或者系统级别的异常非常有帮助。
31. strace - 跟踪系统调用
# 跟踪指定进程
strace -p [pid]
示例：strace可以帮助你查看指定进程（如Spring Boot应用）与操作系统的系统调用，适用于调试应用与系统交互的问题。
# 跟踪特定系统调用
strace -e open,read,write -p [pid]
示例：当你怀疑某个Spring Boot应用在文件读写时发生问题，使用strace -e open,read,write来跟踪文件操作。
# 统计系统调用时间和次数
strace -c -p [pid]
示例：如果你需要统计系统调用的时间和次数，strace -c可以帮助你获取这些统计信息，帮助你定位应用性能瓶颈。
32. perf - 性能分析工具
# 记录性能数据
perf record -F 99 -p [pid] -g -- sleep 30
示例：perf是一个性能分析工具，通过perf record命令可以记录Spring Boot应用的性能数据，分析其CPU使用情况、热代码路径等。
# 分析性能数据
perf report
示例：在执行完perf record后，使用perf report来分析记录的性能数据，查看CPU热点、性能瓶颈等信息。
在这篇文章中，我们一起走过了Java开发者最常用的线上问题排查命令——从系统资源监控到JVM分析，再到网络和日志分析。通过这些命令，大家可以高效地定位内存泄漏、GC瓶颈、线程卡顿、网络延迟等各种问题，迅速解决生产环境中的突发故障。
但仅仅了解这些命令还不够，关键在于实践。每个命令都是你的工具，而如何在生产环境中灵活运用这些工具，才是让你从一个开发者成长为技术大佬的关键。未来的你，只要掌握了这些技巧，就能应对各种线上问题，成为团队中不可或缺的“大佬”。
记住，问题的解决离不开经验的积累和工具的应用，快把这些命令加到你的知识库中，随时准备应对生产环境中的挑战。你已经准备好了，开始实践吧！