Linux AppArmor出现拒绝日志后,如何定位被拦截的程序与权限规则?

发布人:A5数据发布时间:2026-10-31 09:51阅读量:77

看到业务进程突然无法读取配置、写入缓存、创建临时文件,或服务日志中出现 Permission denied 时,内核日志里可能同时出现 AppArmor 拒绝记录。定位的关键不是直接修改文件权限,而是先确认三件事:哪个 AppArmor profile 拦截了请求、哪个进程在什么时间访问了哪个对象、当前规则拒绝的是哪一种权限。

通常可以从 journalctl -k、发行版的内核日志文件和 auditd 日志中找到原始记录,再使用 profile、pid、comm、name、operation、requested_mask 和 denied_mask 等字段关联到服务、进程和规则文件。确认访问意图后,再选择补充最小权限、修正 profile 绑定,或处理程序本身路径和运行身份不一致的问题。

先确认拒绝事件是否真实存在

检查系统与 AppArmor 状态

排查前先确认系统版本、AppArmor 是否启用,以及相关 profile 处于强制模式还是投诉模式。以下命令只读取状态,不会修改配置:

cat /etc/os-release

sudo systemctl is-active apparmor
sudo aa-status

预期情况下,systemctl is-active apparmor 返回 active,aa-status 会列出已加载的 profile 数量,并分别显示 enforce mode、complain mode 或未加载的 profile。

如果 AppArmor 服务未运行,通常不会产生新的强制拒绝日志;此时看到的旧日志可能来自更早的启动周期。若 aa-status 命令不存在,可能是管理工具包未安装,但内核功能和 profile 文件仍可能存在,应先根据发行版安装对应的 AppArmor 工具包,而不是直接判断为“没有 AppArmor”。

如果 profile 处于 complain mode,日志中可能出现 apparmor="ALLOWED",表示事件被记录但没有真正阻断。此时业务表面上可以继续运行,但日志仍能反映 profile 缺少哪些规则。ALLOWED 和 DENIED 不应混为一谈。

优先查看内核日志

AppArmor 的拒绝事件由内核产生,第一检查点通常是 systemd journal:

sudo journalctl -k -o short-iso-precise \
  --since "2025-03-08 14:00:00" \
  --until "2025-03-08 14:30:00" \
  | grep -E 'apparmor="(DENIED|ALLOWED)"'

上面的日期和时间只是示例,应替换为业务异常发生前后的一段窗口。排查时建议前后各保留几分钟到十几分钟,避免只看报错发生的单秒,错过进程启动、配置加载或子进程切换 profile 的相关事件。

在使用传统日志文件的系统上,可以继续检查:

sudo grep -h 'apparmor="DENIED"' \
  /var/log/kern.log \
  /var/log/messages \
  /var/log/syslog \
  /var/log/audit/audit.log \
  2>/dev/null

不同发行版的文件不一定同时存在。/var/log/kern.log、/var/log/messages 或 /var/log/syslog 往往由 rsyslog 写入,/var/log/audit/audit.log 则需要 auditd。日志文件为空不代表没有事件,可能是日志已经轮转、系统只保留 journal,或当前用户无权读取。

如果怀疑事件发生在更早的启动周期,还可以查看其他 boot:

sudo journalctl --list-boots
sudo journalctl -k -b -1 -o short-iso-precise \
  | grep 'apparmor="DENIED"'

dmesg 只适合补充查看当前内核环形缓冲区:

sudo dmesg --ctime | grep 'apparmor="DENIED"'

它可能受内核日志级别、缓冲区大小或权限限制影响,不能替代 journal 和 auditd 作为长期证据。

auditd 已启用时查看结构化记录

如果系统安装并运行了 auditd,可以用审计查询工具筛选 AppArmor 对应的 AVC 记录:

sudo ausearch -m AVC -ts today -i | grep 'apparmor='

若 ausearch 没有结果,应回到原始文件确认是否存在 type=1400:

sudo grep -h 'type=1400.*apparmor=' \
  /var/log/audit/audit.log \
  /var/log/audit/audit.log.* \
  2>/dev/null

有些系统只把 AppArmor 事件写入 journal,有些系统同时写入 auditd。不要因为其中一个位置没有记录,就跳过其他日志源。

从日志字段定位被拦截的程序

先读懂一条拒绝日志

下面是一条用于说明字段含义的示例记录,内容不是某台实际服务器的采集结果:

从日志字段定位被拦截的程序 / 先读懂一条拒绝日志配图

Mar 08 14:22:31 host kernel: audit: type=1400 audit(1741424551.217:821): apparmor="DENIED" operation="open" class="file" profile="/usr/sbin/reportd" name="/var/lib/reportd/state.db" pid=2184 comm="reportd" requested_mask="rw" denied_mask="w" fsuid=997 ouid=997

定位时重点关注以下字段:

字段含义判断用途
apparmor事件结果DENIED 表示被阻断,ALLOWED 通常表示投诉模式下记录但未阻断
operation内核执行的操作区分打开文件、执行程序、创建目录、映射内存、网络访问或能力请求
class访问对象类型常见有 file,也可能涉及网络、信号、能力等
profile发生限制的 AppArmor profile这是规则上下文,不一定等于可执行文件的完整路径
name被访问的对象文件、目录、套接字、能力名称等,需结合 operation 解释
pid产生事件的进程 ID可用于关联当前进程,但不能长期依赖已结束进程的 PID
comm进程短名称便于初步识别,通常不是完整启动命令
requested_mask进程请求的权限集合表示本次操作需要哪些权限
denied_mask实际被拒绝的权限集合应优先按此字段判断需要补充什么权限
fsuid文件系统身份 UID用于判断 owner 规则是否匹配
ouid目标对象所有者 UID辅助判断文件属主和 owner 条件

例如示例中 requested_mask="rw"、denied_mask="w",说明进程请求读写,但实际被拒绝的是写入。此时不应机械地把规则扩大成所有权限,首先要确认程序是否确实需要修改 state.db。

comm="reportd" 只能说明内核记录的进程短名称,不足以确认程序来自哪个包、哪个服务或哪个容器。真正的规则上下文由 profile 指示,完整进程路径还要结合 /proc、systemd 服务定义或容器运行时信息。

通过 PID 关联完整命令和可执行文件

如果事件发生后进程仍在运行,可以立即查询 PID:

PID=2184

ps -o pid,ppid,user,group,comm,args,etime -p "$PID"
sudo readlink -f "/proc/$PID/exe"
sudo tr '\0' ' ' < "/proc/$PID/cmdline"
printf '\n'
sudo cat "/proc/$PID/cgroup"

这些结果分别帮助确认:

  • ps:进程的父进程、运行用户、短名称、完整参数和已运行时间;
  • /proc/PID/exe:实际执行文件路径;
  • /proc/PID/cmdline:启动参数,例如配置文件、工作目录或子模式;
  • /proc/PID/cgroup:进程属于哪个 systemd unit、容器或其他控制组。

如果 /proc/2184 已经不存在,说明进程退出或 PID 被回收。此时不能根据后来启动的另一个进程继续推断,因为 PID 可能已被复用。应改查服务日志、审计日志中的 exe 字段,并通过服务管理器确认启动来源:

sudo systemctl status reportd.service --no-pager
sudo systemctl show reportd.service \
  -p MainPID -p User -p Group -p ExecStart -p FragmentPath
sudo systemctl cat reportd.service

如果 profile="/usr/sbin/reportd",但 systemd 的 ExecStart 实际运行的是 /opt/reportd/bin/reportd,不要立即认为日志异常。profile 名称可能由规则文件显式指定,也可能是通过可执行文件路径自动附加。此时要继续检查 profile 的定义和程序启动时是否发生了 profile transition。

处理服务、子进程和容器的关联

一个服务启动的工作进程可能与 systemd 主进程名称不同。例如,Web 服务可能由一个主进程派生多个 worker,拒绝事件中的 comm 只显示 worker 名称。应使用 ppid 和 cgroup 向上关联,而不是仅按进程名搜索。

如果日志中的 profile 是 docker-default、自定义容器 profile 或其他运行时 profile,说明被限制的对象可能是容器内的进程。此时先在宿主机确认容器和进程的映射:

sudo docker ps --no-trunc
sudo docker inspect <容器名称或ID> \
  --format '{{.Name}} {{.Config.Image}} {{.HostConfig.SecurityOpt}}'

容器场景中,日志的 name 需要结合挂载关系解释。容器内的 /var/lib/app/data 可能对应宿主机的某个 bind mount,也可能是容器自身文件系统。不要看到路径后直接在宿主机上修改同名目录,更不要先执行宽泛的 chmod -R 777。

通过时间线判断一次访问的完整过程

统一 journal、audit 和业务日志的时间

定位 AppArmor 时,单条拒绝日志往往只能说明“访问被拦截”,时间线才能说明它是否导致业务失败。建议同时保留三类事件:

  1. 业务日志中的请求、任务或错误时间;
  2. AppArmor 内核日志中的拒绝时间;
  3. systemd、auditd 或进程启动日志中的进程状态变化。

journal 使用带时区的精确时间输出:

sudo journalctl -o short-iso-precise \
  --since "2025-03-08 14:20:00" \
  --until "2025-03-08 14:25:00" \
  -u reportd.service

审计日志中的时间可能写成:

audit(1741424551.217:821)

其中前面的数字通常是 Unix 时间戳,后面的 .217 表示小数部分。可以转换成主机本地时间:

date -d @1741424551 '+%F %T %z'

如果主机、容器或集中式日志系统使用不同的时区,必须先确认日志展示时区。否则可能把前后相差数小时的事件错误关联到一起。

按请求链查找第一条拒绝

一项文件操作可能触发多条拒绝。例如程序先访问目录、再打开配置文件,或者先查找父目录、再创建临时文件。可以按 PID、profile 或目标路径提取窗口内的记录:

sudo journalctl -k -o short-iso-precise \
  --since "2025-03-08 14:20:00" \
  --until "2025-03-08 14:25:00" \
  | grep -E 'apparmor="DENIED".*(pid=2184|profile="/usr/sbin/reportd")'

判断时优先关注最早出现的拒绝:

  • 第一条拒绝发生后,业务请求立即失败,通常是直接原因;
  • 第一条拒绝来自配置读取,后面的缓存、日志或临时文件拒绝可能只是连锁结果;
  • 同一个 PID 出现多个不同 profile,可能发生了子 profile、change_profile 或执行转换;
  • 拒绝发生在服务启动很久之前,则可能属于另一个请求或健康检查,不能只凭时间相近就认定因果关系。

如果拒绝后业务仍然成功,可能是程序有备用路径、捕获异常后降级运行,或者事件来自投诉模式。此时要同时查看 apparmor 结果、服务返回状态和后续业务日志。

从 profile 反查具体权限规则

找到 profile 对应的规则文件

profile 字段不是一定等于 /etc/apparmor.d 下的文件名。例如日志可能显示:

profile="/usr/sbin/reportd"

而文件实际可能是:

/etc/apparmor.d/usr.sbin.reportd

先列出加载状态,再搜索 profile 名称和目标路径:

sudo aa-status

sudo grep -RnsE 'reportd|/var/lib/reportd/state.db' \
  /etc/apparmor.d \
  2>/dev/null

还要检查本地覆盖目录和被 include 的文件:

sudo find /etc/apparmor.d -maxdepth 3 -type f \
  \( -path '*/local/*' -o -name 'usr.sbin.reportd' \) \
  -print

很多发行版把发行商提供的主 profile 与管理员自定义规则分开管理,例如主文件包含:

#include <local/usr.sbin.reportd>

如果存在这种 include,优先把经过确认的本地规则放入对应的 local 文件,避免直接修改软件包提供的主文件。若没有 local include,则要先确认该 profile 的维护方式,不能凭文件名创建一个同名文件覆盖原有配置。

按操作类型解释权限

AppArmor 不是简单的“文件可读或不可读”开关,operation 与权限掩码共同决定排查方向。

日志特征重点含义常见核对内容
operation="open",denied_mask="r"打开文件时缺少读取权限配置文件路径、父目录遍历、运行用户
denied_mask="w"缺少写入权限数据目录、临时目录、文件属主和程序写入意图
denied_mask="a"追加写入被拒绝日志文件、队列文件是否只需要追加
denied_mask="m" 或 file_mmap内存映射相关权限不足动态库、数据库文件或共享内存访问
operation="exec"执行其他程序被拒绝目标程序规则、执行转换和 profile 继承方式
operation="capable"Linux capability 被拒绝name 中的能力是否真的由程序需要
operation="create"、mkdir、unlink创建、目录或删除操作被拒绝目录写权限、文件创建位置、清理策略
operation="socket_create" 或网络相关操作套接字行为被限制协议族、类型、服务功能和网络规则
operation="signal"、ptrace进程间控制行为被限制发送信号、调试或监控是否为预期行为

文件访问中常见的权限字母包括 r、w、a、k、m 等,但不能把日志中的 w 直接理解为“整个目录树都应可写”。目录列举、目录遍历、创建文件和删除文件是不同意图,应根据程序实际动作细分。

还要注意以下匹配条件:

  • name 是目标对象,不代表父目录规则自动覆盖所有子路径;
  • 父目录逐级遍历可能需要相应的目录访问权限;
  • 使用 owner 限定的规则只对符合所有者条件的文件或进程生效;
  • profile 中的 deny 规则可能覆盖看似存在的允许规则;
  • operation="capable" 不能通过增加文件路径规则解决;
  • 子进程可能已经切换到另一个 profile,必须以日志中的实际 profile 为准。

判断是缺规则还是规则未生效

如果日志中的 profile 与预期服务不一致,优先排查 profile 绑定问题,而不是添加权限。例如:

  • 服务实际运行的是另一个可执行文件;
  • 规则只覆盖了主进程,worker 或子进程进入了不同 profile;
  • 服务重启后加载了新 profile,但旧进程仍持有旧限制;
  • 容器运行时使用了默认 profile,而管理员修改的是宿主机服务 profile;
  • 规则写在未被 include 的文件中;
  • profile 处于 complain 或未加载状态,看到的日志与当前配置不是同一状态。

可以检查 profile 文件是否包含目标路径:

sudo grep -RnsE '(^|[[:space:]])/var/lib/reportd|state\.db|include.*local' \
  /etc/apparmor.d \
  2>/dev/null

这条命令只能帮助定位文本,不代表规则已经成功加载。最终还要以 aa-status、AppArmor 服务日志和复测结果为准。

根据结果选择处理分支

分支一:程序确实需要该访问,但 profile 缺少最小规则

如果确认以下条件同时成立:

若服务 profile 与业务所需访问均确认、路径和身份未发生变化且不存在更合适目录,则进入“补充精确的最小规则”;若路径或身份变化,进入“先核对配置、挂载、属

  • profile 确实属于目标服务;
  • name 是业务需要访问的路径;
  • operation 与程序功能一致;
  • 运行用户、路径和部署方式没有变化;
  • 不存在更合适的配置目录或临时目录;

才考虑补充最小规则。

例如程序只需要读取固定配置,可以使用精确路径:

/etc/reportd/reportd.conf r,

如果程序需要写入自己的数据目录,应根据实际文件范围设计规则,而不是直接放开整个根目录。下面只是规则形态示例,具体目录遍历和文件权限需要结合日志及 profile 语法校验:

/var/lib/reportd/ r,
/var/lib/reportd/state.db rw,
/var/lib/reportd/cache/** rw,

若只有运行用户创建的文件需要写入,可以评估 owner 限定:

owner /var/lib/reportd/cache/** rw,

使用 owner 前必须核对 fsuid、服务的 User= 配置以及文件实际属主。否则规则文本看起来正确,实际仍然不会匹配。

分支二:访问路径或运行身份发生变化

如果程序从 /var/lib/reportd 改为 /data/reportd,或 systemd 服务从 root 改成普通用户运行,拒绝日志可能是部署变化的结果。此时应先确认应用配置、挂载点、目录属主和启动参数,再决定修改 profile。

可以只读检查文件和目录权限:

name=/var/lib/reportd/state.db

sudo namei -l "$name"
sudo stat "$name"
sudo stat -c '%A %a %U:%G %u:%g %n' \
  /var/lib/reportd \
  "$name"

如果 Unix 权限本身已经不允许访问,AppArmor 规则即使允许也不能解决问题;反过来,Unix 权限允许访问也不代表 AppArmor 一定允许。两层控制需要分别验证,不能用修改 chmod 的方式替代 AppArmor 规则设计。

分支三:profile 或进程与预期不符

如果拒绝记录来自未知进程、异常路径或不应访问敏感文件的服务,应先按安全事件处理:

  • 保留原始日志和时间线;
  • 确认进程的完整可执行路径、软件包来源和父进程;
  • 检查 systemd unit、定时任务、容器启动参数和近期变更;
  • 暂停扩大权限,必要时隔离异常服务并按内部安全流程取证。

不要因为某个进程“需要继续运行”就把拒绝路径加入 profile。错误的 profile 绑定可能让异常程序获得本不属于它的访问范围。

分支四:日志显示 ALLOWED 或 profile 处于 complain

如果 aa-status 显示目标 profile 在 complain mode,日志中的允许事件只能作为规则候选参考,不能证明强制模式一定正常。应先确认为什么进入投诉模式,是否是临时调试遗留。

生产环境不建议长期依赖 complain mode。若确实需要在隔离环境收集完整访问行为,应限定时间、限定单个 profile,并在复测后恢复强制模式。切换模式会改变安全边界,操作前应保留当前状态和 profile 备份。

分支五:找不到 AppArmor 拒绝

如果业务报错,但日志窗口内没有 apparmor="DENIED",不要继续修改 profile。常见原因包括:

  • 实际是 Unix 文件权限、ACL、SELinux 或应用自身校验失败;
  • 访问发生在另一个主机、容器或节点;
  • 日志已经轮转或被集中日志系统延迟收集;
  • 查询时间使用了错误时区;
  • 进程处于未加载 profile 或非 AppArmor 控制范围;
  • 业务错误发生在 AppArmor 拒绝之前。

此时应回到业务日志、namei、stat、服务启动参数和系统调用层面的证据,避免把所有 Permission denied 都归因于 AppArmor。

修改规则前的低风险准备

在变更 profile 前,先记录当前状态并备份将要修改的文件。以下示例中的 profile 文件名必须替换为实际文件,不要直接照抄:

PROFILE_FILE=/etc/apparmor.d/usr.sbin.reportd
BACKUP_FILE="${PROFILE_FILE}.bak.$(date +%Y%m%d%H%M%S)"

sudo test -f "$PROFILE_FILE"
sudo cp -a "$PROFILE_FILE" "$BACKUP_FILE"

sudo aa-status > "/tmp/aa-status.before.$(date +%Y%m%d%H%M%S)"

备份的作用是保留可回滚版本,不代表可以随意覆盖发行版配置。若规则位于 /etc/apparmor.d/local/,还应单独备份对应 local 文件。

如果使用 aa-logprof,它会根据日志提出规则建议:

sudo aa-logprof

逐条审阅建议时,重点看它是否:

  • 把单个文件扩大成整个目录树;
  • 把只读访问扩大成读写;
  • 把某次异常路径当成长期业务路径;
  • 为 capability、网络或执行权限生成了过宽规则;
  • 把访问加入了错误的 profile;
  • 忽略了 owner、子 profile 或程序切换路径。

aa-logprof 的建议不是自动批准结果。对于包含用户输入、上传文件、缓存文件或临时文件的路径,尤其要避免为了消除日志而添加宽泛的 /** rw。

重新加载与回滚

修改完成后,优先只重新加载 AppArmor 配置,不要在没有必要时重启整台主机或停止全部业务服务。不同发行版的服务单元行为可能有差异,先执行:

sudo systemctl reload apparmor
sudo aa-status
sudo journalctl -u apparmor --since "5 minutes ago" --no-pager

如果 reload 报语法错误,通常不会得到预期的新配置。此时先查看错误位置,不要继续反复加载。可以用发行版提供的 parser 检查和加载单个 profile;具体参数以本机帮助为准:

apparmor_parser --help | sed -n '1,120p'

确认修改后的 profile 已加载、目标 profile 仍处于预期模式后,再进行一次能够稳定复现的业务操作。

如果新规则导致更多异常,按备份回滚:

PROFILE_FILE=/etc/apparmor.d/usr.sbin.reportd
BACKUP_FILE=/etc/apparmor.d/usr.sbin.reportd.bak.20250308143000

sudo cp -a "$BACKUP_FILE" "$PROFILE_FILE"
sudo systemctl reload apparmor
sudo aa-status

回滚命令会覆盖当前 profile 文件,执行前必须确认 BACKUP_FILE 是对应主机、对应版本的备份。若修改的是 local 文件,应恢复对应的 local 备份,而不是用主 profile 覆盖它。

不要使用以下方式“验证修复”:

  • 全局停止 AppArmor;
  • 长期把所有 profile 切换到 complain mode;
  • 对业务目录执行 chmod -R 777;
  • 添加根目录或整个文件系统的读写规则;
  • 未备份就直接覆盖发行版维护的 profile;
  • 仅看到日志减少,就认为业务和安全边界都已正确。

复测与持续观察

复测时要使用与原故障相同的操作路径,例如同一个 systemd 服务、同一个运行用户、同一种请求参数和同一个目标文件。先记录复测开始时间,再同时观察服务和内核日志:

START_TIME="$(date '+%Y-%m-%d %H:%M:%S')"
echo "retest started at: $START_TIME"

sudo journalctl -k -f -o short-iso-precise

在另一个终端执行一次可控的业务操作,完成后停止 journalctl -f。如果不方便实时跟踪,也可以按明确时间窗口查询:

sudo journalctl -k -o short-iso-precise \
  --since "2025-03-08 14:30:00" \
  --until "2025-03-08 14:35:00" \
  | grep 'apparmor='

成功验证至少应同时满足:

  • 目标业务操作成功;
  • 同一 profile、同一 operation 和同一 name 不再出现 DENIED;
  • 没有因为修复一个路径而新增更宽泛的拒绝或允许事件;
  • profile 仍处于预期的 enforce 模式;
  • 服务重启后规则仍然加载;
  • 其他不相关服务没有获得额外访问权限。

对于偶发任务、定时任务和高峰期才触发的路径,复测不能只做一次。可以在接下来几个业务周期内继续按 profile 和服务筛选日志:

sudo journalctl -k --since "1 hour ago" \
  | grep 'apparmor="DENIED"' \
  | sort

如果拒绝数量下降但没有归零,应按 profile、name 和 operation 分组,确认剩余事件是未覆盖的真实业务需求、异常访问,还是程序已经切换到备用路径。经过一段时间观察后,再清理无效备份和临时诊断配置,并把最终的 profile 变更、验证时间、回滚版本和适用服务记录到变更文档中。

运行受 AppArmor 保护的业务服务,底层服务器资源也是部署环境的一部分。A5idc数据提供香港、美国、日本等地区的物理服务器租用,涵盖 Xeon Gold、AMD EPYC 等平台及 SSD、NVMe 存储配置,可用于承载网站、业务后台、数据库和接口服务,为不同业务部署提供硬件与地域资源选择。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/6683.html

相关推荐