网站首页 > 技术文章 正文
在计算机技术的深邃领域,理解程序于操作系统中的加载与运行机制,犹如探索神秘知识宝库。此前已涉 CPU 执行机器码、安全机制与系统调用原理等,现深入 Linux 内核核心,聚焦 x86 - 64 架构的 Linux 系统,揭开程序初始加载与运行的面纱,而 exec 系统调用是关键。
一、聚焦 Linux x86 - 64 缘由
Linux 功能强大且开源,广泛用于桌面、移动端与服务器。其开源性使探究内部机制变得轻松,可直接阅读源代码,本文亦将引用内核代码呈现底层逻辑。x86 - 64 架构是现代桌面计算机主流,承载大量代码运行,此架构下诸多行为机制在其他操作系统和架构也具通用性,仅细节有差异。
二、exec 系统调用:核心枢纽
??在 Linux 程序加载运行流程里,execve? 系统调用至关重要。它依指定路径加载程序,成功后用新程序替换当前进程,开启新执行篇章。虽有 execlp?、execvpe? 等相关系统调用,但都以 execve? 为基础构建,仅参数传递与功能细节侧重不同。深入探究,execve? 基于更通用的 execveat? 系统调用构建,execveat? 能在丰富配置下运行程序,execve? 则为常见场景提供默认设置以提升效率。
?execve? 函数原型如下:
int execve(const char *filename, char *const argv[], char *const envp[]);
- ?filename? 精准指定程序路径,是加载关键指引。
- ?argv? 是以空指针结尾的程序参数列表,为程序提供上下文信息,C 语言 main? 函数中的 argc? 由 execve? 基于 argv? 数组结构计算得出,这是 argv? 以空指针结尾的原因。
- ?envp? 是以空指针结尾的环境变量列表,多以“键 = 值”对构建程序运行环境,但有特殊情况。
程序运行有惯例,通常认为第一个参数是程序名,但这只是编程约定,并非 execve? 强制设定,它只是将 argv? 第一项作程序第一个参数,即便与程序名无关。不过,execve? 内部部分代码会基于 argv[0]? 是程序名假设运作,处理解释型脚本语言时会引发独特行为变化。
三、execve 系统调用底层实现剖析
(一)步骤 0:底层定义与参数传递奥秘
为了透彻理解execve?系统调用在底层的运作机制,我们深入 Linux 内核源代码的世界。在fs/exec.c?文件中,可找到execve?系统调用的底层定义:
SYSCALL_DEFINE3(execve,
const char __user *, filename,
const char __user *const __user *, argv,
const char __user *const __user *, envp)
{
return do_execve(getname(filename), argv, envp);
}
这里的SYSCALL_DEFINE3?是一个用于定义带有 3 个参数的系统调用代码的宏。为何要在宏名称中硬编码参数数量呢?经深入网络探寻,发现这是为修复特定安全漏洞(CVE - 2009 - 0029)而采取的巧妙变通方法。
当execve? 系统调用被触发时,filename?参数率先被传递给getname()?函数。getname()?函数将字符串从用户空间安全地复制到内核空间,并进行细致的使用情况跟踪操作,随后返回一个filename?结构体。该结构体在include/linux/fs.h?中定义如下:
struct filename {
const char *name; /* 指向实际字符串的指针 */
const __user char *uptr; /* 原始的用户空间指针 */
int refcnt;
struct audit_names *aname;
const char iname[];
};
这个结构体如同一个精心设计的信息容器,不仅存储了指向用户空间原始字符串的指针,还包含指向内核空间复制后字符串的新指针,以及用于引用计数和审计的重要字段,确保字符串在不同空间转换过程中的安全性与可追溯性。
在完成filename?参数的处理后,execve?系统调用会调用do_execve()?函数,并将处理后的filename?结构体以及argv?和envp?参数传递给它。而do_execve()?函数又会带着默认参数调用do_execveat_common()?函数。值得一提的是,execveat?系统调用同样会调用do_execveat_common()?函数,只是会传递更多用户提供的选项。
在execveat?系统调用中,一个文件描述符(fd?)参数会被传递给do_execveat_common?函数,此文件描述符如同程序执行的定位钥匙,指定了程序执行时相对的目录位置,即确定程序在文件系统中的查找起点。而在execve?系统调用中,文件描述符参数使用特殊值AT_FDCWD?,这是 Linux 内核中的共享常量,它告知相关函数将路径名解释为相对于当前工作目录的路径。在处理文件描述符的相关函数中,常能看到这样的手动检查代码:if (fd == AT_FDCWD) { /* 特殊代码路径 */ }?,这为程序运行路径的选择提供了智能的分支判断。
(二)步骤 1:核心结构体初始化与关键设置
当程序执行流程流转至do_execveat_common?函数时,便来到了程序执行准备工作的核心环节。此函数承担着多项关键任务,首要任务便是对linux_binprm?结构体进行精心初始化设置。虽不罗列整个结构体复杂的定义(其详细定义位于include/linux/binfmts.h#L15 - L65?),但有几个关键字段值得深入探究。
- ?mm_struct?和vm_area_struct?这两个数据结构在虚拟内存管理领域起着关键作用,它们被巧妙定义和初始化,为即将加载运行的新程序搭建起稳固高效的虚拟内存管理框架,是程序顺利运行的重要基石。
- ?argc?和envc?这两个参数如同程序运行的计数器,会被精确计算并妥善存储在linux_binprm?结构体中,以便在程序启动时准确无误地传递给新程序,确保程序能按预期接收正确的参数信息。
- ?filename?和interp?字段则是程序身份的双重标识,分别存储程序的文件名及其解释器的路径。在程序运行初始阶段,这两个字段值相等,但在运行带有Shebang的解释型脚本时,会发生奇妙变化。例如执行 Python 程序时,filename?指向源文件路径,interp?则变为 Python 解释器路径。
- ?buf?字段是一个长度被定义为BINPRM_BUF_SIZE?的字符数组,其大小为 256 字节(在include/uapi/linux/binfmts.h?中定义:#define BINPRM_BUF_SIZE 256?)。内核会将被执行文件的开头 256 字节加载到此缓冲区中,该缓冲区主要用于文件格式检测以及脚本 Shebang 行的加载,是程序格式识别与脚本处理的重要区域。
这里不得不提及 Linux 内核代码结构中的重要概念——UAPI(用户空间 API)。为何BINPRM_BUF_SIZE的定义不在linux_binprm结构体定义的同一文件(include/linux/binfmts.h)中,而是在include/uapi/linux/binfmts.h文件里呢?这背后蕴含着深刻的设计理念。UAPI 代表“用户空间 API”,意味着此缓冲区长度被视为内核公开 API 的一部分。理论上,所有 UAPI 相关内容都会暴露给用户空间,而非 UAPI 内容则是内核代码私有的。在 2012 年,为提升内核代码的可维护性,UAPI 代码经历了重构,被从杂乱的代码结构中迁移到单独的目录(相关链接)。
(三)步骤 2:二进制格式处理程序遍历与匹配
在do_execveat_common?函数完成linux_binprm?结构体的初始化设置后,内核开启了一段充满挑战与探索的旅程——遍历一系列“binfmt”(二进制格式)处理程序。这些处理程序分布在fs/binfmt_elf.c?、fs/binfmt_flat.c?等不同文件中,并且 Linux 内核的模块机制允许其他内核模块向此处理程序集合添加自己独特的 binfmt 处理程序,这为 Linux 系统支持多样的可执行文件格式提供了强大的扩展性。
每个 binfmt 处理程序都向外提供一个load_binary()?函数,此函数是判断处理程序能否识别并成功处理特定程序格式的关键。当load_binary()?函数被调用时,它会接收初始化好的linux_binprm?结构体作为参数,并通过一系列精密的检测机制来确定自身是否具备处理该程序的能力。
这些检测机制通常包括在linux_binprm?结构体的buf?缓冲区中查找特定的幻数,这些幻数如同可执行文件格式的独特指纹。例如,ELF 格式的可执行文件在开头有特定的字节序列作为幻数标记。同时,处理程序还会尝试对buf?缓冲区中的程序开头部分进行解码,以及检查文件的扩展名等。若一个 binfmt 处理程序通过层层检测,确定能支持该程序格式,它便会为程序的执行精心准备各种环境和资源,最后返回成功代码,表示程序可顺利加载运行。反之,若处理程序判断无法处理该程序格式,它会立即退出并返回错误代码,以便内核尝试下一个 binfmt 处理程序。
内核会依序尝试每个 binfmt 处理程序的load_binary()?函数,直至找到能成功处理的程序为止。在某些复杂情况下,此过程可能会出现递归调用。例如,当一个脚本文件指定了一个解释器,而该解释器本身又是一个脚本文件时,可能会出现binfmt_script? > binfmt_script? > binfmt_elf?这样层层嵌套的层级调用关系,其中 ELF 是最终可执行文件格式在这个复杂链条末端的类型。
四、格式亮点:
(一)脚本文件独特处理
在 Linux 支持的可执行文件格式中,binfmt_script? 格式处理独特且有奥秘。脚本文件开头的 Shebang 行(如 #!/bin/bash?)并非由 shell 程序处理,而是 Linux 内核特性,脚本也通过系统调用来执行。
在 fs/binfmt_script.c? 的 load_script? 函数中,内核检测脚本文件逻辑如下:
if ((bprm->buf[0]!= '#') || (bprm->buf[1]!= '!'))
return -ENOEXEC;
若文件以 Shebang 开头,binfmt_script? 处理程序读取解释器路径及参数,至换行符或 buf? 缓冲区末尾。
此过程有两个有趣点:
- ?linux_binprm? 结构体中的 buf? 缓冲区,原长 128 字节,后因 Shebang 行路径超 128 字符被内核截断问题而翻倍至 256 字节。若现在 Shebang 行超 256 字符,超出部分将丢失,可能引发难排查的 bug。
- 关于 argv[0]? 特殊处理。argv[0]? 作程序名是惯例,binfmt_script? 处理程序假定 argv[0]? 为程序名,会移除并在 argv? 开头添加解释器路径、参数与脚本文件名。如 execve("./script", [ "A", "B", "C" ], []);?,若 script? 文件 Shebang 行为 #!/usr/bin/node --experimental-module?,最终传递给 Node 解释器的 argv? 是 [ "/usr/bin/node", "--experimental-module", "./script", "B", "C" ]?。更新 argv? 后,处理程序设 linux_binprm.interp? 为解释器路径并返回 0 表示准备工作成功。
(二)其他解释器
?binfmt_misc? 处理程序也很有趣,它通过在 /proc/sys/fs/binfmt_misc/? 挂载特殊文件系统,实现用户空间配置添加有限格式能力。程序可对该目录文件写入特定格式来添加处理程序,每个配置项指定:
- 检测文件格式方式,如特定偏移量处幻数或文件扩展名。
- 解释器可执行文件路径,因无法指定解释器参数,需编写包装脚本实现。
- 一些配置标志,包括指定 binfmt_misc? 如何更新 argv? 的标志。
此系统常被 Java 安装程序使用,可配置检测类文件(通过 0xCAFEBABE? 幻数)与 JAR 文件(通过扩展名),特定系统还可能配置检测 Python 字节码(通过 .pyc? 扩展名)并传递给相应处理程序,为程序安装者添加文件格式支持提供便捷强大方式。
六、最终结果:exec 系统调用两种归宿
?exec? 系统调用最终有两种结果:
- 成功找到可识别的可执行二进制格式,可能经多层脚本解释器解析后运行代码,旧代码被替换,开启新执行流程。
- 尝试所有选项后未找到匹配处理程序,返回错误代码表示程序加载运行失败。
类 Unix 系统用户可能注意到,无 Shebang 行或 .sh? 扩展名的 shell 脚本也能从终端正常执行,如:
$ echo "echo hello" >./file
$ chmod +x./file
$./file
hello
这并非内核固有功能,而是 shell 处理 exec? 系统调用失败的常见策略。当 shell 执行文件且 exec? 系统调用因 [ENOEXEC]? 错误失败时,多数 shell 会重新尝试将文件作为 shell 脚本执行,以文件名作第一个参数执行 shell。如 Bash 通常用自身作解释器,ZSH 用 sh? 对应的解释器(通常是 Bourne shell)。
此行为因 POSIX 规定而常见,POSIX 虽多数工具或操作系统未严格遵循其细则,但许多惯例仍被广泛沿用成行业默认规范。从技术原理看,此机制是程序执行的“故障转移”防线,常规路径受阻时仍可尝试继续运行程序。
在软件开发与系统运维中,理解此行为原理意义重大。开发人员编写跨平台脚本或程序时,需考虑不同系统 exec? 系统调用与脚本执行差异,避免因系统特定行为致潜在错误或不一致。系统运维人员了解 exec? 系统调用完整流程与 shell 处理失败机制,有助于排查故障与优化性能,快速定位问题根源。
深入探究 exec? 系统调用这类基础机制,能助我们更好理解 Linux 系统运行原理,为软件开发、系统管理与跨平台兼容性等工作提供理论与实践指导,技术开发者与运维工程师都应透彻掌握以应对复杂技术挑战。
- 上一篇: C语言的入口函数
- 下一篇: z3 solver 可满足性模理论求解器
猜你喜欢
- 2025-01-08 嵌入式中,日志调试法的一些规则!
- 2025-01-08 一行代码改进:Logtail的多行日志采集性能提升7倍的奥秘
- 2025-01-08 嵌入式大杂烩周记 第 7 期:zlog
- 2025-01-08 C语言总结:C语言字符串练习题(十二种习题示例)
- 2025-01-08 C语言100题集合027-二维数组的经典案例,非常重要
- 2025-01-08 一个例子让你看清线程调度的随机性
- 2025-01-08 C++17:结构化绑定
- 2025-01-08 C语言中main函数详解
- 2025-01-08 64TB硬盘容量测试程序(C++)
- 2025-01-08 使用CyberRT写第一个代码
- 02-21走进git时代, 你该怎么玩?_gits
- 02-21GitHub是什么?它可不仅仅是云中的Git版本控制器
- 02-21Git常用操作总结_git基本用法
- 02-21为什么互联网巨头使用Git而放弃SVN?(含核心命令与原理)
- 02-21Git 高级用法,喜欢就拿去用_git基本用法
- 02-21Git常用命令和Git团队使用规范指南
- 02-21总结几个常用的Git命令的使用方法
- 02-21Git工作原理和常用指令_git原理详解
- 最近发表
- 标签列表
-
- cmd/c (57)
- c++中::是什么意思 (57)
- sqlset (59)
- ps可以打开pdf格式吗 (58)
- phprequire_once (61)
- localstorage.removeitem (74)
- routermode (59)
- vector线程安全吗 (70)
- & (66)
- java (73)
- org.redisson (64)
- log.warn (60)
- cannotinstantiatethetype (62)
- js数组插入 (83)
- resttemplateokhttp (59)
- gormwherein (64)
- linux删除一个文件夹 (65)
- mac安装java (72)
- reader.onload (61)
- outofmemoryerror是什么意思 (64)
- flask文件上传 (63)
- eacces (67)
- 查看mysql是否启动 (70)
- java是值传递还是引用传递 (58)
- 无效的列索引 (74)