1.nginx源码分析--master和worker进程模型
2.Nginx源码阅读(五):启动前的码包准备
3.Nginx源码分析 - 主流程篇 - 全局变量cycle初始化
4.Nginx源码交叉编译-保姆级移植ARM
5.nginx集成ldap
6.linux怎么安装nginx
nginx源码分析--master和worker进程模型
一、Nginx整体架构
正常执行中的码包nginx会有多个进程,其中最基本的码包是master process(主进程)和worker process(工作进程),还可能包括cache相关进程。码包
二、码包核心进程模型
启动nginx的码包1 1源码主进程将充当监控进程,主进程通过fork()产生的码包子进程则充当工作进程。
Nginx也支持单进程模型,码包此时主进程即是码包工作进程,不包含监控进程。码包
核心进程模型框图如下:
master进程
监控进程作为整个进程组与用户的码包交互接口,负责监护进程,码包不处理网络事件,码包不负责业务执行,码包仅通过管理worker进程实现重启服务、码包平滑升级、更换日志文件、配置文件实时生效等功能。
master进程通过sigsuspend()函数调用大部分时间处于挂起状态,直到接收到信号。
master进程通过检查7个标志位来决定ngx_master_process_cycle方法的运行:
sig_atomic_t ngx_reap;
sig_atomic_t ngx_terminate;
sig_atomic_t ngx_quit;
sig_atomic_t ngx_reconfigure;
sig_atomic_t ngx_reopen;
sig_atomic_t ngx_change_binary;
sig_atomic_t ngx_noaccept;
进程中接收到的信号对Nginx框架的意义:
还有一个标志位:ngx_restart,仅在master工作流程中作为标志位使用,与信号无关。
核心代码(ngx_process_cycle.c):
ngx_start_worker_processes函数:
worker进程
worker进程主要负责具体任务逻辑,主要关注与客户端或后端真实服务器之间的连环依赖源码数据可读/可写等I/O交互事件,因此工作进程的阻塞点在select()、epoll_wait()等I/O多路复用函数调用处,等待数据可读/写事件。也可能被新收到的进程信号中断。
master进程如何通知worker进程进行某些工作?采用的是信号。
当收到信号时,信号处理函数ngx_signal_handler()会执行。
对于worker进程的工作方法ngx_worker_process_cycle,它主要关注4个全局标志位:
sig_atomic_t ngx_terminate;//强制关闭进程
sig_atomic_t ngx_quit;//优雅地关闭进程(有唯一一段代码会设置它,就是接受到QUIT信号。ngx_quit只有在首次设置为1时,才会将ngx_exiting置为1)
ngx_uint_t ngx_exiting;//退出进程标志位
sig_atomic_t ngx_reopen;//重新打开所有文件
其中ngx_terminate、ngx_quit、ngx_reopen都将由ngx_signal_handler根据接收到的信号来设置。ngx_exiting标志位仅由ngx_worker_cycle方法在退出时作为标志位使用。
核心代码(ngx_process_cycle.c):
Nginx源码阅读(五):启动前的准备
在 Nginx 启动前,一系列初始化流程和变量设定至关重要。这些准备工作确保 Nginx 正常运行,高效管理资源并优化性能。接下来,我们将分步骤详细介绍 Nginx 启动前的准备过程。1. ngx_os_init 获取系统级资源
ngx_os_init 负责初始化操作系统级资源,将关键参数赋值给全局变量。这些参数包括页面大小、星月系统源码缓存行大小、最大套接字数等。 系统级参数获取依赖于 sysconf 函数,它用于查询系统特定参数,如 CPU 核心数量、内存大小、进程打开的最大文件数等。 _SC_NPROCESSORS_CONF返回 CPU 核心数量,包括不可用核心。
_SC_NPROCESSORS_ONLN返回系统中可用的 CPU 核心数量。
_SC_PAGESIZE表示系统页面大小(字节单位)。
_SC_PHYS_PAGES表示系统物理内存页数。
_SC_OPEN_MAX表示进程可以打开的最大文件数。
_SC_GETPW_R_SIZE_MAX表示 getpwuid_r 函数使用的缓冲区大小限制。
另一个关键函数 ngx_cpuinfo 用于获取 CPU 的 L2 缓存行大小。理解 CPU 缓存级别有助于优化 Nginx 性能。L1 缓存位于 CPU 核心内,是最快的缓存层。
L2 缓存在 CPU 芯片上,但比 L1 缓存距离核心更远。
L3 缓存位于 CPU 外部,速度仅次于内存,但大小较大。
不同 CPU 的nuxt fetch源码缓存大小差异显著,如图所示。L1 和 L2 缓存通常在 CPU 核之间不共享,而 L3 缓存为所有核心共享。 此外,getrlimit 和 setrlimit 函数用于查询和更改进程资源限制。rlimit 结构体参数用于指定资源限制,如最大句柄数,即最大可创建的套接字数量。2. ngx_crc_table_init 初始化 CRC 表
此函数初始化循环冗余校验(CRC)表,确保计算效率。通过将指向校验表格的指针ngx_crc_table_short 对齐至缓存行大小,提高性能。 CRC 是一种用于检测数据传输或保存错误的校验方法。生成的数字附加至数据后,接收端进行验证以确保数据未变。具体原理可参考网络资料。3. ngx_add_inherited_sockets 继承套接字
在平滑升级场景下,ngx_add_inherited_sockets 用于继承原有监听套接字。通过环境变量 NGINX 获取套接字信息,将其加入 init_cycle 的 listening 数组。完成继承后,设置全局变量 ngx_inherited 为 1。 此函数仅在平滑升级过程中使用,通常情况下无需执行。后台模拟源码因此,我们不对该函数进行过多讨论。Nginx源码分析 - 主流程篇 - 全局变量cycle初始化
Nginx的全局初始化过程围绕全局变量“cycle”展开,位于/src/core/cycle.c文件,其数据结构为“ngx_cycle_t”。了解Nginx源码前应掌握cycle全局变量初始化流程。 cycle初始化分为以下步骤: 创建内存池 用于后续分配的所有内存。 拷贝配置文件路径前缀 如“/usr/local/nginx”,存储在cycle->conf_prefix中。 复制Nginx路径前缀 存储于cycle->prefix。 复制配置文件信息 包含文件路径,如“/nginx/conf/nginx.conf”。 复制配置参数信息 初始化路径信息 初始化打开的文件句柄 初始化shared_memory链表 新旧链表比较,保留相同内存,释放不同。 遍历并打开文件列表(如日志、配置文件) 创建并初始化共享内存 比较新旧共享内存,保留或创建。 处理listening数组并开始监听 处理socket监听。 关闭或删除old_cycle资源 关键点在于内存池的创建、配置文件解析、文件句柄与共享内存的初始化、socket监听与资源关闭,整个流程确保Nginx核心组件的初始化完成。Nginx源码交叉编译-保姆级移植ARM
在Ubuntu..7 位系统上,使用arm-linux-gnueabihf-gcc作为交叉编译器,针对arm内核4.1.和恩智浦imx6ul嵌入式平台,进行了一次详细的Nginx源码的交叉编译移植过程。
准备工作包括了下载Nginx(1..0)、pcre(8.)、zlib(1.3.1)和openssl(1.1.1)的最新版本。在编译过程中,作者尝试了openssl的3.0.版本,但遇到编译问题,最终选择1.1.1版本进行编译。
在进入Nginx源码目录后,需要对部分源码进行修改,如移除退出函数并调整size大小。增加PCRE配置后,对Nginx进行配置,如果不需要ssl,应移除相关部分。配置完成后生成Makefile,但在此阶段并未进行编译。
Pcre源码的处理包括切换目录、配置和编译,编译成功且无误。对于openssl(选配),需要确保安装路径设置正确,配置后删除部分Makefile内容,进行编译,可能需要清理缓存以解决编译问题。
在Nginx部分的后续操作中,添加了必要的定义以避免malloc未引用错误,并调整了Makefile以排除之前手动编译的影响。最后进行编译,安装完成后,检查可执行文件类型和大小,进行优化以减少调试信息,使文件减小至2.8M。
测试阶段,将编译后的文件复制到arm设备,通过修改配置文件解决报错后,成功运行并访问测试页面,完成了基础的移植工作。
nginx集成ldap
安装Nginx并集成LDAP服务器,实现对网站进行基于LDAP认证。首先更新软件包列表,执行命令:
sudo apt-get install software-properties-common
接着添加Nginx的PPA源:
sudo add-apt-repository ppa:nginx/stable
更新软件包列表:
sudo apt-get update
安装Nginx:
sudo apt-get install nginx
验证Nginx安装情况:
nginx -V
安装额外的依赖以支持Nginx与LDAP集成:
git clone kvspb/nginx-auth-ldap
将nginx-auth-ldap移动至/usr/local/src目录下:
sudo mv nginx-auth-ldap /usr/local/src
下载Nginx源码:
wget nginx.org/download/nginx-1..1.tar.gz
解压Nginx源码包:
tar -zxvf nginx-1..1.tar.gz
安装Nginx所需的依赖:
apt-get install libpcre3 libpcre3-dev libssl-dev zlib1g-dev libldap2-dev libxml2-dev libxslt1-dev libgd-dev libgeoip-dev build-essential -y
配置Nginx源码以支持LDAP功能:
cd nginx-1..1
./configure --prefix=/usr/share/nginx --conf-path=/etc/nginx/nginx.conf --pat --with-debug --with-pcre-jit --with-mon nginx-core
清理已卸载软件包的依赖:
sudo apt-get --purge autoremove
linux怎么安装nginx
Linux上安装Nginx的步骤: 1. 获取Nginx安装包。 2. 解压安装包并进行配置。 3. 编译安装。 4. 测试并启动Nginx服务。 以下是对每一步的 获取Nginx安装包: 1. 访问Nginx官方网站,下载适用于Linux的最新稳定版Nginx源码包。 2. 也可以通过终端使用命令下载,如使用wget或curl工具从官方镜像站点下载。 解压安装包并进行配置: 1. 使用tar命令解压下载的Nginx源码包。 2. 进入解压后的目录,进行配置。可以使用默认配置,或者根据需求修改配置文件。 3. 如果需要指定安装路径或其他特定配置,可以使用./configure命令进行配置。 编译安装: 1. 在配置完成后,使用make命令进行编译。 2. 编译完成后,使用make install命令进行安装。 测试并启动Nginx服务: 1. 进入Nginx安装目录下的sbin目录。 2. 执行./nginx -t命令测试配置文件是否正确。 3. 如果测试通过,执行./nginx命令启动Nginx服务。 4. 可以通过访问服务器的IP地址和默认的Nginx端口来验证Nginx是否安装成功。 以上就是在Linux上安装Nginx的基本步骤和详细解释。安装过程中可能会遇到一些依赖问题,需要根据具体的Linux发行版和版本进行相应的处理和解决。建议在安装前确保系统已经安装了必要的依赖库和工具。Nginx源码分析 - 主流程篇 - Nginx的启动流程
文章内容包含对Nginx源码的基础理解,以及对其主流程的深入分析。首先介绍了Nginx使用的各种基础数据结构,如pool、buf、array、list等,通过理解这些结构能更加深入地了解Nginx源码。
接下来,文章着重分析了Nginx的启动流程,主要实现函数在./src/core/nginx.c文件中的main()函数。文章展示了main()函数启动过程,并详细解释了几个关键步骤。
第一步,是通过ngx_get_options方法解析外部参数,比如命令行参数 ./nginx -s stop|start|restart。
第二步,初始化全局变量,其中init_cycle在内存池上创建一个默认大小为的全局变量,这一过程在ngx_init_cycle函数中完成,详细的全局变量初始化步骤会在后续的文章中展开。
第三步,通过ngx_save_argv和ngx_process_options保存头部的全局变量定义。
接着,使用ngx_preinit_modules方法对所有模块进行初始化,并给它们打上标号,这一过程在ngx_module.c文件中进行。
再一步,通过ngx_create_pidfile创建PID文件,文件管理在ngx_cycle.c文件中实现。
此外,文章还提到了Nginx中涉及的其他重要模块,指出这些模块的详细解析会在后续的文章中呈现。
总结,文章以实际代码为例,介绍了Nginx启动的全流程,并对关键步骤进行了解释,为读者深入了解Nginx源码奠定了基础。
2024-12-29 01:48
2024-12-29 01:32
2024-12-29 01:25
2024-12-29 01:01
2024-12-29 00:54
2024-12-28 23:37