nginx日志切割(nginx日志切割模块)

nginx日志切割

我的回答：nginx要学习好多天。

可以学习nginx日志切割、反向代理、正则表达式等内容，工作中会用到。

nginx日志切割模块

你好，为你推荐LNMP一键部署脚本，下载后，解压，直接执行即可安装。无需其他操作。

LNMP一键安装包是什么?

LNMP一键安装包是一个用Linux Shell编写的可以为CentOS/RHEL/Fedora/Aliyun/Amazon、Debian/Ubuntu/Raspbian/Deepin/Mint Linux VPS或独立主机安装LNMP(Nginx/MySQL/PHP)、LNMPA(Nginx/MySQL/PHP/Apache)、LAMP(Apache/MySQL/PHP)生产环境的Shell程序。

为什么需要它?

编译安装需要输入大量的命令，如果是配置生产环境需要耗费大量的时间。 不会Linux的站长或Linux新手想使用Linux作为生产环境……

有什么优势和功能?

无需一个一个的输入命令，无需值守，编译安装优化编译参数，提高性能，解决不必要的软件间依赖，特别针对配置自动优化。 支持自定义Nginx、PHP编译参数及网站和数据库目录、支持生成LetseEcrypt证书、LNMP模式支持多PHP版本、支持单独安装Nginx/MySQL/MariaDB/Pureftpd服务器，同时提供一些实用的辅助工具如：虚拟主机管理、FTP用户管理、Nginx、MySQL/MariaDB、PHP的升级、常用缓存组件Redis/Xcache等的安装、重置MySQL root密码、502自动重启、日志切割、SSH防护DenyHosts/Fail2Ban、备份等许多实用脚本。

如何获取?

你可以自由 下载 并使用它在VPS或独立服务器上，做为真正的生产环境或测试环境。 我们为什么采用LNMP这种架构? 采用Linux、PHP、MySQL的优点我们不必多说。

Nginx是一个小巧而高效的Linux下的Web服务器软件，是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的，已经在一些俄罗斯的大型网站上运行多年，目前很多国内外的门户网站、行业网站也都在是使用Nginx，相当的稳定。 Nginx相当的稳定、功能丰富、安装配置简单、低系统资源……

脚本下载地址：

完整版： http://soft.vpser.net/lnmp/lnmp1.6-full.tar.gz 文件大小：676MB

MD5：dfc551508ec32bd21ff41e7795b37708

nginx日志切割脚本没生效

linux常用命令有哪些？

1. 路径和显示的命令：

cd

pwd

ls

ls -l 可以缩写为ll，该命令是用来查看指定目录下对象的详细属性的。

2. 文件、文件夹相关的操作命令：

·mkdir 创建文件夹。

·rmdir 删除空的文件夹的，基本被淘汰。

·rm

·touch 创建一个空的文件。

基本格式：touch 文件名

示例： touch test.txt

表示在当前目录下创建一个空文件，叫test.txt

touch /opt/test.txt

表示在/opt目录下创建一个空文件，叫test.txt

3·vim 可以缩写为vi，该命令是用来创建或者编辑一个文件的。

基本格式：vi 文件名

注意事项：

·vi只能针对文件来进行操作，如果vi的对象是一个已经存在的文件夹，则最终无法保存所编辑的内容。

·vi中鼠标是没有任何用的，光标的移动是通过上下左右方向键，回车键和PageDown、PageUp等来实现的。

3. 常用的vi子命令有：

:q 退出，适用于没有对文档进行任何修改的情况下。

:q! 强制退出不保存。

:wq 退出并且保存。

:wq！文件名 强制退出，并且将当前内容另存到指定的文件中。

dd 删除光标所在的整行

x 删除光标所在的字符

gg 移动光标到整个文档的最后一行

:N N是正整数，表示将光标移动到指定的行。

4.·编辑模式：在该模式下，所有键盘的输入都是纯粹的字符串，相当于在记事本中输入一样。

5.模式的切换和对应的特征：

命令模式下， 按i或者a或者s都可以切换到编辑模式。

一般来说，编辑模式就是vi界面的左下角出现“--insert--”这样的提示串。

编辑模式下，按ESC键就可以切换到命令模式。

6. 常见问题：linux下文件名和文件夹名能否重复？后缀名是否有用？

·不论是windows还是linux，同一个目录下，是不允许出现同名的对象。

·在linux下，文件的后缀名是没有任何意义的，一般来说，后缀名只是用来起到标识作用，当然，后缀名除了标识作用，一定程度上也考虑了和windows的兼容性。

·cp 用来实现复制粘贴操作。

基本语法格式：

格式1：

cp 源对象 目标对象

表示将源对象复制粘贴为目标对象。

示例：

cp a.txt d.txt

表示将当前目录下的a.txt复制到当前目录下，重命名为d.txt。

·mv 该命令是用来实现剪切粘贴的操作。

该命令的语法格式和cp命令基本一致。

·ln 该命令是用来创建链接对象的。

在linux中，链接分为硬链接和软链接。

默认创建的是硬链接。

-s 该属性表示创建的是软链接。

·文件内容的查看：

常用的命令有：

cat

more

less

head

Tail

常见的退出方式：

·CTRL+C 强制中止当前正在执行的命令。

·ESC

·Q

·QUIT

·EXIT

对象的查找：

find：

基本格式：

find 查找范围 参数 参数值

示例：

find / -name a.txt

表示在根目录下查找名字叫a.txt的对象。

文本内容、字符串的查找：

grep 该命令是支持正则表达式方式，在指定对象中查找符合条件的字符串或者行的。

基本格式：

grep [参数] [正则表达式] 对象

示例：

grep "a" a.txt

表示输出a.txt中所有包含字符a的行。

·ls 查看命令

基本格式：ls [对象]

表示查看对象或者对象下的所有对象的信息。

重要属性：

-l

查看详细属性

权限相关的命令：

在linux系统中，存在用户和用户组的概念。

·useradd 用来添加用户

示例：useradd test1

表示添加一个新的用户，叫test1.

·passwd 用来修改指定用户的密码

示例：passwd test1

通过交互式的方式来修改test1的密码

PS：如果passwd后不跟用户名，则表示修改的是当前登录的用户的密码。

在linux中，用户配置信息都是记录在系统文件/etc/passwd中的。

·userdel 用来删除用户

建议使用属性-r。

·groupadd 添加用户组

·groupdel 删除用户组

权限：

在linux中，用户对于对象的权限有三种：分别为

r 可读

w 可写

x 可执行

chmod 直接修改对象的权限，即直接修改这9个字符。

基本格式：

chmod 权限表达式 对象名 [-R]

·权限表达式，在linux中，权限的表示方式有两种：

·字符：

rwx 可读可写可执行

u 表示所有者

g 表示所属组

o 表示其它人

= 表示赋值

+ 表示加权限

- 表示减少权限。

例子：chmod u=rw a.txt

表示将a.txt的所有者的权限修改为可读可写。

其他操作：

·history 显示历史输入命令

！N N表示历史命令的编号

该命令表示执行历史命令列表中的第N条命令。

·clear 清理屏幕的输出。

·TAB键 是用来补全路径或者文件名的。

nginx日志切割 windows

日志对于统计排错来说非常有利的。本文总结了nginx日志相关的配置如access_log、log_format、open_log_file_cache、log_not_found、log_subrequest、rewrite_log、error_log。

nginx有一个非常灵活的日志记录模式。每个级别的配置可以有各自独立的访问日志。日志格式通过log_format命令来定义。ngx_http_log_module是用来定义请求日志格式的。

1. access_log指令

语法: access_log path [format [buffer=size [flush=time]]];

access_log path format gzip[=level] [buffer=size] [flush=time];

access_log syslog:server=address[,parameter=value] [format];

access_log off;

默认值: access_log logs/access.log combined;

配置段: http, server, location, if in location, limit_except

gzip压缩等级。

buffer设置内存缓存区大小。

flush保存在缓存区中的最长时间。

不记录日志：access_log off;

使用默认combined格式记录日志：access_log logs/access.log 或 access_log logs/access.log combined;

2. log_format指令

语法: log_format name string …;

默认值: log_format combined “…”;

配置段: http

name表示格式名称，string表示等义的格式。log_format有一个默认的无需设置的combined日志格式，相当于apache的combined日志格式，如下所示：

log_format combined '$remote_addr - $remote_user [$time_local] '

' "$request" $status $body_bytes_sent '

' "$http_referer" "$http_user_agent" ';

log_formatcombined'$remote_addr - $remote_user [$time_local] '

' "$request" $status $body_bytes_sent '

' "$http_referer" "$http_user_agent" ';

如果nginx位于负载均衡器，squid，nginx反向代理之后，web服务器无法直接获取到客户端真实的IP地址了。 $remote_addr获取反向代理的IP地址。反向代理服务器在转发请求的http头信息中，可以增加X-Forwarded-For信息，用来记录 客户端IP地址和客户端请求的服务器地址。PS: 获取用户真实IP 参见http://www.ttlsa.com/html/2235.html如下所示：

log_format porxy '$http_x_forwarded_for - $remote_user [$time_local] '

' "$request" $status $body_bytes_sent '

' "$http_referer" "$http_user_agent" ';

log_formatporxy'$http_x_forwarded_for - $remote_user [$time_local] '

' "$request" $status $body_bytes_sent '

' "$http_referer" "$http_user_agent" ';

日志格式允许包含的变量注释如下：

$remote_addr, $http_x_forwarded_for 记录客户端IP地址

$remote_user 记录客户端用户名称

$request 记录请求的URL和HTTP协议

$status 记录请求状态

$body_bytes_sent 发送给客户端的字节数，不包括响应头的大小； 该变量与Apache模块mod_log_config里的“%B”参数兼容。

$bytes_sent 发送给客户端的总字节数。

$connection 连接的序列号。

$connection_requests 当前通过一个连接获得的请求数量。

$msec 日志写入时间。单位为秒，精度是毫秒。

$pipe 如果请求是通过HTTP流水线(pipelined)发送，pipe值为“p”，否则为“.”。

$http_referer 记录从哪个页面链接访问过来的

$http_user_agent 记录客户端浏览器相关信息

$request_length 请求的长度(包括请求行，请求头和请求正文)。

$request_time 请求处理时间，单位为秒，精度毫秒； 从读入客户端的第一个字节开始，直到把最后一个字符发送给客户端后进行日志写入为止。

$time_iso8601 ISO8601标准格式下的本地时间。

$time_local 通用日志格式下的本地时间。

$remote_addr,$http_x_forwarded_for记录客户端IP地址

$remote_user记录客户端用户名称

$request记录请求的URL和HTTP协议

$status记录请求状态

$body_bytes_sent发送给客户端的字节数，不包括响应头的大小；该变量与Apache模块mod_log_config里的“%B”参数兼容。

$bytes_sent发送给客户端的总字节数。

$connection连接的序列号。

$connection_requests当前通过一个连接获得的请求数量。

$msec日志写入时间。单位为秒，精度是毫秒。

$pipe如果请求是通过HTTP流水线(pipelined)发送，pipe值为“p”，否则为“.”。

$http_referer记录从哪个页面链接访问过来的

$http_user_agent记录客户端浏览器相关信息

$request_length请求的长度(包括请求行，请求头和请求正文)。

$request_time请求处理时间，单位为秒，精度毫秒；从读入客户端的第一个字节开始，直到把最后一个字符发送给客户端后进行日志写入为止。

$time_iso8601ISO8601标准格式下的本地时间。

$time_local通用日志格式下的本地时间。

[warning]发送给客户端的响应头拥有“sent_http_”前缀。 比如$sent_http_content_range。[/warning]

实例如下：

http {

log_format main '$remote_addr - $remote_user [$time_local] "$request" '

'"$status" $body_bytes_sent "$http_referer" '

'"$http_user_agent" "$http_x_forwarded_for" '

'"$gzip_ratio" $request_time $bytes_sent $request_length';

log_format srcache_log '$remote_addr - $remote_user [$time_local] "$request" '

'"$status" $body_bytes_sent $request_time $bytes_sent $request_length '

'[$upstream_response_time] [$srcache_fetch_status] [$srcache_store_status] [$srcache_expire]';

open_log_file_cache max=1000 inactive=60s;

server {

server_name ~^(www\.)?(.+)$;

access_log logs/$2-access.log main;

error_log logs/$2-error.log;

location /srcache {

access_log logs/access-srcache.log srcache_log;

}

}

}

http{

log_formatmain'$remote_addr - $remote_user [$time_local] "$request" '

'"$status" $body_bytes_sent "$http_referer" '

'"$http_user_agent" "$http_x_forwarded_for" '

'"$gzip_ratio" $request_time $bytes_sent $request_length';

log_formatsrcache_log'$remote_addr - $remote_user [$time_local] "$request" '

'"$status" $body_bytes_sent $request_time $bytes_sent $request_length '

'[$upstream_response_time] [$srcache_fetch_status] [$srcache_store_status] [$srcache_expire]';

open_log_file_cachemax=1000inactive=60s;

server{

server_name~^(www\.)?(.+)$;

access_loglogs/$2-access.logmain;

error_loglogs/$2-error.log;

location/srcache{

access_loglogs/access-srcache.logsrcache_log;

}

}

}

3. open_log_file_cache指令

语法: open_log_file_cache max=N [inactive=time] [min_uses=N] [valid=time];

open_log_file_cache off;

默认值: open_log_file_cache off;

配置段: http, server, location

对于每一条日志记录，都将是先打开文件，再写入日志，然后关闭。可以使用open_log_file_cache来设置日志文件缓存(默认是off)，格式如下：

参数注释如下：

max:设置缓存中的最大文件描述符数量，如果缓存被占满，采用LRU算法将描述符关闭。

inactive:设置存活时间，默认是10s

min_uses:设置在inactive时间段内，日志文件最少使用多少次后，该日志文件描述符记入缓存中，默认是1次

valid:设置检查频率，默认60s

off：禁用缓存

实例如下：

open_log_file_cache max=1000 inactive=20s valid=1m min_uses=2;

1

open_log_file_cachemax=1000inactive=20svalid=1mmin_uses=2;

4. log_not_found指令

语法: log_not_found on | off;

默认值: log_not_found on;

配置段: http, server, location

是否在error_log中记录不存在的错误。默认是。

5. log_subrequest指令

语法: log_subrequest on | off;

默认值: log_subrequest off;

配置段: http, server, location

是否在access_log中记录子请求的访问日志。默认不记录。

6. rewrite_log指令

由ngx_http_rewrite_module模块提供的。用来记录重写日志的。对于调试重写规则建议开启。 Nginx重写规则指南

语法: rewrite_log on | off;

默认值: rewrite_log off;

配置段: http, server, location, if

启用时将在error log中记录notice级别的重写日志。

7. error_log指令

语法: error_log file | stderr | syslog:server=address[,parameter=value] [debug | info | notice | warn | error | crit | alert | emerg];

默认值: error_log logs/error.log error;

配置段: main, http, server, location

配置错误日志。

nginx日志切割原理

感谢邀请。

MySQL是一个高速度、高性能、多线程、开放源代码，建立在客户/服务器(Client/Server)结构上的关系型数据库管理系(RDBMS)。它始于1979年，最初是MichaelWidenius为瑞典TcX公司创建的UNIREG数据库系统。目前Mysql数据库也深受中小型企业的青睐。

一、负载均衡基本思路

在一个服务器集群中，尽可能的平均负载量。通常做法是在服务器前端设置一个负载均衡器（专门的硬件设备），MySQL的负载均衡，通常都离不开数据分片（把数据分割成小块，存储到不同的db节点中）、复制等操作。

在一个服务器集群中，尽可能的平均负载量。通常做法是在服务器前端设置一个负载均衡器（专门的硬件设备），MySQL的负载均衡，通常都离不开数据分片（把数据分割成小块，存储到不同的db节点中）、复制等操作。

负载均衡的主要贡献，除了均发数据库请求，还可提供管理读/写策略。在分发请求时则确定那些节点可写，可读，随即将请求发送到指定节点上执行操作。

二、实现负载均衡的方式

1、mysql读写分离

mysql复制时，产生了多个数据副本（备库），为减少服务器压力，备库用于处理读操作，主库可同时处理读写是mysql集群实现读写分离的常用策略。

由于备库的复制是异步的，无法实时同步，读写分离的主要难点也在于备库上的脏数据。通常如果使用备库进行读，一般对数据的实时性要求不能太高。对此，mysql提供了几种常见的读写分离方式，例如基于查询的读写分离、基于脏数据、基于会话等，有兴趣可继续研究。

mysql设置的读写分离，减少了主库的请求量，将大量读的操作发送给备库，实现负载均衡。

2、修改DNS

在高并发负载均衡（一）——企业架构分析和DNS中详细介绍了DNS以及DNS如何实现负载，简言之，通过n个服务器IP指定到一个域名，根据请求的不同标识特征，将请求发送给不同的IP服务器进行处理。

3、引入中间件

mysql官方提供了一个mysql负载的中间件，mysql_proxy，也需要在服务器上进行安装，修改配置文件（mysql的服务器IP）,实质与nginx类似，也是一个代理服务器。

4、利用mysql复制分流查询操作

利用mysql的主从复制可以有效的分流更新操作和查询操作，具体的实现是一个主服务器，承担更新操作，多台从服务器，承担查询操作，主从之间通过复制实现数据的同步。多台从服务器一方面用来确保可用性，一方面可以创建不同的索引满足不同查询的需要。

对于主从之间不需要复制全部表的情况，可以通过在主的服务器上搭建一个虚拟的从服务器，将需要复制到从服务器的表设置成blackhole引擎，然后定义replicate-do-table参数只复制这些表，这样就过滤出需要复制的binlog，减少了传输binlog的带宽。因为搭建的虚拟的从服务器只起到过滤binlog的作用，并没有实际纪录任何数据，所以对主数据库服务器的性能影响也非常的有限。

通过复制分流查询的存在的问题是主数据库上更新频繁或者网络出现问题的时候，主从之间的数据可能存在差异，造成查询结果的异议，应用在设计的时候需要有所考虑。

高可用负载均衡方案

1、虚拟IP技术

haproxy双机互备离不开一个关键的技术，这个技术是虚拟IP，linux可以在一个网卡内定义多个虚拟IP，得把这些IP地址定义到一个虚拟IP。

2、利用keepalived实现双机热备

定义出来一个虚拟IP，这个方案叫双机热备，准备2个keepalived，keepalived 就是为了抢占虚拟IP的，谁手快谁能抢到，没抢到的处于等待的状态。抢到的叫做主服务器，未抢到的叫做备服务器。两个keepalived之前有心跳检测的，当备用的检测到主服务挂了，就立马抢占虚拟IP。