squid命中率（转）

察看命中率的shell cat access.log|gawk ‘{print $4}’|sort|uniq -c|sort -nr

重点观察下面三个内容

  • TCP_MEM_HIT
  • TCP_IMS_HIT
  • TCP_REFRESH_HIT

1198559749.083 0 60.4.218.18 TCP_REFRESH_HIT/200 271 GET  – FIRST_UP_PARENT/d text/html 1198559813.186 1 218.106.61.11 TCP_IMS_HIT/304 233 GET  – NONE/- text/html 1198559829.358 0 218.106.61.11 TCP_IMS_HIT/304 224 GET  – NONE/- text/html

TCP_IMS_HIT:NONE 客户端发送确认请求，Squid发现更近来的、新鲜的请求资源的拷贝。 Squid发送更新的内容到客户端，而不联系原始服务器。（这指明Squid对本次请求，不会与任何其他服务器（邻居或原始服务器）通信。） TCP_MEM_HIT:NONE 类似 TCP_IMS_HIT:NONE， 从内存中响应 TCP_REFRESH_HIT:FIRST_UP_PARENT/d Squid发现请求资源的貌似陈旧的拷贝，并发送确认请求到原始服务器。

原始服务器返回304（未修改）响应，指示squid的拷贝仍旧是新鲜的。或者是重新更新文件。（Squid直接转发请求到原始服务器）

日志里的 none 就表示直接通过缓存回答客户端 direct 表示有经过原服务器进行查询了才回答客户端

经常有这样的情况，虽然hit的命中率有90%多，但是TCP_REFRESH_HIT:FIRST_UP_PARENT/d类似这样的日志非常多，表示squid性能并未到最优，每次请求仍然会往源服务器上查询一次。

检查问题发现，对于.html文件，squid能比较好的进程缓冲，对于从客户端访问的.dat文件，基本squid响应都为TCP_REFRESH_HIT:FIRST_UP_PARENT/d

在apache内增加AddType text/html .dat的配置继续测试，情况依然。 另发现，使用IE浏览器和FIREFOX访问相同路径会返回TCP_IMS_HIT:NONE，表示不经过原始服务器通信，而客户端软件内访问此地址大部分为TCP_REFRESH_HIT:FIRST_UP_PARENT/d的响应。

总结原因，可能为客户端的请求头和浏览器标准请求头略有差别导致,怀疑是否为这条Cache-Control: no-cache引起

最终测试结果发现是客户端发送了个Cache-Control: no-cache

调整squid的配置参数实现需要的效果，由于squid遵循了RFC标准，默认对于浏览器发送带的Cache-Control:no-cache 和 Pragma: no-cache的请求不进行缓冲，需要做以下配置文件的修改。

refresh_pattern -i .dat 10 100% 30 override-expire override-lastmod reload-into-ims ignore-reload ignore-no-cache ignore-private (其中 ignore-no-cache ignore-private 为2.6.13后的针对Cache-Control:no-cache 和 Pragma: no-cache的扩展)

By admin

read more

RHEL6/CentOS6下root用户密码破解

RHEL升级到版本6以后，发现root用户密码破解和centos.5的不一样了；在单用户模式下输入passwd命令不再有效。

这是由于在安装RHEL6(centos6)的过程中或者以前使用过程上，SELinux的默认级别为非0的缘故；

因此在进入单用户模式以后需要输入_setenforce 0_命令来将SELinux级别临时变为0以后，才可以使用passwd命令！

当然如果你在安装过程中，更改了SELinux的级别，那么就不会遇到上述问题了！

据称，这是RHEL6的一个bug……

By admin

read more

squid中HTTP/1.1 501 Method Not Implemented的解决办法

刚安装的squid,但在用squidclient清除缓存的时候,提示错误:

freebsd# ./squidclient -m PURGE -p 80 http://www.testsquid.com/index.html
HTTP/1.1 501 Method Not Implemented
Date: Tue, 28 Jun 2011 23:03:22 GMT
Server: Apache/2.2.19 (FreeBSD) mod_ssl/2.2.19 OpenSSL/0.9.8k DAV/2
Allow: GET,HEAD,POST,OPTIONS,TRACE
Content-Length: 217
Connection: close
Content-Type: text/html; charset=iso-8859-1

<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
<html><head>
<title>501 Method Not Implemented</title>
</head><body>
<h1>Method Not Implemented</h1>
<p>PURGE to /index.html not supported.<br />
</p>
</body></html>

解决办法:

freebsd# ./squidclient -m PURGE -h 192.168.0.120 -p 80 http://www.testsquid.com/index.html
HTTP/1.0 404 Not Found
Server: squid/3.0.STABLE25
Mime-Version: 1.0
Date: Tue, 28 Jun 2011 23:05:49 GMT
Content-Length: 0
X-Cache: MISS from cache.testsquid.com
Via: 1.0 cache.testsquid.com (squid/3.0.STABLE25)
Connection: close

指定squid监听的IP地址,我这里将squid(80)和apache(81)安装在了一台机器上,为了安全起见让apache只监听了127.0.0.1:81端口.指定ip就可以了

By admin

read more

杀死mysql指定的进程

在执行查询的时候,有时候用show processlist命令查看有过多的进程,造成mysql假死的状态,这个时候可以将一些僵死的进程杀掉.恢复正常状态 找到语句的 thread id

mysqladmin -uroot -proot kill xxxxx

如果是系统里的mysql进程的话,可以参考:

By admin

read more

Linux下做软RAID

GUI:安装CentOS5.0过程中做软RAID:

CLI:Linux下做软raid: http://docs.haohtml.com/download/linux/LINUX%c8%edRAID.pdf

========  mdadm使用详解======================

**

**

★mdadm简介

我们可以使用man mdadm命令来查看mdadm的帮助信息：

[root@localhost mdadm-2.6.2]# man mdadm

☆mdadm用法 基本语法：

mdadm [mode] [options]

目前支持：

LINEAR, RAID0(striping), RAID1(mirroring), RAID4, RAID5, RAID6, RAID10, MULTIPATH和FAULTY

模式(7种)：

  • Assemble：加入一个以前定义的阵列
  • Build：创建一个没有超级块的阵列
  • Create：创建一个新的阵列，每个设备具有超级块
  • Manage： 管理阵列(如添加和删除)
  • Misc：允许单独对阵列中的某个设备进行操作(如停止阵列)
  • Follow or Monitor:监控RAID的状态
  • Grow：改变RAID的容量或阵列中的设备数目

选项： -A, –assemble：加入一个以前定义的阵列 -B, –build：创建一个没有超级块的阵列(Build a legacy array without superblocks.) -C, –create：创建一个新的阵列 -F, –follow, –monitor：选择监控(Monitor)模式 -G, –grow：改变激活阵列的大小或形态 -I, –incremental：添加一个单独的设备到合适的阵列，并可能启动阵列 –auto-detect：请求内核启动任何自动检测到的阵列 -h, –help：帮助信息，用在以上选项后，则显示该选项信息 –help-options：显示更详细的帮助 -V, –version：打印mdadm的版本信息 -v, –verbose：显示细节 -b, –brief：较少的细节。用于 –detail 和 –examine 选项 -Q, –query：查看一个device，判断它为一个 md device 或是 一个 md 阵列的一部分 -D, –detail：打印一个或多个 md device 的详细信息 -E, –examine：打印 device 上的 md superblock 的内容 -c, –config= ：指定配置文件，缺省为 /etc/mdadm.conf -s, –scan：扫描配置文件或 /proc/mdstat以搜寻丢失的信息。配置文件/etc/mdadm.conf

By admin

read more

scp 无密码在两台主机之间拷贝文件

用scp 在两台主机之间相互之间拷贝文件，还是方面！但是需要密码！怎么样才能无密码相互之间拷贝文件呢！ 以下就实现是方法！ 在A主机上运行

#ssh-keygen -t  rsa

[root@localhost ~]# ssh-keygen -t rsa

Generating public/private rsa key pair.

Enter file in which to save the key (/root/.ssh/id_rsa):

Enter passphrase (empty for no passphrase):

Enter same passphrase again:

Your identification has been saved in /root/.ssh/id_rsa.

Your public key has been saved in /root/.ssh/id_rsa.pub.

The key fingerprint is:

61:34:37:bd:03:aa:c8:85:0d:e9:d0:b6:6e:c2:50:89 root@localhost

这样会在/root/.ssh/有两个 id_rsa ,id_rsa.pub.

将id_rsa.pub复制目标服务器上的/root/.ssh/里，并改名authorized_keys 例如 scp /root/.ssh/is_rsa.pub root@B:/root/.ssh/aut

By admin

read more

超级详细Tcpdump的用法

第一种是关于类型的关键字，主要包括host，net，port, 例如 host 210.27.48.2，指明 210.27.48.2是一台主机，net 202.0.0.0 指明 202.0.0.0是一个网络地址，port 23 指明端口号是23。如果没有指定类型，缺省的类型是host.

第二种是确定传输方向的关键字，主要包括src , dst ,dst or src, dst and src ,这些关键字指明了传输的方向。举例说明，src 210.27.48.2 ,指明ip包中源地址是210.27.48.2 , dst net 202.0.0.0 指明目的网络地址是202.0.0.0 。如果没有指明方向关键字，则缺省是src or dst关键字。

第三种是协议的关键字，主要包括fddi,ip,arp,rarp,tcp,udp等类型。Fddi指明是在FDDI(分布式光纤数据接口网络)上的特定 的网络协议，实际上它是”ether”的别名，fddi和ether具有类似的源地址和目的地址，所以可以将fddi协议包当作ether的包进行处理和 分析。其他的几个关键字就是指明了监听的包的协议内容。如果没有指定任何协议，则tcpdump将会监听所有协议的信息包。

除了这三种类型的关键字之外，其他重要的关键字如下：gateway, broadcast,less,greater,还有三种逻辑运算，取非运算是 ‘not ‘ ‘! ‘, 与运算是’and’,’&&’;或运算 是’or’ ,’││’；这些关键字可以组合起来构成强大的组合条件来满足人们的需要，下面举几个例子来说明。 普通情况下，直接启动tcpdump将监视第一个网络界面上所有流过的数据包。

# tcpdump tcpdump: listening on fxp0 11:58:47.873028 202.102.245.40.netbios-ns > 202.102.245.127.netbios-ns: udp 50 11:58:47.974331 0:10:7b:8:3a:56 > 1:80:c2:0:0:0 802.1d ui/C len=43 0000 0000 0080 0000 1007 cf08 0900 0000 0e80 0000 902b 4695 0980 8701 0014 0002 000f 0000 902b 4695 0008 00 11:58:48.373134 0:0:e8:5b:6d:85 > Broadcast sap e0 ui/C len=97 ffff 0060 0004 ffff ffff ffff ffff ffff 0452 ffff ffff 0000 e85b 6d85 4008 0002 0640 4d41 5354 4552 5f57 4542 0000 0000 0000 00

By admin

read more

常用MYSQL安全设置加固

1.修改root用户口令，删除空口令 2.删除默认数据库和数据库用户 3.改变默认mysql管理员帐号 4.关于密码的管理 5.使用独立用户运行msyql 6.禁止远程连接数据库 7.限制连接用户的数量 8.用户目录权限限制 9.命令历史记录保护 10.禁止MySQL对本地文件存取 11.MySQL服务器权限控制 12.使用chroot方式来控制MySQL的运行目录 13.关闭对无关的Web程序访问的支持 14.数据库备份策略 15. Mysqld安全相关启动选项 16.information_schema 安全

1.修改root用户口令，删除空口令

缺省安装的MySQL的root用户是空密码的，为了安全起见，必须修改为强密码，所谓的强密码，至少8位，由字母、数字和符号组成的不规律密码。使用MySQL自带的命令mysaladmin修改root密码，同时也可以登陆数据库，修改数据库mysql下的user表的字段内容，修改方法如下所示：

# /usr/local/mysql/bin/mysqladmin -u root password “upassword” //使用mysqladmin #mysql> use mysql; #mysql> update user set password=password(‘upassword’) where user=’root’; #mysql> flush privileges; //强制刷新内存授权表，否则用的还是在内存缓冲的口令

2.删除默认数据库和数据库用户 一般情况下，MySQL数据库安装在本地，并且也只需要本地的php脚本对mysql进行读取，所以很多用户不需要，尤其是默认安装的用户。MySQL初始化后会自动生成空用户和test库，进行安装的测试，这会对数据库的安全构成威胁，有必要全部删除，最后的状态只保留单个root即可，当然以后根据需要增加用户和数据库。

#mysql> show databases; #mysql> drop database test; //删除数据库test #use mysql; #delete from db; //删除存放数据库的表信息，因为还没有数据库信息。 #mysql> delete from user where not (user=’root’) ; // 删除初始非root的用户 #mysql> delete from user where user=’root’ and password=”; //删除空密码的root，尽量重复操作 Query OK, 2 rows affected (0.00 sec) #mysql> flush privileges; //强制刷新内存授权表。

By admin

read more

常用PHP安全设置加固

1.隐藏php版本 2.禁用危险的php函数 3.命令注入攻击 4.SQL注入攻击 5.xss攻击 6.会话劫持攻击 7.关闭注册全局变量 8.上传文件 9.远程包含、本地包含 10.Php.ini包含补丁文件,我们可以根据需要，通过它包含或者nginx的模块

1.隐藏php版本

expose_php=off

2.禁用危险的php函数 popen,pentl_exec,passthru,exec,system,scandir,chgrp,chown,shell_exec,proc_open,proc_get_status,ini_alter,ini_alter,ini_restore,dl,pfsockopen,openlog,syslog,readlink,symlink,popepassthru,stream_socket_server,show_source,escapeshellcmd,escapeshellarg,curl_exec,curl_multi_exec,parse_ini_file,assert 至于eval函数，我们用suhosin把这些全部都加进eval的黑名单

3.命令注入攻击 还是函数使用不严格造成的，这个我们应该不会有这些问题，因为如果存在，我们也禁用过，程序自然会报错

4.SQL注入攻击 magic_quotes_gpc = On；还有就是程序上的事情

5.xss攻击 举例说明，以前的公司还有新网都有后台客户提交工单给技术人员，然而提交位置存在xss跨站漏洞，如果在其位置跨个木马、偷取cookies、密码进行csrf攻击，后果不堪设想。 有必要的情况下增加xss模块

6.会话劫持攻击 这个说起来容易，对于session，需要条件及其苛刻，没有足够条件也是无法成功的！！

7.关闭注册全局变量 在PHP中提交的变量，包括使用POST或者GET提交的变量，都将自动注册为全局变量，能够直接访问，这是对服务器非常不安全的，所以我们不能让它注册为全局变量，就把注册全局变量选项关闭：register_globals = Off 当然，如果这样设置了，那么获取对应变量的时候就要采用合理方式，比如获取GET提交的变量var，那么就要用$_GET[‘var’]来进行获取，这个php程序员要注意。

8.上传文件 这里文件在另外个服务器没什么要说的,注意服务器上传目录无执行权限

9.远程包含、本地包含 常见攻击方法： 远程包含不用说了，直接包含远程的恶意代码获取控制权 防范：在php.ini关闭allow_url_fopen = off 本地包含常见攻击方法有三种， 1.日志包含。 2./proc/environ包含客户端user-agent。 3.图片包含。以上三种方法都是先向其内容插入恶意代码，使其包含执行 防范：open_basedir限制了目录，防止了1,2的攻击方法。至于第三种我们的图片在调用服务器，本地包含是无效的^_^。

10.Php.ini包含补丁文件,我们可以根据需要，通过它包含或者nginx的模块 在php.ini中引用。在配置文件内引用的话，将影响到所以的网站，包含所有页面 在php.ini中，找到此节：

; Automatically add files before or after any PHP document. ;auto_prepend_file = “phpids.php” ;auto_append_file = “alert.php”

默认是空，请添加所包含的文件。同时找到：

; UNIX: “/path1:/path2″ ;include_path = “.:/php/includes” ; ; Windows: “\path1;\path2″ include_path = “.;F:\PHPnow\htdocs”

By admin

read more

linux下ssh使用rsa认证教程[原创]

下面我们来对linux(centos)平台如何使用ssh的rsa认证功能来实现安全登录服务器的教程.为了安全我们一般不直接使用root这个用户,而使用其它用户来代替.如果需要root权限的时候,直接在服务器上进行su命令进行用户切换就可以了.

一.配置/etc/ssh/ssh_config文件

ServerKeyBits 1024 //# 注释取消，将768改为1024

PermitRootLogin no //# 注释取消，将yes改为no 禁止root登录

RSAAuthentication yes  //# 启用 RSA 认证
PubkeyAuthentication yes     //# 启用公钥认证
AuthorizedKeysFile     //# .ssh/authorized_keys   # 验证公钥的存放路径

PermitEmptyPasswords no   //# 取消注释，禁止空密码登录
PasswordAuthentication no //# 取消注释，禁止使用密码方式登录，有密钥谁还用密码啊
注意一下，在centos5.0之前SSH服务需要指明版本，#Protocol 2,1 把前面的注释取消，选择自己需要的版本就行了。

重启sshd服务

service sshd restart说明:

如果想做到最大化安全链接，可以考虑在配置有双网卡的服务器上设置只允许内网链接SSH，方法很简单， 首先在**/etc/hosts.deny文件最后一行添加一句sshd: ALL 然后在/etc/hosts.allow**的最后一行加上一句sshd: 192.168.0. 然后保存退出。

二.生成密匙

使用Linux主机生成的密匙,这里使用的是sysadmin这个用户,如果是使用其它用户的话,请在相应用户的home目录下面的.ssh文件夹里进行操作.这里我们创建一个sysadmin用户.

#useradd sysadmin -g wheel

#passwd sysadmin

#su sysadmin1、生成密匙

[sysadmin@localhost ssh]$ ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/home/sysadmin/.ssh/id_rsa):
Create directory '/home/sysadmin/.ssh'.
Enter passphrase (empty for no passphrase):      #//在这里输入密钥的密码
Enter same passphrase again:                     #//再次输入密码确认
Your identification has been saved in /home/sysadmin/.ssh/id_rsa.
Your public key has been saved in /home/sysadmin/.ssh/id_rsa.pub.
The key fingerprint is:
4a:51:5e:8b:67:0a:e9:9f:b5:b6:c9:f0:94:43:38:e9 sysadmin@localhost.localdomain
The key's randomart image is:
+--[ RSA 2048]----+
|        . .      |
|       + o .     |
|      + o +      |
|     . o *       |
|      o S o      |
|     . + = o     |
|      . E *      |
|         * +     |
|          =      |
+-----------------+

2、将 /sysadmin/.ssh/id_rsa.pub改名为/sysadmin/.ssh/authorized_keys

By admin

read more

Nginx中的gzip模块简介

gzip

语法: gzip on|off

默认值: gzip off

作用域: http, server, location, if (x) location

开启或者关闭gzip模块

gzip_buffers

语法: gzip_buffers number size

默认值: gzip_buffers 4 4k/8k

作用域: http, server, location 设置系统获取几个单位的缓存用于存储gzip的压缩结果数据流。例如 4 4k 代表以4k为单位，按照原始数据大小以4k为单位的4倍申请内存。 4 8k 代表以8k为单位，按照原始数据大小以8k为单位的4倍申请内存。

如果没有设置，默认值是申请跟原始数据相同大小的内存空间去存储gzip压缩结果。

gzip_comp_level

语法: gzip_comp_level 1..9

默认值: gzip_comp_level 1

作用域: http, server, location

gzip压缩比，1 压缩比最小处理速度最快，9 压缩比最大但处理最慢（传输快但比较消耗cpu）。

gzip_min_length

语法: gzip_min_length length

默认值: gzip_min_length 0

作用域: http, server, location 设置允许压缩的页面最小字节数，页面字节数从header头中的Content-Length中进行获取。

默认值是0，不管页面多大都压缩。

建议设置成大于1k的字节数，小于1k可能会越压越大。即: gzip_min_length 1024

gzip_http_version

语法: gzip_http_version 1.0|1.1

By admin

read more

Facebook是怎么做MySQL备份的?

Facebook的用户每天创造大量的数据，为了确保数据可靠的存储，我们每天进行数据备份.我们通过将原来的逻辑备份改成定制化的物理备份,显著地提升了备份的速度(不增加体积的情况下).

从mysqldump到Xtrabackup

我们使用mysqldump来进行每日的数据库备份,mysqldump对数据进行逻辑备份,就像应用访问数据库那样,mysqldump以SQL语句的方式从数据库中读取一张张表,将表结构和数据转保存到文本文件.mysqldump最大的问题是速度太慢(对于我们的一些大的数据库,通常要花24小时,甚至更久),并且以SQL语句的方式读取数据可能造成磁盘的随机读,这就会造成主机的load增大,影响性能.对于时间太长,我们可以跑多个实例来并发的做备份,这能缩短备份的时间,但是会造成更多的load,更影响主机的性能.

另外一个可行的备份方式是进行物理备份(我们称之为二进制备份,binary backup),通过操作系统层面,读取数据库磁盘文件,而非通过SQL语句.这样的话在备份的过程中,数据不能像SQL读取的时候保持事务上一致的.只有当备份的数据文件在数据库里复原了,他们才又一致了,这类似于数据库down掉之重启一样.

我们通过修改增强Xtrabackup来满足我们额外的需求:

1.支持快速的表级还原2.增强全量和增量备份3.支持混合增量备份

Xtrabackup支持增量备份,也就是备份自上次全量备份后改变的数据.这样我们就能够减少备份的空间(比如每天一次增量备份,每周一次全量备份).Xtrabackup也支持多级增量备份,不过我们不使用,避免复杂.

1.表级还原

我们写了一个PHP脚本,来从二进制备份文件中读取并还原指定的表.当前,这个脚本还不能自己从备份文件中读取信息创建表结构,因此必须事先准备好一个对应的空的表.我们对Xtrabackup也做了相应的修改来支持这个工具.这个修改就是支持Xtrabackup导入导出单表.单表的还原比全量还原快得多,因为只需要从文件中读取相应的表的信息.

2.调整全量和增量复制

fb是Xtrabackup早期的增量备份功能的用户,起初对于一些有大量表的数据库，Xtrabackup的增量备份不起作用.后来我们和percona一起解决了这些问题.

Xtrabackup只有本地增量备份功能,也就是说增量备份的文件必须要和MySQL在同台主机上.我们修改使之支持远程增量备份,也就是通过类似管道的方式将备份的数据同时发送到远程主机,.如果先在本地做增量备份,然后通过网络传到远程主机,对我们来说是不可取的,因为会大大增加本地的写操作.

Xtrabackup以1MB为1个chunk来读取数据库文件,我们发现使用8MB时,能够使增量备份的速度快一倍,使全量备份快40%.

3.让增量备份成为真正的增量

Xtrabackup的增量备份读取数据库的每个page,来判断哪些page改变了.我们创建了一个page追踪器,通过读取事务日志,并且通过每个表的bitmap,来追踪修改过的page,.这样我们就能很好的追踪哪些page改变了哪些没变,我们就可以只读取那些改变过的page.我们称这位真正的增量备份.

不过讽刺的是,我们发现这种真正的增量备份比普通的增量备份反而来的慢..这是因为普通的增量备份用8MB的chunk来读取文件,而真正的增量备份读取文件的大小是不定的,从16KB(INNODB中一个page的大小)到8MB,这取决于有多少连续的page是被修改过的.因此在我们的很多场景下(自上次全量备份后大概10%-30%的page修改了),真正的增量备份比普通的增量备份花了更多的IO调用.

因为我们进行了改进,有了一种混合增量的备份，通过避免读取未修改的page来减少IO次数,在我们的场景下,这种混合增量备份减少了20%-30%的IO,IO的大小从16KB到8MB不等.

下表描述了使用上述改进的方法来处理大概750GB数据时产生的不同结果.由于mysqldump速度的原因,mysqldump只在少数几个数据库上跑,我们使用gzip来对mysqldump的结果进行压缩,很慢,但是压缩率很高.

QPress用来压缩二进制备份,它比gzip快多了,但是压缩效率更低.由于我们经常作增量备份,较少作全量备份,整个二进制备份所需要的空间和mysqldump所需要的空间还是差不多的.

原文意译:http://www.facebook.com/note.php?note_id=10150098033318920

By admin

read more

Linux系统监控工具之vmstat详解

vmstat是一个十分有用的Linux系统监控工具，使用vmstat命令可以得到关于进程、内存、内存分页、堵塞IO、traps及CPU活动的信息。

一、前言

很显然从名字中我们就可以知道vmstat是一个查看虚拟内存（Virtual Memory）使用状况的工具，但是怎样通过vmstat来发现系统中的瓶颈呢？在回答这个问题前，还是让我们回顾一下Linux中关于虚拟内存相关内容。

二、虚拟内存运行原理

在系统中运行的每个进程都需要使用到内存，但不是每个进程都需要每时每刻使用系统分配的内存空间。当系统运行所需内存超过实际的物理内存，内核会释放某些进程所占用但未使用的部分或所有物理内存，将这部分资料存储在磁盘上直到进程下一次调用，并将释放出的内存提供给有需要的进程使用。

在Linux内存管理中，主要是通过“调页Paging”和“交换Swapping”来完成上述的内存调度。调页算法是将内存中最近不常使用的页面换到磁盘上，把活动页面保留在内存中供进程使用。交换技术是将整个进程，而不是部分页面，全部交换到磁盘上。

分页(Page)写入磁盘的过程被称作Page-Out，分页(Page)从磁盘重新回到内存的过程被称作Page-In。当内核需要一个分页时，但发现此分页不在物理内存中(因为已经被Page-Out了)，此时就发生了分页错误（Page Fault）。

当系统内核发现可运行内存变少时，就会通过Page-Out来释放一部分物理内存。经管Page-Out不是经常发生，但是如果Page-out频繁不断的发生，直到当内核管理分页的时间超过运行程式的时间时，系统效能会急剧下降。这时的系统已经运行非常慢或进入暂停状态，这种状态亦被称作thrashing(颠簸)。

三、使用vmstat

1.用法

vmstat [-a] [-n] [-S unit] [delay [ count]]

vmstat [-s] [-n] [-S unit]

vmstat [-m] [-n] [delay [ count]]

vmstat [-d] [-n] [delay [ count]]

vmstat [-p disk partition] [-n] [delay [ count]]

vmstat [-f]

vmstat [-V]

-a：显示活跃和非活跃内存

-f：显示从系统启动至今的fork数量 。引申阅读： http://www.cnblogs.com/leoo2sk/archive/2009/12/11/talk-about-fork-in-linux.html

-m：显示slabinfo

-n：只在开始时显示一次各字段名称。

-s：显示内存相关统计信息及多种系统活动数量。

delay：刷新时间间隔。如果不指定，只显示一条结果。

count：刷新次数。如果不指定刷新次数，但指定了刷新时间间隔，这时刷新次数为无穷。

-d：显示磁盘相关统计信息。

-p：显示指定磁盘分区统计信息

-S：使用指定单位显示。参数有 k 、K 、m 、M ，分别代表1000、1024、1000000、1048576字节（byte）。默认单位为K（1024 bytes）

-V：显示vmstat版本信息。

2.使用说明

例子1：每2秒输出一条结果

By admin

read more

PHP-FPM高负载的解决办法

这里只是介绍了php-fpm的优化方法的，但一般情况下和nginx组合使用的时候，单独优化其中一项的话，作用不是特别的大，同时还需要对nginx进行优化．nginx的做法方法参考：.上面的优化前和优化后的图，看得出前后差距还是特别的大的．

导致nginx 502 bad gateway的PHP-CGI(FASTCGI)

NGINX频爆502 BAD GATEWAY的错误，看了网上的教程，仍没有彻底解决。

目前我总结的解决502 BAD GATEWAY的方式有：

1.视服务器的性能，在php-fmp.conf里增加max_children的值，我目前用的15.

2.用reload参数定时重载php-fpm。这个主要原因是php脚本执行时间过长造成的，重载php-fpm能杜绝这个问题。如何彻底解决php-cgi脚本占用大量内存从而导致502错误的产生还值得进一步探讨，目前该做法不失为一种好办法。

具体的做法是，用crontab让php-fpm平滑重启，从而不影响PHP脚本的运行。

*/10 * * * * /usr/local/php/sbin/php-fpm reload

＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝　优化设置 ＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝

When you running a highload website with PHP-FPM via FastCGI, the following tips may be useful to you : )

如果您高负载网站使用PHP-FPM管理FastCGI，这些技巧也许对您有用：)

1. Compile PHP’s modules as less as possible, the simple the best (fast);

1.尽量少安装PHP模块，最简单是最好（快）的

2. Increas PHP FastCGI child number to 100 and even more. Sometime, 200 is OK! ( On 4GB memory server);

By admin

read more

Linux主分区，扩展分区，逻辑分区的联系和区别

言归正传，在安装 CentOS5.3 的过程中，会遇到磁盘分区的界面，下拉式菜单中有 4 个选项，这时你不要选择默认，打开下拉式菜单，选择最后一项（翻译成中文意思是：建立自定义的分割模式）。然后选择右下角的确认，在下一个对话界面里依序建立 / 、 /home 及 swap ，完成后如图。确认设置后的分割区。

为强调重点，把图中重要内容，再写一遍。

/             根目录         ext3       hda1

/home    用户目录         ext3        hda2

Swap     交换分区         swap       hda3

对 hda1 的解释：

hd ： IDE 硬盘。如果是 SCSI 硬盘，则为 sd ，这个只能记住，没有更好的办法。

a: ： 第一块硬盘。如果是第二块硬盘，则为 b ，依此类推 c,d……

1 ： 主分区。其中 1 ， 2 ， 3 ， 4 都是主分区，从第 5 开始为逻辑分区，最大到 16

磁盘容量与主分区、扩展分区、逻辑分区的关系：

硬盘的容量＝主分区的容量＋扩展分区的容量扩展分区的容量＝各个逻辑分区的容量之和

一块物理硬盘只能有 : 一到四个主分区 ( 但其中只能有一个是活动的主分区 ), 或一到三个主分区 , 和一个扩展分区。分别对应 hda1,hda2,hda3,hda4.

Linux 中规定，每一个硬盘设备最多能有 4 个主分区（其中包含扩展分区）构成，任何一个扩展分区都要占用一个主分区号码，也就是在一个硬盘中，主分区和扩展分区一共最多是 4 个。

By admin

read more