[MySQL FAQ]系列 — 为什么InnoDB表要建议用自增列做主键

我们先了解下InnoDB引擎表的一些关键特征：

InnoDB引擎表是基于B+树的索引组织表(IOT)；
每个表都需要有一个聚集索引(clustered index)；
所有的行记录都存储在B+树的叶子节点(leaf pages of the tree)；
基于聚集索引的增、删、改、查的效率相对是最高的；
如果我们定义了主键(PRIMARY KEY)，那么InnoDB会选择其作为聚集索引；
如果没有显式定义主键，则InnoDB会选择第一个不包含有NULL值的唯一索引作为主键索引；
如果也没有这样的唯一索引，则InnoDB会选择内置6字节长的ROWID作为隐含的聚集索引(ROWID随着行记录的写入而主键递增，这个ROWID不像ORACLE的ROWID那样可引用，是隐含的)。

综上总结，如果InnoDB表的数据写入顺序能和B+树索引的叶子节点顺序一致的话，这时候存取效率是最高的，也就是下面这几种情况的存取效率最高：

使用自增列(INT/BIGINT类型)做主键，这时候写入顺序是自增的，和B+数叶子节点分裂顺序一致；
该表不指定自增列做主键，同时也没有可以被选为主键的唯一索引(上面的条件)，这时候InnoDB会选择内置的ROWID作为主键，写入顺序和ROWID增长顺序一致；
除此以外，如果一个InnoDB表没有显式主键，但有可以被选择为主键的唯一索引，且该唯一索引可能不是递增关系时(例如字符串、UUID、多字段联合唯一索引的情况)，该表的存取效率就会特别差。

实际情况是如何呢？经过简单TPCC基准测试，修改为使用自增列作为主键与原始表结构分别进行TPCC测试，前者的TpmC结果比后者高9%倍，足见使用自增列做InnoDB表主键的明显好处，其他更多不同场景下使用自增列的性能提升可以自行对比测试下。

附图：

1、B+树典型结构

2、InnoDB主键逻辑结构

安装apache+php(fastcgi)

最近有下二次开发的程序，由于源程序使用了zend压缩，提示需要安装 Zend Guard Loader 扩展。而安装zend guard 7后，发现在phpinfo()里检测不到，后来才发现原来zend guard只能使用nfs非安全线程的php，没有办法，重新下载NFS版本的php版本。以下为安装要点：

我用的是WampServer集成环境，于是就想到了把 Apache 换成 FastCGI 模式来跑 PHP5.3 nts 版，这样就可以使用Zend Guard Loader 扩展了。

1、下载 PHP5.3.28 ，解压到 F:/php5.3.28nts ，配置好 php.ini，也顺便把 Zend Guard Loader 扩展配置好。

2、下载 mod_fcgid-2.3.6-win32-x86.zip 或 http://www.apachelounge.com/download/ 解压 manual、modules 目录中的文件到 f:\wamp\bin\apache\apache2.2.22 对应目录里去。

3、打开 Apache 配置文件 F:\wamp\bin\apache\apache2.2.22\conf\httpd.conf ，用#号注释掉 LoadModule php5_module “F:/wamp/bin/php/php5.3.13/php5apache2_2.dll” ，并在下面一行加入：

LoadModule fcgid_module modules/mod_fcgid.so

4、在 httpd.conf 配置文件的最后加入下面的配置：

<IfModule mod_fcgid.c>
AddHandler fcgid-script .fcgi .php
#php.ini的存放目录
FcgidInitialEnv PHPRC "F:/php5.3.28nts"
# 设置PHP_FCGI_MAX_REQUESTS大于或等于FcgidMaxRequestsPerProcess，防止php-cgi进程在处理完所有请求前退出
FcgidInitialEnv PHP_FCGI_MAX_REQUESTS 1000
#php-cgi每个进程的最大请求数
FcgidMaxRequestsPerProcess 1000
#php-cgi最大的进程数
FcgidMaxProcesses 3
#最大执行时间
FcgidIOTimeout 120
FcgidIdleTimeout 120
#php-cgi的路径
FcgidWrapper "F:/php5.3.28nts/php-cgi.exe" .php
AddType application/x-httpd-php .php
</IfModule>

5、告诉 Apache 执行方式，修改配置如下：

By admin

mysql中kill掉所有锁表的进程

很多时候由于异常或程序错误会导致个别进程占用大量系统资源，需要结束这些进程，通常可以使用以下命令Kill进程:

mysql中kill掉所有锁表的进程

3点钟刚睡下, 4点多, 同事打电话告诉我用户数据库挂掉了. 我起床看一下进程列表.

mysql>show process list;

出来哗啦啦好几屏幕的, 没有一千也有几百条, 查询语句把表锁住了, 赶紧找出第一个Locked的thread_id, 在mysql的shell里面执行.

mysql>kill thread_id;

kill掉第一个锁表的进程, 依然没有改善. 既然不改善, 咱们就想办法将所有锁表的进程kill掉吧, 简单的脚本如下.

#!/bin/bash
mysql -u root -e "show processlist" | grep -i "Locked" >> locked_log.txt for line in `cat locked_log.txt | awk '{print $1}'`
do
echo "kill $line;" >> kill_thread_id.sql
done

现在kill_thread_id.sql的内容像这个样子

kill 66402982;
kill 66402983;
kill 66402986;
kill 66402991;
.....

好了, 我们在mysql的shell中执行, 就可以把所有锁表的进程杀死了.

mysql>source kill_thread_id.sql

当然了, 也可以一行搞定

for id in `mysqladmin processlist | grep -i locked | awk '{print $1}'`
do
mysqladmin kill ${id}
done

如果要查看阻塞语句的话，只需要将上面的”Locked”修改成”Sending”即可。

By admin

检查mysql数据库是否存在坏表

shell脚本检测和检查mysql数据库是否存在坏表

此脚本的主要用途是检测mysql服务器上所有的数据库或者单独数据库中的坏表，适用于RHEL/Centos系列

#!/bin/bash
#此脚本的主要用途是检测mysql服务器上所有的db或者单独db中的坏表
#变量说明 pass mysql账户口令 name mysql账号名称 data_path mysql目录路径 directory_list 目录列表 file_list文件列表 db_name 数据库名称 repair_count单库中待修复的表总数
#变量说明 repair_count_all所有库中待修复的表总数 mysql_version mysql版本 _file_name 数据表名称

echo -e "此脚本的主要用途是检测mysql服务器上所有的数据库或者单独数据库中的坏表\n\n"
pass=123456
name=root

read -p "输入mysql存储路径: "  choose
data_path=$choose
unset choose

read -p "请输入mysql命令路径: " mysql_version
#标准输入、标准输出、标准错误输出的文件标示符 由 0、1、2标识
read -p "请选择是检查服务器上所有数据库还是指定的数据库 1:检查全部数据库 2:只检查指定数据库: " choose
if [ $choose == 1 ]; then
  cd $data_path
  for directory_list in $(ls)
    do
      if [ -d $directory_list ];then
          if [ "mysql" != "${directory_list}" -a "test" != "${directory_list}" ];then
              cd ${directory_list}
              echo "当前检查数据库为:"${directory_list}
              for file_list in $(ls *.frm)
              do
                _file_name=${file_list%.frm}
                echo -e "\n" >> /tmp/check_table_all.log
                ${mysql_version} -h 127.0.0.1 -u${name} -p${pass} -e "check table "${directory_list}.${_file_name} 2>&1 >> /tmp/check_table_all.log
              done
              cd ..
          fi
      fi
  done
             cat /tmp/check_table_all.log | grep "Table is marked as crashed" > /tmp/check_table_repair.log
             repair_count_all=` awk 'END{print NR}' /tmp/check_table_repair.log `
             echo -e "所有数据库用有${repair_count_all}张表需要修复！"
             more  /tmp/check_table_repair.log
else
  read -p "请输入要检查的数据库名称: " db_name
  cd ${data_path}/${db_name}
  for file_list in $(ls *.frm)
    do
      _file_name=${file_list%.frm}
      echo -e "\n" >> /tmp/check_${db_name}.log
      ${mysql_version} -h 127.0.0.1 -u${name} -p${pass} -e "check table "${db_name}.$_file_name 2>&1 >> /tmp/check_${db_name}.log
    done
    cat /tmp/check_${db_name}.log | grep "Table is marked as crashed" > /tmp/check_${db_name}_Repair.log
    repair_count=`awk 'END{print NR}' /tmp/check_${db_name}_Repair.log`
    echo -e "${db_name}中共有${repair_count}个表需要修复！\n "
    more /tmp/check_${db_name}_Repair.log
fi

By admin

linux下安装php7+mysql5.7+nginx

环境： CentOS7.1 X64 MySQL5.7.10 PHP7.0.4 Tengine/2.1.2 (nginx/1.6.2)

参考： http://blog.haohtml.com/archives/15340

一。安装常用扩展库

sudo yum -y install gcc gcc-c++ autoconf libjpeg libjpeg-devel libpng libpng-devel freetype freetype-devel libxml2 libxml2-devel zlib zlib-devel glibc glibc-devel glib2 glib2-devel bzip2 bzip2-devel ncurses ncurses-devel curl curl-devel e2fsprogs e2fsprogs-devel libidn libidn-devel openssl openssl-devel openldap openldap-devel nss_ldap openldap-clients openldap-servers libevent libevent-devel libcurl libcurl-devel net-tools

sudo yum -y install libmcrypt libmcrypt-devel libaio

如果通过Yum安装不了libmcrypt的话，直接源码编译

wget -O libmcrypt-2.5.8.tar.gz "http://downloads.sourceforge.net/mcrypt/libmcrypt-2.5.8.tar.gz?big_mirror=0"
tar zxvf libmcrypt-2.5.8.tar.gz
cd libmcrypt-2.5.8
./configure
make
sudo make install

添加www用户，php-fpm和nginx统一使用此用户

sudo groupadd www
sudo useradd -g www www

===========================

By admin

git commit 与 git commit -a 的区别

软件版本：操作系统：ubuntu10.04 内核版本：Linux version 2.6.32-36-generic git 版本：git version 1.7.0.4

目录：

文件状态
提交 2.1 git commit 与 git commit -a 2.2 添加提交信息
修改/取消
参考资料

1. 文件状态

一般仓库中的文件可能存在于这三种状态：

1）Untracked files → 文件未被跟踪； 2）Changes to be committed → 文件已暂存，这是下次提交的内容； 3) Changes bu not updated → 文件被修改，但并没有添加到暂存区。如果 commit 时没有带 -a 选项，这个状态下的文件不会被提交。

$git status
# On branch master
# Changes to be committed:
#   (use "git reset HEAD <file>..." to unstage)
#
#    new file:   file2
#
# Changed but not updated:
#   (use "git add <file>..." to update what will be committed)
#   (use "git checkout -- <file>..." to discard changes in working directory)
#
#    modified:   file
#
# Untracked files:
#   (use "git add <file>..." to include in what will be committed)
#
#    file3

2. 提交

By admin

package main

import "fmt"

func main() {
 data := make(chan int) // 数据交换队列
 exit := make(chan bool) // 退出通知

go func() {
 for d := range data { // 从队列迭代接收数据,直到 close 。
   fmt.Println(d)
 }

 fmt.Println("recv over.")
 exit <- true // 发出退出通知。
}()

data <- 1 // 发送数据。
data <- 2
data <- 3

close(data) // 关闭队列。

fmt.Println("send over.")

<-exit // 等待退出通知。
}

输出结果：

1
2
3
send over.
recv over.

而如果将上面与 exit chan有关的三行删除掉，则结果为:

By admin

golang中chan的理解与使用教程

对于 chan 介绍见： https://github.com/astaxie/build-web-application-with-golang/blob/master/zh/02.7.md

这里我们主要通过实例来介绍对chan的理解及用法.

无Buffer的Channels

实例1：

func main() {
ci := make(chan int)

ci <- 4

value := <-ci
fmt.Println(value)
}

执行结果错误为：

fatal error: all goroutines are asleep - deadlock! goroutine 1 [chan send]:

从上面“fatal error: all goroutines are asleep - deadlock!” 这句我们可以看出是groutings 阻塞了，这里为写阻塞，从“goroutine 1 [chan send]”可以看出来。

这一点文档里已经说明阻塞的原因了：

默认情况下，channel接收和发送数据都是阻塞的，除非另一端已经准备好，这样就使得Goroutines同步变的更加的简单，而不需要显式的lock。所谓阻塞，也就是如果读取（value := <-ch）它将会被阻塞，直到有数据接收。其次，任何发送（ch<-5）将会被阻塞，直到数据被读出。无缓冲channel是在多个goroutine之间同步很棒的工具。

解决办法：

我们只要将其中发送方(写)或者读取方(读)放到一个goroutine里就可以了，这样主程序main()里与goroutine通过channel来通讯即可。

func main() {
ci := make(chan int)

go write(ci)

value := <-ci
fmt.Println(value)
}

func write(c chan int) {
c <- 4
}

-–-–-–-–

By admin

前言

为了在团队里搭建统一的本地开发环境，最近花了点时间用了下vagrant和docker，在此做个记录，这也算一个DevOps的实践。

Vagrant介绍

Vagrant 是一款用来构建虚拟开发环境的工具，非常适合 php/python/ruby/java 这类语言开发 web 应用，“代码在我机子上运行没有问题”这种说辞将成为历史。

我们可以通过 Vagrant 封装一个 Linux 的开发环境，分发给团队成员。成员可以在自己喜欢的桌面系统（Mac/Windows/Linux）上开发程序，代码却能统一在封装好的环境里运行，非常霸气。

以上介绍直接抄自网络，我觉得介绍的很到位。

「注意点：」

vagrant up命令执行后，如果看到下面的错误信息，则需要安装另外一个工具：

[default] The guest additions on this VM do not match the installed version of VirtualBox! In most cases this is fine, but in rare cases it can prevent things such as shared folders from working properly. If you see shared folder errors, please make sure the guest additions within the virtual machine match the version of VirtualBox you have installed on your host and reload your VM.

By admin

golang中flag包的用法

golang中flag包主要用来CLI下，获取命令参数，示例如下mysql.go：

package main

import (
"flag"
"fmt"
)

func main() {
  host := flag.String("h", "localhost", "请指定一个主机")
  user := flag.String("u", "root", "请指定数据库用户")
  port := flag.Int("P", 3306, "Port number to use for commection or 0 for default to, in port 3306")

  //var name string
  //flag.StringVar(&name, "u", "root", "请指定用户名")

  flag.Parse() //参数解析

  fmt.Println("主机地址：", *host)
  fmt.Println("用户名：", *user)
  fmt.Println("端口:", *port)
}

像flag.Int、flag.Bool、flag.String这样的函数格式都是一样的，第一个参数表示参数名称，第二个参数表示默认值，第三个参数表示使用说明和描述。flag.StringVar这样的函数第一个参数换成了变量地址，后面的参数和flag.String是一样的。

使用flag来操作命令行参数，支持的格式如下：

go run mysql.go -h="127.0.0.1" -u="sxf" -P=3307
go run mysql.go --h="127.0.0.1" --u="sxf" --P=3307
go run mysql.go -h "127.0.0.1" -u "sxf"
go run mysql.go --h "127.0.0.1" --u "sxf" --P 3307

还是非常方便的。

By admin

mac下的yum包管理工具MacPorts

这里推荐安装 Homebrew，好像安装这个的用户比较的多的，安装命令也非常的简单。

Mac下面除了用dmg、pkg来安装软件外，比较方便的还有用MacPorts来帮助你安装其他应用程序，跟BSD中的ports道理一样。MacPorts就像apt-get、yum一样，可以快速安装些软件。

除了这个还有一些类似的工具： Homebrew 和 Fink。
Flink是直接编译好的二进制包，MacPorts是下载所有依赖库的源代码，本地编译安装所有依赖，Homebrew是尽量查找本地依赖库，然后下载包源代码编译安装。 Flink容易出现依赖库问题，MacPorts相当于自己独立构建一套，下载和编译的东西太多太麻烦，Homebrew的方式最合理。

下面将MacPorts的安装和使用方法记录在这里以备查。

访问官方网站http://www.macports.org/install.php，这里提供有dmg安装和源码安装两种方式，dmg就多说了，下载 MacPorts-2.3.3-10.10-Yosemite.pkg，下一步下一步安装即可。

通过Source安装MacPorts

wget http://distfiles.macports.org/MacPorts/MacPorts-1.9.2.tar.gz

tar zxvf MacPorts-1.9.2.tar.gz

cd MacPorts-1.9.2

./configure && make && sudo make install

cd ../

rm -rf MacPorts-1.9.2*

然后将/opt/local/bin和/opt/local/sbin添加到$PATH搜索路径中

编辑/etc/profile文件中，加上

export PATH=/opt/local/bin:$PATH

export PATH=/opt/local/sbin:$PATH

MacPorts使用 更新ports tree和MacPorts版本，强烈推荐第一次运行的时候使用-v参数，显示详细的更新过程。 sudo port -v selfupdate

搜索索引中的软件 port search name

安装新软件 sudo port install name

卸载软件 sudo port uninstall name

查看有更新的软件以及版本 port outdated

升级可以更新的软件 sudo port upgrade outdated

Eclipse的插件需要subclipse需要JavaHL，下面通过MacPorts来安装 sudo port install subversion-javahlbindings

By admin

mac终端中显示tree的命令(转)

寻觅了良久终于找到了mac下如何在终端显示tree的命令了，作为从linux下转过来的人，还没适应mac的finder，还是喜欢在命令行下查看文件。

命令：

find . -print | sed -e 's;[^/]*/;|____;g;s;____|; |;g'

然后手动alias一下，在你的.bash_profile或者.zshrc中添加:

alias tree="find . -print | sed -e 's;[^/]*/;|____;g;s;____|; |;g'"

搞定

要是能显示颜色和控制层级就更好了。

PS：也可以通过brew install tree 安装。

By admin

ios8中action segue

os8 action segue 有几种方法，一般选择哪一个，每种方法都有什么用，在什么环境下使用？

Apple的解释在这里： https://developer.apple.com/library/ios/recipes/xcode_help-IB_storyboard/chapters/StoryboardSegue.html 我的翻译： Show: 在master或detail区域展现内容(典型的如iPad的设置界面，左侧是master，右侧是detail)，究竟是在哪个区要取决于屏幕上的内容，如果不分master/detail，就单纯的把新的内容push到当前view controller stack的顶部 Show Detail: 大致同Show，在detail区域展现内容，如果不分master/detail，新的内容取代当前view controller stack的顶部 Present Modally：模态展示内容 Present as Popover：在当前的view上出现一个小窗口来展示内容，无处不在的“选中文字后出现复制/翻译按钮就是这个 Custom：自定义的

By admin

vmware11下安装mac osx 10.10教程(原创)

推荐此方法：

一. 安装vmware 12 pro的破解补丁(unlocker207)

vmware 12 pro unlocker207( 204版本在vm11处可以使用，在vm12下不管用,各版本下载 http://www.insanelymac.com/forum/files/file/339-unlocker/ )

二. 下载 Yosemite Install(14F27)_10.10.5.cdr 镜像文件。安装方法同windows一样，设置为cd/dvd就可以了。默认vmware只显示iso文件，选择一下显示所有文件即可。

安装过程中会提示一下信息，和下面教程的错误和解决方法都一样。

===============================================

不在推荐使用以下这种方法，网络安装特别的慢，另外版本已经过时。推荐使用上面的方法安装！

在安装前请检查您的硬件配置是否支持，特别注意是”虚拟化”功能，有的主板虽然支持，但默认是关闭状态的，需要在bios里开启才可以。

所需软件：

1.mac 补丁 unlocker 2.mac os x 10.10.3

百度网盘链接: http://pan.baidu.com/s/1kTKUMZP 密码: csgd

vmware11的安装这里就不再描述了！由于vmware默认下是无法识别mac系统的，所以这里需要打个mac补丁才行，解压unlocker204包运行win-install.cmd 文件，这样在创建系统的时候才会了现一个Mac OS X 选项。

一。创建mac虚拟主机.

在系统类型里选择 “Apple Mac OS X(M)”这一样，下面的版本类型选择”OS X 10.10″.

2. 接下来是制作安装操作系统的iso.

由于苹果默认下好的操作系统镜像是dmg格式的，无法直接安装，需要转换为iso文件，有很多工具支持dmg2iso的转换，有一个开源工具dmg2iso命令行格式可以支持转换，可惜sourceforge没有直接windows版本运行的，可以搜网上别人编辑好的dmg2img，命令格式：dmg2img source.dmg target.iso

注意，但这不是制作iso文件最麻烦的一部分，最烦的一部分是直接下载那个大约5GB大小的官方dmg文件转换好的iso文件是不能直接拿来加载安装操作系统的！（坑爹啊）

只能一层层解压并找从我们安装所需要dmg –> 用7zip or WinRaR解压出 /Install OS X Yosemite.app/Contents/SharedSupport/InstallESD.dmg

InstallESD.dmg –> 然后又是解压缩出一个 InstallESD.dmg，你没看错又是一个InstallESD.dmg文件。@.@（Interesting）然后重复两到三次，从最终的一个InstallESD.dmg中能发现一个文件：BaseSystem.dmg（这个才是我们要的，汗）

By admin

学习笔记

[MySQL FAQ]系列 — 为什么InnoDB表要建议用自增列做主键

用shell分析nginx日志里的访问最多的IP地址

安装apache+php(fastcgi)

mysql中kill掉所有锁表的进程

检查mysql数据库是否存在坏表

linux下安装php7+mysql5.7+nginx

git commit 与 git commit -a 的区别

golang中chan实例

golang中chan的理解与使用教程

无Buffer的Channels

Dev with Vagrant and Docker

前言

Vagrant介绍

golang中flag包的用法

mac下的yum包管理工具MacPorts

mac终端中显示tree的命令(转)

ios8中action segue

vmware11下安装mac osx 10.10教程(原创)