2009/03 归档 - 沧海一粟 - Web系统架构与服务器运维,php开发

在Linux高负载下mysql数据库彻底优化

jed , 2009-3-19 15:53 , 搜索优化 , 评论(0) , 阅读(3491) , Via 本站原创

同时在线访问量继续增大对于1G内存的服务器明显感觉到吃力严重时甚至每天都会死机或者时不时的服务器卡一下这个问题曾经困扰了我半个多月MySQL使用是很具伸缩性的算法，因此你通常能用很少的内存运行或给MySQL更多的被存以得到更好的性能。

安装好mysql后，配制文件应该在 /usr/local/mysql/share/mysql目录中，配制文件有几个，有my-huge.cnf my-medium.cnf my-large.cnf my-small.cnf,不同的流量的网站和不同配制的服务器环境，当然需要有不同的配制文件了。

一般的情况下，my-medium.cnf这个配制文件就能满足我们的大多需要；一般我们会把配置文件拷贝到/etc/my.cnf 只需要修改这个配置文件就可以了，使用mysqladmin variables extended-status –u root –p 可以看到目前的参数，有３个配置参数是最重要的，即key_buffer_size,query_cache_size,table_cache。

key_buffer_size只对MyISAM表起作用，

key_buffer_size指定索引缓冲区的大小，它决定索引处理的速度，尤其是索引读的速度。一般我们设为16M,实际上稍微大一点的站点　这个数字是远远不够的，通过检查状态值Key_read_requests和 Key_reads,可以知道key_buffer_size设置是否合理。比例key_reads / key_read_requests应该尽可能的低，至少是1:100，1:1000更好（上述状态值可以使用SHOW STATUS LIKE ‘key_read%’获得）。或者如果你装了phpmyadmin 可以通过服务器运行状态看到,笔者推荐用phpmyadmin管理mysql，以下的状态值都是本人通过phpmyadmin获得的实例分析:

这个服务器已经运行了20天

key_buffer_size – 128M key_read_requests – 650759289 key_reads - 79112

比例接近1:8000 健康状况非常好

另外一个估计key_buffer_size的办法　把你网站数据库的每个表的索引所占空间大小加起来看看以此服务器为例:比较大的几个表索引加起来大概125M 这个数字会随着表变大而变大。

从4.0.1开始，MySQL提供了查询缓冲机制。使用查询缓冲，MySQL将SELECT语句和查询结果存放在缓冲区中，今后对于同样的SELECT语句（区分大小写），将直接从缓冲区中读取结果。根据MySQL用户手册，使用查询缓冲最多可以达到238%的效率。

通过调节以下几个参数可以知道query_cache_size设置得是否合理

Qcache inserts Qcache hits Qcache lowmem prunes Qcache free blocks Qcache total blocks

Qcache_lowmem_prunes的值非常大，则表明经常出现缓冲不够的情况,同时 Qcache_hits的值非常大，则表明查询缓冲使用非常频繁，此时需要增加缓冲大小Qcache_hits的值不大，则表明你的查询重复率很低，这种情况下使用查询缓冲反而会影响效率，那么可以考虑不用查询缓冲。此外，在SELECT语句中加入SQL_NO_CACHE可以明确表示不使用查询缓冲。

Qcache_free_blocks，如果该值非常大，则表明缓冲区中碎片很多query_cache_type指定是否使用查询缓冲

我设置:

query_cache_size = 32M

query_cache_type= 1

得到如下状态值:

Qcache queries in cache 12737 表明目前缓存的条数

Qcache inserts 20649006

Qcache hits 79060095 　看来重复查询率还挺高的

Qcache lowmem prunes 617913　有这么多次出现缓存过低的情况

Qcache not cached 189896 　　

Qcache free memory 18573912　　目前剩余缓存空间

Qcache free blocks 5328 这个数字似乎有点大　碎片不少

Qcache total blocks 30953

如果内存允许32M应该要往上加点

table_cache指定表高速缓存的大小。每当MySQL访问一个表时，如果在表缓冲区中还有空间，该表就被打开并放入其中，这样可以更快地访问表内容。通过检查峰值时间的状态值Open_tables和 Opened_tables，可以决定是否需要增加table_cache的值。如果你发现open_tables等于table_cache，并且 opened_tables在不断增长，那么你就需要增加table_cache的值了（上述状态值可以使用SHOW STATUS LIKE ‘Open%tables’获得）。注意，不能盲目地把table_cache设置成很大的值。如果设置得太高，可能会造成文件描述符不足，从而造成性能不稳定或者连接失败。

对于有1G内存的机器，推荐值是128－256。

笔者设置table_cache = 256

得到以下状态:

Open tables 256

Opened tables 9046

虽然open_tables已经等于table_cache，但是相对于服务器运行时间来说,已经运行了20天，opened_tables的值也非常低。因此，增加table_cache的值应该用处不大。如果运行了6个小时就出现上述值那就要考虑增大table_cache。

如果你不需要记录2进制log 就把这个功能关掉，注意关掉以后就不能恢复出问题前的数据了，需要您手动备份，二进制日志包含所有更新数据的语句，其目的是在恢复数据库时用它来把数据尽可能恢复到最后的状态。另外，如果做同步复制( Replication )的话，也需要使用二进制日志传送修改情况。

log_bin指定日志文件，如果不提供文件名，MySQL将自己产生缺省文件名。MySQL会在文件名后面自动添加数字引，每次启动服务时，都会重新生成一个新的二进制文件。此外，使用log-bin-index可以指定索引文件；使用binlog-do-db可以指定记录的数据库；使用binlog-ignore-db可以指定不记录的数据库。注意的是：binlog-do- db和binlog-ignore-db一次只指定一个数据库，指定多个数据库需要多个语句。而且，MySQL会将所有的数据库名称改成小写，在指定数据库时必须全部使用小写名字，否则不会起作用。

关掉这个功能只需要在他前面加上#号

#log-bin

开启慢查询日志( slow query log )

慢查询日志对于跟踪有问题的查询非常有用。它记录所有查过long_query_time的查询，如果需要，还可以记录不使用索引的记录。下面是一个慢查询日志的例子：

开启慢查询日志，需要设置参数log_slow_queries、long_query_times、log-queries-not-using-indexes。

log_slow_queries指定日志文件，如果不提供文件名，MySQL将自己产生缺省文件名。long_query_times指定慢查询的阈值，缺省是10秒。log-queries-not-using-indexes是 4.1.0以后引入的参数，它指示记录不使用索引的查询。笔者设置long_query_time=10

笔者设置:

sort_buffer_size = 1M max_connections=120 wait_timeout =120 back_log=100 read_buffer_size = 1M thread_cache=32 interactive_timeout=120 thread_concurrency = 4

参数说明:

back_log

要求MySQL能有的连接数量。当主要MySQL线程在一个很短时间内得到非常多的连接请求，这就起作用，然后主线程花些时间(尽管很短)检查连接并且启动一个新线程。back_log值指出在MySQL暂时停止回答新请求之前的短时间内多少个请求可以被存在堆栈中。只有如果期望在一个短时间内有很多连接，你需要增加它，换句话说，这值对到来的TCP/IP连接的侦听队列的大小。你的操作系统在这个队列大小上有它自己的限制。 Unix listen(2)系统调用的手册页应该有更多的细节。检查你的OS文档找出这个变量的最大值。试图设定back_log高于你的操作系统的限制将是无效的。

max_connections

并发连接数目最大，120 超过这个值就会自动恢复，出了问题能自动解决

thread_cache

没找到具体说明，不过设置为32后 20天才创建了400多个线程而以前一天就创建了上千个线程所以还是有用的

thread_concurrency

#设置为你的cpu数目x2,例如，只有一个cpu,那么thread_concurrency=2

#有2个cpu,那么thread_concurrency=4

skip-innodb

#去掉innodb支持

Tags: mysql , mysql优化

mysql错误日志及解决全攻略

jed , 2009-3-19 09:21 , 数据库技术 , 评论(0) , 阅读(3794) , Via 本站原创

说明:如果遇到数据库出错的问题修改相应的代码后一般要重启mysql。如果遇到mysql的问题可以先重启一下mysql 看看问题能否解决。
1005：创建表失败
1006：创建数据库失败
1007：数据库已存在，创建数据库失败
1008：数据库不存在，删除数据库失败
1009：不能删除数据库文件导致删除数据库失败
1010：不能删除数据目录导致删除数据库失败
1011：删除数据库文件失败
1012：不能读取系统表中的记录
1016: 无法打开文件
    击后开始=>所有程序=>附件=>命令提示符
    输入 mysql 所在硬盘盘符
     cd mysql 所在目录
     cd bin
    输入 myisamchk -f D:usr/local/mysql/data/bbs/PW_members.MYI
    ps : D:usr/local/mysql/data/bbs 是你论坛数据库的路径

阅读全文

Tags: mysql , 错误日志

关于umask

jed , 2009-3-18 13:43 , 服务器技术 , 评论(0) , 阅读(2566) , Via 本站原创

我们创建文件的默认权限是怎么来的？如何改变这个默认权限呢？
umask是什么？

当我们登录系统之后创建一个文件总是有一个默认权限的，那么这个权限是怎么来的呢？这就是umask干的事情。umask设置了用户创建文件的默认权限，它与chmod的效果刚好相反，umask设置的是权限“补码”，而chmod设置的是文件权限码。一般在/etc/profile、$ [HOME]/.bash_profile或$[HOME]/.profile中设置umask值。

如何计算umask值？

umask命令允许你设定文件创建时的缺省模式，对应每一类用户(文件属主、同组用户、其他用户)存在一个相应的umask值中的数字。对于文件来说，这一数字的最大值分别是6。系统不允许你在创建一个文本文件时就赋予它执行权限，必须在创建后用chmod命令增加这一权限。目录则允许设置执行权限，这样针对目录来说，umask中各个数字最大可以到7。

该命令的一般形式为：umask nnn
其中nnn为umask置000 - 777。

我们只要记住u m a s k是从权限中“拿走”相应的位即可。下表是umask值与权限的对照表：
umask 文件目录
--------------------
0 6 7
1 6 6
2 4 5
3 4 4
4 2 3
5 2 2
6 0 1
7 0 0
--------------------

如：umask值为022，则默认目录权限为755，默认文件权限为644。

Tags: linux , umask

在Linux系统下如何增加一个新的系统用户

jed , 2009-3-18 07:03 , 服务器技术 , 评论(0) , 阅读(2598) , Via 本站原创

【语法】adduser[必要参数][选择性参数]用户名

【功能说明】adduser指令根据指令行参数给系统添加用户，它的配置信息保存在/etc/adduser.conf文件中。如果调用时没有指定“--system”或“--group”参数，adduser指令在默认的情况下将添加一个一般用户。如果要添加一个系统用户请用“--symtem”参数，要添加一个用户组请用“--group”参数。

【参数说明】

必要参数具体说明如下：

参数功能

-r|--system 创建一个系统用户

--no-creat-home 不创建用户的/home目录，即使它不存在

-q|--quiet 只显示警告信息和错误信息，不显示一般信息

--debug 用于调试

选择性参数的具体说明如下：

阅读全文

Tags: linux , 建立用户

身份证号码js验证

jed , 2009-3-16 15:45 , 代码编程 , 评论(0) , 阅读(7085) , Via 本站原创

身份证号码js验证
check_certnumber.js

test.html 例子代码

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN"
"http://www.w3.org/TR/html4/loose.dtd">
<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=gb2312">
<title>身份证号码js验证</title>
<script type="text/javascript" src="check_certnumber.js"></script>
<script type="text/javascript">
////身份证号码验证
  function v_cert_number(theForm){
      var check_result = checkIdcard(theForm.cardid.value);
      if (check_result != "true"){
        document.getElementById("cert_number_div").style.color="#ff0000";
        document.getElementById("cert_number_div").innerHTML ="<image src='images/Img227876837.gif'> "+check_result;
        return false;
      }
      document.getElementById("cert_number_div").innerHTML ="<image src='images/Img227876838.gif'>身份证号码正确，需要人工验证身份号和姓名是否相符！";
  }

////
</script>
<script>
    function validateform()
    {
      var check_result = checkIdcard(reg.cardid.value);
      if (check_result != "true"){
          window.alert (check_result)
          reg.cardid.focus()
          return false;
         }
     }
</script>
</head>

<body>
<form action="real.php?type=upinfo" method="post"  name="reg" onSubmit="return validateform();">
<INPUT onblur=javascript:v_cert_number(document.reg) name=cardid>
<DIV class=f1 id=cert_number_div align=left>请如实填写身份证号，作为实名认证的主要依据，如果末位字符是X，则必须输入大写X</DIV>
</form>
</body>
</html>

Tags: 身份证验证 , js

魔法引用函数magic_quotes_gpc和magic_quotes_runtime的区别和用法

jed , 2009-3-10 10:14 , 代码编程 , 评论(0) , 阅读(2711) , Via 本站原创

PHP提供两个方便我们引用数据的魔法引用函数magic_quotes_gpc和magic_quotes_runtime，这两个函数如果在php.ini设置为ON的时候，就会为我们引用的数据碰到单引号'和双引号"以及反斜线 \ 是自动加上反斜线，帮我们自动转译符号，确保数据操作的正确运行，可是我们在php不同的版本或者不同的服务器配置下，有的magic_quotes_gpc和magic_quotes_runtime设置为on，有的又是off，所以我们写的程序必须符合on和off两种情况。那么magic_quotes_gpc和magic_quotes_runtime两个函数有什么区别呢？看下面的说明：

magic_quotes_gpc
作用范围是：ＷＥＢ客户服务端；
作用时间：请求开始是，例如当脚本运行时．

magic_quotes_runtime
作用范围：从文件中读取的数据或执行exec()的结果或是从ＳＱＬ查询中得到的；
作用时间：每次当脚本访问运行状态中产生的数据．
所以

magic_quotes_gpc的设定值将会影响通过Get/Post/Cookies获得的数据
magic_quotes_runtime的设定值将会影响从文件中读取的数据或从数据库查询得到的数据

阅读全文

Tags: 魔法引用

VI编辑器热键功能

jed , 2009-3-10 08:37 , 服务器技术 , 评论(0) , 阅读(2625) , Via 本站原创

关闭窗口:
:q
退出vi且不保存编辑：
:qa!
移动光标类命令:
H:光标左移一个字符
I:光标右移一个字符
Space:光标右移一个字符
Backspace:光标左移一个字符
K或Ctrl+P:光标上移一行
J或Ctrl+N :光标下移一行
Enter:光标下移一行
w或W:光标右移一个字至字首
b或B:光标左移一个字至字首
e或E:光标右移一个字j至字尾
):光标移至句尾
(:光标移至句首
}:光标移至段落开头
{:光标移至段落结尾
nG:光标移至第n行首
n+:光标下移n行
n-:光标上移n行

阅读全文

Tags: vi , vi编辑器

苹果重茬病及其防治技术

jed , 2009-3-6 13:35 , 游戏天地 , 评论(0) , 阅读(3766) , Via 本站原创

苹果重茬病又称再植病。也就是在同一块土地上，栽植苹果树后，又继续栽植苹果树，而后茬苹果树生长受到抑制或病害发生严重，导致果品产量低、质量差的现象。目前，随着社会的发展，果园中相当大的一部分苹果老品种需要更新改造；而近10多年来多是推行的矮化密植栽培，又使果树的经济寿命缩短，造成果树的更新换代速度加快；另一方面，农村的土地分散经营，承包期多在30年以上。因此在老果园更新改造中重茬栽植必然相当普遍。如不注意重茬病的防治，将会给果农造成巨大损失。笔者根据多年的实践和外地经验，对此进行了认真的总结，简述如下：
    1、苹果重茬病形成原因
    1．1果树根系分泌物的毒害作用。前茬苹果树的根系在多年的生长发育过程中和衰败时，分泌释放了大量的代谢产物如根皮苷和根皮素等，经土壤微生物分解产生有毒物质，这些物质对新栽幼树根系起到毒害作用，使其生长受到强烈的抑制，从而影响果树生长发育。
    1．2土壤营养失衡
    苹果树长期固定生长在一个地方，连续有选择的吸收土壤中某些营养成份，造成土壤中营养元素失去平衡，果树所需营养元素特别是微量元素供应不足，其它元素可能过剩，导致果树生长不良或死亡。
    1．3线虫和土壤病原物的危害作用。老果树根际土壤中，线虫、有害细菌、真菌等病原物大量增加，使新栽幼树的根系受到危害，且有些病原物联合对果树危害，使果树生长衰弱，表现重茬病。

阅读全文

Tags: 果树

Linux系统mysql数据库字符集设置

jed , 2009-3-6 12:37 , 数据库技术 , 评论(0) , 阅读(4552) , Via 本站原创

在Linux系统中，您可以根据需要来设置mysql数据库的默认字符集，操作方法如下：
1、使用root权限登录您的服务器。

2、找到并编辑文件my.cnf, 它位于/etc/目录下面
vi /etc/my.cnf

3、找到客户端配置[client] 在下面添加
default_character_set=utf8 (默认字符集为utf8 )

4、找到[mysqld] 在下面添加
default_character_set=utf8

5、保存设置并退出，重启mysql服务。

Tags: mysql , 字符集

MySql常用命令荟萃

jed , 2009-3-6 12:35 , 数据库技术 , 评论(0) , 阅读(3880) , Via 本站原创

// 启动服务
mysqld --console

// 停止服务
mysqladmin -u root shutdown

// 登录后使用数据库 mysql
mysql -u root -p mysql
mysql -u root -p -h 11.11.11.11 database

// 创建数据库
create database db_name [default character set=gbk]

// 设置数据库默认字符集
alter databse db_name default character set gbk

// 更换数据库 use database test after log on
use test

// 创建一个带图像字段的表 create a table mypic to store picture
create table mypic (picid int, picname varchar(20), content blob);

// 显示表的结构 describe table mypic
desc mypic

// 显示当前表的建表语句
show create table table_name

// 更改表类型
alter table table_name engine innodb|myisam|memory

// 插入一条记录 insert a record
insert into mypic values (1, '第二章', 0x2134545);

// 显示当前用户 show current user
select user();

// 显示当前用户密码 show current password
select password('root');

// 显示当前日期 show current date
select now();

// 更改用户密码 change user password
update user set password=password('xxx') where user='root';

// 分配用户权限 grant
grant all privileges on *.* to root@localhost
grant select,insert,delete,update,alter,create,drop on lybbs.* to lybbs@"%" identified by "lybbs";
grant select,insert,delete,update,alter,create,drop on lybbs.* to lybbs@localhost identified by "lybbs";

// 在不重启的情况下刷新用户权限 flush privileges
flush privileges

// 向表中增加一个主键 add primary key
alter table mypic add primary key (picid)

// 修改表结构增加一个新的字段 add a new column userid after picid
alter table mypic add column userid int after picid

// 更改列类型,当存储图像过大时，使用默认blob超不过100k
alter table userpic change image image longblob;
alter table userpic modify image longblob;

// 设置默认字符集为gb2312
mysqld --default-character-set=gb2312

// 显示详细信息，包括字符集编码
show full columns from userpic;

// 改变表的编码
ALTER TABLE userpic CHARACTER SET gb2312;

// mysql jdbc连接url 使用中文
jdbc:mysql://localhost/test?useUnicode=true&characterEncoding=gb2312

// 执行外部脚本
source

MySQL是最受欢迎的开源SQL数据库管理系统，由MySQL AB开发、发布和支持。MySQL AB是一家基于MySQL开发人员的商业公司，是一家使用了一种成功的商业模式来结合开源价值和方法论的第二代开源公司。MySQL是MySQL AB的注册商标。

MySQL是一个快速的、多线程、多用户和健壮的SQL数据库服务器。MySQL服务器支持关键任务、重负载生产系统的使用，也可以将它嵌入到一个大配置(mass-deployed)的软件中去。

Tags: mysql , mysql命令

分页： 2/5

1 2 3 4 5

[ 显示模式：摘要 | 列表 ]

沧海一粟

在Linux高负载下mysql数据库彻底优化

mysql错误日志及解决全攻略

关于umask

在Linux系统下如何增加一个新的系统用户

身份证号码js验证

魔法引用函数magic_quotes_gpc和magic_quotes_runtime的区别和用法

VI编辑器热键功能

苹果重茬病及其防治技术

Linux系统mysql数据库字符集设置

MySql常用命令荟萃

公告

分类

日历

赞助商链接

在线音乐

邮箱登陆

最新日志

热门文章

最新评论

归档

热门Tags

链接

统计

其他

选择模板

赞助商广告

< 2009 > < 3 > 己丑年（牛）
日	一	二	三	四	五	六
1	2	3	4	5	6	7
8	9	10	11	12	13	14
15	16	17	18	19	20	21
22	23	24	25	26	27	28
29	30	31


用户名：
密码：