[转]前端开发一定要知道的
by SpawN on 八.18, 2010, under Javascript
| 热度: |  | | |  | |
原文地址:这里
1、 HTTP服务器.
2、性能测试工具推荐
3、 图片篇.
6、 减少请求，响应的数据量.
9、该如何加载google-analytics(或其他第三方)的JS.
10、疯狂的HTML压缩.
[Perl] Perl 命令行参数
by SpawN on 八.02, 2010, under Perl
| 热度: | | | | | |
执行控制
-e 指定字符串以作为脚本（多个字符串迭加）执行
-M 导入模块
-I 指定目录以搜索标准位置前的模块
整洁性
-w 打开警告
-Mstrict 打开严格编译指示（pragma）
数据
-0 （这是个零）指定输入记录分隔符
-a 将数据分割成名为 @F 的数组
-F 指定分割时 -a 使用的模式（请参阅 perldoc -f split）
-i 在适当的位置编辑文件（请参阅 perldoc perlrun 以获取大量详细信息）
-c 进行perl的语法检查,但不执行perl命令.
-F 把缺省的分离号改为你想要的.例如把分离号定为非字符
-l 使用 -l 有两个效果，第一自动 chomp 输入分隔号，第二 把$/ 值付给 $\ ( 这样 print 的时候就会自动在末尾加 \n )
-n 使用 <> 将所有 @ARGV 参数当作文件来逐行运行,会将读入的内容隐式的逐一按行来遍历文件.每一行将缺省保存在 $_
-p 和 -n 一样，但是还会打印 $_ 的内容
请注意 -p 开关和 -n 开关的使用。当您想显式打印数据时，使用 -n 开关。 -p 开关隐式地将 print $_ 语句插入到 -n 开关所产生的循环中。因此， -p 开关更适用于对文件进行的 完全处理，而 -n 开关更适用于 选择性文件处理，这样的处理只需打印特定数据。
以下是一些常用的简单实例
#perl -pi -e’s/aaa/bbb/’ filename 修改当前file文件中的文件,不生成中间文件,速度很快.记住 -i 开关，因为它让你原地编辑文件.
#perl -ne ‘print if /^aaaaa/’ filename 象grep一样过滤文件中需要的内容.这个地方,使用了-n,所以一次是做一行的操作,直到整个文件读完.另外,在管道时,-n也会一样,来遍历管道送过来的内容.
#perl -n -e ‘print “$. – $_”‘ filename 这个例子中的,没用-ne,只是命令写成了-n -e,其实一样,这个例子中,是给当前文件中的内容都加一个行号打印出来.注:$.表示当前行号
#perl -pe ‘$_ = “$. $_”‘ filename 这个其实和上面一样,分别只是使用了-p替换了-n,这个有个什么好处啦,别的地方都一样,但-p按行来遍历完文件后,会给$_打印出来.
大家还记得awk分割域(awk ‘{i = NF – 1; print $1 + $i}’)啊,是不是很方便,下面我们来看看perl
#perl -lane ‘print $F[0] + $F[-2]‘ 这个神奇的地方在于-a,使用-a后.因为-n分行读进来,然后-a给数据分割成@F的数组.
#perl -ne ‘print if /^START$/ .. /^END$/’ 打印正则中从$start到$end的地方
#perl -ne ‘print if $. >= 15; exit if $. >= 17;’ 有效地打印数字范围中的行
#perl -p -i.bak -e ‘s/\bfoo\b/bar/g’ *.c 原地修改 -i 开关的神奇之处在于它对 @ARGV 中的每个文件都用该脚本对该文件输出所产生的文件版本进行替代
#perl -ne ‘print scalar reverse $_’ test 给文件中的内容反向排序,比如文件中有fukai,就会变成iakuf
QQ 邮箱 PHP 导入
by SpawN on 七.27, 2010, under PHP
| 热度: | | | | | |
辛苦一晚上，终于把QQ邮箱导入搞定了，不知道什么时候他又会变，谁要人家是老大呢，我忍！
明天我整理下代码，然后发上来
[Linux]shell命令的常用快捷键
by SpawN on 六.24, 2010, under Linux
| 热度: | | | | | |
一些shell的常用快捷键
Ctrl + a 切换到命令行开始
Ctrl + e 切换到命令行末尾
Ctrl + l 清除屏幕内容
Ctrl + u 清除光标之前的内容
Ctrl + k 清除光标之后的内容
Ctrl + h 类似于退格键
Ctrl + r 在历史命令中查找 （这个非常好用，输入关键字就调出以前的命令了）
Ctrl + c 终止命令
Ctrl + d 退出shell
Ctrl + z 转入后台运行
[Linux]apt-get command
by SpawN on 六.24, 2010, under Linux
| 热度: | | | | | |
apt-get install packagename——安装一个新软件包（这个是最经常用到的）
apt-get update–>在修改/etc/apt/sources.list或/etc/apt/preferences之后运行该命令
apt-get remove packagename–>卸载一个已安装的软件包（保留配置文档）
apt-get –purge remove packagename–>卸载一个已安装的软件包（删除配置文档）
dpkg –force-all –purge packagename –>有些软件很难卸载，而且还阻止了别的软件的应用，就能够用这个，但是有点冒险
apt-get autoclean apt–>会把已装或已卸的软件都备份在硬盘上，所以假如需要空间的话，能够让这个命令来删除您已删掉的软件
apt-get clean –>这个命令会把安装的软件的备份也删除，但是这样不会影响软件的使用的
apt-get upgrade–>更新任何已安装的软件包
apt-get dist-upgrade–>将系统升级到新版本
apt-cache search string–>在软件包列表中搜索字符串
dpkg -l package-name-pattern–>列出任何和模式相匹配的软件包。假如您不知道软件包的全名，您能够使用“*package-name-pattern*”。
aptitude——周详查看已安装或可用的软件包。和apt-get类似，aptitude能够通过命令行方式调用，但仅限于某些命令——最常见的有安装和卸载命令。由于aptitude比apt-get了解更多信息，能够说他更适合用来进行安装和卸载。
apt-cache showpkg pkgs–>显示软件包信息
apt-cache show pkgs–>显示软件包记录，类似于dpkg –print-avail
apt-cache pkgnames–>打印软件包列表中任何软件包的名称
apt-cache dumpavail–>打印可用软件包列表
dpkg -S file–>这个文档属于哪个已安装软件包
dpkg -L package–>列出软件包中的任何文档
apt-file search filename——查找包含特定文档的软件包（不一定是已安装的），这些文档的文档名中含有指定的字符串。apt-file是个单独的软件包。您必须先使用apt-get install来安装他，然後运行apt-file update。假如apt-file search filename输出的内容太多，您能够尝试使用apt-file search filename | grep -w filename（只显示指定字符串作为完整的单词出现在其中的那些文档名）或类似方法，例如：apt-file search filename | grep /bin/（只显示位于诸如/bin或/usr/bin这些文档夹中的文档，假如您要查找的是某个特定的执行文档的话，这样做是有帮助的）。 apt-get autoclean——定期运行这个命令来清除那些已卸载的软件包的.deb文档。
cacti 增加 Tokyocabinet 监控
by SpawN on 六.21, 2010, under Linux
| 热度: | | | | | |
1.下载tokyocabinet的cacti模板
http://forums.cacti.net/about34829.html
2.拷贝程序 tokyotyrant-stats.pl 至 $cactipath/scripts 目录
3.在监控机创建 /var/log/tt_info/ 目录，并修改权限为755
4.将程序
tt_1978_info_pcpu_get.sh,
tt_1978_info_pcpu.sh,
tt_1978_info_pcpu_store.sh,
tt_1978_info_socket_get.sh,
tt_1978_info_socket.sh,
tt_1978_info_socket_store.sh,
tt_1978_info_threads_get.sh,
tt_1978_info_threads.sh,
tt_1978_info_threads_store.sh
拷贝到需要监控的服务器，增加可执行权限，目录地址为/usr/local/sbin/
5.将以下程序(cron定时程序)
tt_1978_info_pcpu,
tt_1978_info_socket,
tt_1978_info_threads.
拷贝到需要监控的服务器，增加可执行权限，目录地址为/etc/cron.d/
6.添加tokyocabinet的cacti模板文件
[转]VPS服务器性能 压力测试工具 http_load、webbench、ab、Siege使用教程
by SpawN on 六.14, 2010, under Linux
| 热度: | | | | | |
原文地址:http://www.deepvps.com/webserver-test-tools.html
一、http_load
程序非常小，解压后也不到100K
http_load以并行复用的方式运行，用以测试web服务器的吞吐量与负载。但是它不同于大多数压力测试工
具，它可以以一个单一的进程运行，一般不会把客户机搞死。还可以测试HTTPS类的网站请求。
下载地址：http://deepvps.googlecode.com/files/http_load-12mar2006.tar.gz
安装很简单
#tar zxvf http_load-12mar2006.tar.gz
#cd http_load-12mar2006
#make && make install
命令格式：http_load -p 并发访问进程数 -s 访问时间 需要访问的URL文件
参数其实可以自由组合，参数之间的选择并没有什么限制。比如你写成http_load -parallel 5 -seconds
300 urls.txt也是可以的。我们把参数给大家简单说明一下。
-parallel 简写-p ：含义是并发的用户进程数。
-fetches 简写-f ：含义是总计的访问次数
-rate 简写-p ：含义是每秒的访问频率
-seconds简写-s ：含义是总计的访问时间
准备URL文件：urllist.txt，文件格式是每行一个URL，URL最好超过50－100个测试效果比较好。文件格式
例如：
http_load -p 30 -s 60 urllist.txt
参数了解了，我们来看运行一条命令来看看它的返回结果
命令：% ./http_load -rate 5 -seconds 10 urls说明执行了一个持续时间10秒的测试，每秒的频率为5。
49 fetches, 2 max parallel, 289884 bytes, in 10.0148 seconds5916 mean bytes/connection4.89274
fetches/sec, 28945.5 bytes/secmsecs/connect: 28.8932 mean, 44.243 max, 24.488 minmsecs/first
-response: 63.5362 mean, 81.624 max, 57.803 minHTTP response codes: code 200 — 49
结果分析：
1．49 fetches, 2 max parallel, 289884 bytes, in 10.0148 seconds
说明在上面的测试中运行了49个请求，最大的并发进程数是2，总计传输的数据是289884bytes，运行的时间是10.0148秒
2．5916 mean bytes/connection说明每一连接平均传输的数据量289884/49=5916
3．4.89274 fetches/sec, 28945.5 bytes/sec
说明每秒的响应请求为4.89274，每秒传递的数据为28945.5 bytes/sec
4．msecs/connect: 28.8932 mean, 44.243 max, 24.488 min说明每连接的平均响应时间是28.8932 msecs，最大的响应时间44.243 msecs，最小的响应时间24.488 msecs
5．msecs/first-response: 63.5362 mean, 81.624 max, 57.803 min
6、HTTP response codes: code 200 — 49 说明打开响应页面的类型，如果403的类型过多，那可能要注意是否系统遇到了瓶颈。
特殊说明：
测试结果中主要的指标是 fetches/sec、msecs/connect 这个选项，即服务器每秒能够响应的查询次数，用这个指标来衡量性能。似乎比 apache的ab准确率要高一些，也更有说服力一些。
Qpt-每秒响应用户数和response time，每连接响应用户时间。
测试的结果主要也是看这两个值。当然仅有这两个指标并不能完成对性能的分析，我们还需要对服务器的cpu、men进行分析，才能得出结论
二、webbench
webbench是Linux下的一个网站压力测试工具，最多可以模拟3万个并发连接去测试网站的负载能力。下载地址可以到google搜，我这里给出一个
下载地址：http://deepvps.googlecode.com/files/webbench-1.5.tar.gz
这个程序更小，解压后不到50K，呵呵
安装非常简单
#tar zxvf webbench-1.5.tar.gz
#cd webbench-1.5
#make && make install
会在当前目录生成webbench可执行文件，直接可以使用了
用法：
webbench -c 并发数 -t 运行测试时间 URL
如：
webbench -c 5000 -t 120 http://www.xxx.com
三、ab
ab是apache自带的一款功能强大的测试工具。安装了apache一般就自带了，用法可以查看它的说明
$ ./ab
./ab: wrong number of arguments
Usage: ./ab [options] [http://]hostname[:port]/path
Options are:
-n requests Number of requests to perform
-c concurrency Number of multiple requests to make
-t timelimit Seconds to max. wait for responses
-p postfile File containing data to POST
-T content-type Content-type header for POSTing
-v verbosity How much troubleshooting info to print
-w Print out results in HTML tables
-i Use HEAD instead of GET
-x attributes String to insert as table attributes
-y attributes String to insert as tr attributes
-z attributes String to insert as td or th attributes
-C attribute Add cookie, eg. ‘Apache=1234. (repeatable)
-H attribute Add Arbitrary header line, eg. ‘Accept-Encoding: gzip’
Inserted after all normal header lines. (repeatable)
-A attribute Add Basic WWW Authentication, the attributes
are a colon separated username and password.
-P attribute Add Basic Proxy Authentication, the attributes
are a colon separated username and password.
-X proxy:port Proxyserver and port number to use
-V Print version number and exit
-k Use HTTP KeepAlive feature
-d Do not show percentiles served table.
-S Do not show confidence estimators and warnings.
-g filename Output collected data to gnuplot format file.
-e filename Output CSV file with percentages served
-h Display usage information (this message)
参数众多，一般我们用到的是-n 和-c
例如：
./ab -c 1000 -n 100 http://www.xxx.com/index.php
这个表示同时处理1000个请求并运行100次index.php文件.
四、Siege
一款开源的压力测试工具，可以根据配置对一个WEB站点进行多用户的并发访问，记录每个用户所有请求过程的相应时间，并在一定数量的并发访问下重复进行。
官方：http://www.joedog.org/
Siege下载：http://deepvps.googlecode.com/files/siege-2.67.tar.gz
解压：
# tar -zxf siege-2.67.tar.gz
进入解压目录：
# cd siege-2.67/
安装：
#./configure ; make
#make install
使用
siege -c 200 -r 10 -f example.url
-c是并发量，-r是重复次数。 url文件就是一个文本，每行都是一个url，它会从里面随机访问的。
example.url内容:
http://www.deepvps.com
结果说明
Lifting the server siege… done.
Transactions: 3419263 hits //完成419263次处理
Availability: 100.00 % //100.00 % 成功率
Elapsed time: 5999.69 secs //总共用时
Data transferred: 84273.91 MB //共数据传输84273.91 MB
Response time: 0.37 secs //相应用时1.65秒：显示网络连接的速度
Transaction rate: 569.91 trans/sec //均每秒完成 569.91 次处理：表示服务器后
Throughput: 14.05 MB/sec //平均每秒传送数据
Concurrency: 213.42 //实际最高并发数
Successful transactions: 2564081 //成功处理次数
Failed transactions: 11 //失败处理次数
Longest transaction: 29.04 //每次传输所花最长时间
Shortest transaction: 0.00 //每次传输所花最短时间
TokyoCanbinet & Tokyotyrant & PHP 环境安装
by SpawN on 六.13, 2010, under PHP
| 热度: | | | | | |
1.wget http://1978th.net/tokyocabinet/tokyocabinet-1.4.45.tar.gz
tar -zxvf tokyocabinet-1.4.45.tar.gz
cd tokyocabinet-1.4.45
./configure –prefix=/usr/local/tc
make & make install
2.wget http://1978th.net/tokyotyrant/tokyotyrant-1.1.40.tar.gz
tar -zxvf tokyotyrant-1.1.40.tar.gz
cd tokyotyrant-1.1.40
./configure –prefix=/usr/local/tt –with-tc=/usr/local/tc
make & make install
3.wget http://pecl.php.net/get/tokyo_tyrant-0.5.0.tgz
tar -zxvf tokyo_tyrant-0.5.0.tgz
cd tokyo_tyrant-0.5.0
phpize
./configure –with-php-config=/usr/bin/php-config –with-tokyo-tyrant=/usr/local/tt –with-tokyo-cabinet-dir=/usr/local/tc
make & make install
