|
2010年1月31日
#
作者:NetSeek http://www.linuxtone.org (IT運(yùn)維專家網(wǎng)|集群架構(gòu)|性能調(diào)優(yōu))
歡迎轉(zhuǎn)載,轉(zhuǎn)載時(shí)請(qǐng)務(wù)必以超鏈接形式標(biāo)明文章原始出處和作者信息及本聲明.
首發(fā)時(shí)間: 2008-11-25 更新時(shí)間:2009-1-14
目 錄
一、 Nginx 基礎(chǔ)知識(shí)
二、 Nginx 安裝及調(diào)試
三、 Nginx Rewrite
四、 Nginx Redirect
五、 Nginx 目錄自動(dòng)加斜線:
六、 Nginx Location
七、 Nginx expires
八、 Nginx 防盜鏈
九、 Nginx 訪問(wèn)控制
十、 Nginx日志處理
十一、 Nginx Cache
十二、 Nginx負(fù)載均衡
十三、 Nginx簡(jiǎn)單優(yōu)化
十四、 如何構(gòu)建高性能的LEMP環(huán)境
十五、 Nginx服務(wù)監(jiān)控
十六、 常見(jiàn)問(wèn)題與錯(cuò)誤處理.
十七、 相關(guān)資源下載
【前言】：
編寫(xiě)此技術(shù)指南在于推廣普及NGINX在國(guó)內(nèi)的使用，更方便的幫助大家了解和掌握NGINX的一些使用技巧。本指南很多技巧來(lái)自于網(wǎng)絡(luò)和工作中或網(wǎng)絡(luò)上朋友們問(wèn)我的問(wèn)題.在此對(duì)網(wǎng)絡(luò)上愿意分享的朋友們表示感謝和致意！歡迎大家和我一起豐富本技術(shù)指南提出更好的建議！請(qǐng)朋友們關(guān)注: http://www.linuxtone.org 技術(shù)分享社區(qū)! 互想學(xué)習(xí)共同進(jìn)步!
一、 Nginx 基礎(chǔ)知識(shí)
1、簡(jiǎn)介
Nginx ("engine x") 是一個(gè)高性能的 HTTP 和 反向代理 服務(wù)器，也是一個(gè) IMAP/POP3/SMTP 代理服務(wù)器。 Nginx 是由 Igor Sysoev 為俄羅斯訪問(wèn)量第二的 Rambler.ru 站點(diǎn)開(kāi)發(fā)的，它已經(jīng)在該站點(diǎn)運(yùn)行超過(guò)兩年半了。Igor 將源代碼以類BSD許可證的形式發(fā)布。盡管還是測(cè)試版，但是，Nginx 已經(jīng)因?yàn)樗姆€(wěn)定性、豐富的功能集、示例配置文件和低系統(tǒng)資源的消耗而聞名了。
更多的請(qǐng)見(jiàn)官方wiki: http://wiki.codemongers.com/
2、 Nginx的優(yōu)點(diǎn)
nginx做為HTTP服務(wù)器，有以下幾項(xiàng)基本特性：
1) 處理靜態(tài)文件，索引文件以及自動(dòng)索引；打開(kāi)文件描述符緩沖．
2) 無(wú)緩存的反向代理加速，簡(jiǎn)單的負(fù)載均衡和容錯(cuò)．
3) FastCGI，簡(jiǎn)單的負(fù)載均衡和容錯(cuò)．
4)
模塊化的結(jié)構(gòu)。包括gzipping, byte ranges, chunked responses, 以及
SSI-filter等f(wàn)ilter。如果由FastCGI或其它代理服務(wù)器處理單頁(yè)中存在的多個(gè)SSI，則這項(xiàng)處理可以并行運(yùn)行，而不需要相互等待。
5) 支持SSL 和 TLS SNI．
Nginx專為性能優(yōu)化而開(kāi)發(fā)，性能是其最重要的考量, 實(shí)現(xiàn)上非常注重效率 。它支持內(nèi)核Poll模型，能經(jīng)受高負(fù)載的考驗(yàn), 有報(bào)告表明能支持高達(dá) 50,000 個(gè)并發(fā)連接數(shù)。
Nginx具有很高的穩(wěn)定性。其它HTTP服務(wù)器，當(dāng)遇到訪問(wèn)的峰值，或者有人惡意發(fā)起慢速連接時(shí)，也很可能會(huì)導(dǎo)致服務(wù)器物理內(nèi)存耗盡頻繁交換，失去響應(yīng)，只能重啟服務(wù)器。例如當(dāng)前apache一旦上到200個(gè)以上進(jìn)程，web響
應(yīng)速度就明顯非常緩慢了。而Nginx采取了分階段資源分配技術(shù)，使得它的CPU與內(nèi)存占用率非常低。nginx官方表示保持10,000個(gè)沒(méi)有活動(dòng)的連
接，它只占2.5M內(nèi)存，所以類似DOS這樣的攻擊對(duì)nginx來(lái)說(shuō)基本上是毫無(wú)用處的。就穩(wěn)定性而言, nginx比lighthttpd更勝一籌。
Nginx支持熱部署。它的啟動(dòng)特別容易, 并且?guī)缀蹩梢宰龅?*24不間斷運(yùn)行，即使運(yùn)行數(shù)個(gè)月也不需要重新啟動(dòng)。你還能夠在不間斷服務(wù)的情況下，對(duì)軟件版本進(jìn)行進(jìn)行升級(jí)。
Nginx采用master-slave模型, 能夠充分利用SMP的優(yōu)勢(shì)，且能夠減少工作進(jìn)程在磁盤(pán)I/O的阻塞延遲。當(dāng)采用select()/poll()調(diào)用時(shí)，還可以限制每個(gè)進(jìn)程的連接數(shù)。
Nginx
代碼質(zhì)量非常高，代碼很規(guī)范， 手法成熟， 模塊擴(kuò)展也很容易。特別值得一提的是強(qiáng)大的Upstream與Filter鏈。
Upstream為諸如reverse proxy,
與其他服務(wù)器通信模塊的編寫(xiě)奠定了很好的基礎(chǔ)。而Filter鏈最酷的部分就是各個(gè)filter不必等待前一個(gè)filter執(zhí)行完畢。它可以把前一個(gè)
filter的輸出做為當(dāng)前filter的輸入，這有點(diǎn)像Unix的管線。這意味著，一個(gè)模塊可以開(kāi)始?jí)嚎s從后端服務(wù)器發(fā)送過(guò)來(lái)的請(qǐng)求，且可以在模塊接收
完后端服務(wù)器的整個(gè)請(qǐng)求之前把壓縮流轉(zhuǎn)向客戶端。
Nginx采用了一些os提供的最新特性如對(duì)sendfile (Linux 2.2+)，accept-filter (FreeBSD 4.1+)，TCP_DEFER_ACCEPT (Linux 2.4+) 的支持，從而大大提高了性能
二、 Nginx 安裝及調(diào)試
1、Pcre 安裝
- ./configure
- make && make install
- cd ../
復(fù)制代碼
2. nginx 編譯安裝
- ./configure --user=www --group=www --prefix=/usr/local/nginx/ --with-http_stub_status_module --with-openssl=/usr/local/openssl
- make && make install
復(fù)制代碼
更詳細(xì)的模塊定制與安裝請(qǐng)參照官方wiki.
3、Nginx 配置文件測(cè)試：
- # /usr/local/nginx/sbin/nginx -t //Debug 配置文件的關(guān)鍵命令需要重點(diǎn)撐握.
- 2008/12/16 09:08:35 [info] 28412#0: the configuration file /usr/local/nginx/conf/nginx.conf syntax is ok
- 2008/12/16 09:08:35 [info] 28412#0: the configuration file /usr/local/nginx/conf/nginx.conf was tested successfully
復(fù)制代碼
3、Nginx 啟動(dòng)：
- # /usr/local/nginx/sbin/nginx
復(fù)制代碼
4、Nginx 配置文件修改重新加載：
- # kill -HUP `cat /usr/local/nginx/logs/nginx.pid
復(fù)制代碼
`
三、Nginx Rewrite
1. Nginx Rewrite 基本標(biāo)記(flags)
last - 基本上都用這個(gè)Flag。
※相當(dāng)于Apache里的[L]標(biāo)記，表示完成rewrite，不再匹配后面的規(guī)則
break - 中止Rewirte，不再繼續(xù)匹配
redirect - 返回臨時(shí)重定向的HTTP狀態(tài)302
permanent - 返回永久重定向的HTTP狀態(tài)301
※原有的url支持正則 重寫(xiě)的url不支持正則
2. 正則表達(dá)式匹配，其中：
* ~ 為區(qū)分大小寫(xiě)匹配
* ~* 為不區(qū)分大小寫(xiě)匹配
* !~和!~* 分別為區(qū)分大小寫(xiě)不匹配及不區(qū)分大小寫(xiě)不匹配
3. 文件及目錄匹配，其中：
* -f和!-f用來(lái)判斷是否存在文件
* -d和!-d用來(lái)判斷是否存在目錄
* -e和!-e用來(lái)判斷是否存在文件或目錄
* -x和!-x用來(lái)判斷文件是否可執(zhí)行
3. Nginx 的一些可用的全局變量，可用做條件判斷：
- $args
- $content_length
- $content_type
- $document_root
- $document_uri
- $host
- $http_user_agent
- $http_cookie
- $limit_rate
- $request_body_file
- $request_method
- $remote_addr
- $remote_port
- $remote_user
- $request_filename
- $request_uri
- $query_string
- $scheme
- $server_protocol
- $server_addr
- $server_name
- $server_port
- $uri
復(fù)制代碼
四、 Nginx Redirect
將所有l(wèi)inuxtone.org與netseek.linuxtone.org域名全部自跳轉(zhuǎn)到http://www.linuxtone.org
- server
- {
- listen 80;
- server_name linuxtone.org netseek.linuxtone.org;
- index index.html index.php;
- root /data/www/wwwroot;
- if ($host !~ "^www.linxtone.org$") {
- rewrite ^(.*) http://www.linuxtone.org$1 redirect;
- }
- ........................
- }
復(fù)制代碼
五、 Nginx 目錄自動(dòng)加斜線:
- if (-d $request_filename){
- rewrite ^/(.*)([^/])$ http://$host/$1$2/ permanent;
- }
復(fù)制代碼
六 Nginx Location
1．基本語(yǔ)法:[和上面rewrite正則匹配語(yǔ)法基本一致]
location [=|~|~*|^~] /uri/ { … }
* ~ 為區(qū)分大小寫(xiě)匹配
* ~* 為不區(qū)分大小寫(xiě)匹配
* !~和!~*分別為區(qū)分大小寫(xiě)不匹配及不區(qū)分大小寫(xiě)不匹配
示例1:
location = / {
# matches the query / only.
# 只匹配 / 查詢。
}
匹配任何查詢，因?yàn)樗姓?qǐng)求都已 / 開(kāi)頭。但是正則表達(dá)式規(guī)則和長(zhǎng)的塊規(guī)則將被優(yōu)先和查詢匹配
示例2:
location ^~ /images/ {
# matches any query beginning with /images/ and halts searching,
# so regular expressions will not be checked.
# 匹配任何已 /images/ 開(kāi)頭的任何查詢并且停止搜索。任何正則表達(dá)式將不會(huì)被測(cè)試。
示例3:
location ~* .(gif|jpg|jpeg)$ {
# matches any request ending in gif, jpg, or jpeg. However, all
# requests to the /images/ directory will be handled by
}
# 匹配任何已 gif、jpg 或 jpeg 結(jié)尾的請(qǐng)求。
七、 Nginx expires
1．根據(jù)文件類型expires
- # Add expires header for static content
- location ~* .(js|css|jpg|jpeg|gif|png|swf)$ {
- if (-f $request_filename) {
- root /data/www/wwwroot/bbs;
- expires 1d;
- break;
- }
- }
復(fù)制代碼
2、根據(jù)判斷某個(gè)目錄
- # serve static files
- location ~ ^/(images|javascript|js|css|flash|media|static)/ {
- root /data/www/wwwroot/down;
- expires 30d;
- }
復(fù)制代碼
八、 Nginx 防盜鏈
1. 針對(duì)不同的文件類型
- #Preventing hot linking of images and other file types
- location ~* ^.+.(gif|jpg|png|swf|flv|rar|zip)$ {
- valid_referers none blocked server_names *.linuxtone.org linuxtone.org http://localhost baidu.com;
- if ($invalid_referer) {
- rewrite ^/ ;
- # return 403;
- }
- }
復(fù)制代碼
2. 針對(duì)不同的目錄
- location /img/ {
- root /data/www/wwwroot/bbs/img/;
- valid_referers none blocked server_names *.linuxtone.org http://localhost baidu.com;
- if ($invalid_referer) {
- rewrite ^/ ;
- #return 403;
- }
- }
復(fù)制代碼
3. 同實(shí)現(xiàn)防盜鏈和expires的方法
- #Preventing hot linking of images and other file types
- location ~* ^.+.(gif|jpg|png|swf|flv|rar|zip)$ {
- valid_referers none blocked server_names *.linuxtone.org linuxtone.org http://localhost ;
- if ($invalid_referer) {
- rewrite ^/ ;
- }
- access_log off;
- root /data/www/wwwroot/bbs;
- expires 1d;
- break;
- }
復(fù)制代碼
九、 Nginx 訪問(wèn)控制
1. Nginx 身份證驗(yàn)證
- #cd /usr/local/nginx/conf
- #mkdir htpasswd
- /usr/local/apache2/bin/htpasswd -c /usr/local/nginx/conf/htpasswd/tongji linuxtone
- #添加用戶名為linuxtone
- New password: (此處輸入你的密碼)
- Re-type new password: (再次輸入你的密碼)
- Adding password for user
- http://count.linuxtone.org/tongji/data/index.html(目錄存在/data/www/wwwroot/tongji/data/目錄下)
- 將下段配置放到虛擬主機(jī)目錄，當(dāng)訪問(wèn)http://count.linuxtone/tongji/即提示要密驗(yàn)證:
- location ~ ^/(tongji)/ {
- root /data/www/wwwroot/count;
- auth_basic "LT-COUNT-TongJi";
- auth_basic_user_file /usr/local/nginx/conf/htpasswd/tongji;
- }
復(fù)制代碼
2. Nginx 禁止訪問(wèn)某類型的文件.
如，Nginx下禁止訪問(wèn)*.txt文件，配置方法如下.
- location ~* .(txt|doc)$ {
- if (-f $request_filename) {
- root /data/www/wwwroot/linuxtone/test;
- #rewrite …..可以重定向到某個(gè)URL
- break;
- }
- }
復(fù)制代碼
方法2:
- location ~* .(txt|doc)${
- root /data/www/wwwroot/linuxtone/test;
- deny all;
- }
復(fù)制代碼
實(shí)例:
禁止訪問(wèn)某個(gè)目錄
- location ~ ^/(WEB-INF)/ {
- deny all;
- }
復(fù)制代碼
3. 使用ngx_http_access_module限制ip訪問(wèn)
- location / {
- deny 192.168.1.1;
- allow 192.168.1.0/24;
- allow 10.1.1.0/16;
- deny all;
- }
復(fù)制代碼
詳細(xì)參見(jiàn)wiki: http://wiki.codemongers.com/NginxHttpAccessModule#allow
4. Nginx 下載限制并發(fā)和速率
- limit_zone linuxtone $binary_remote_addr 10m;
- server
- {
- listen 80;
- server_name down.linuxotne.org;
- index index.html index.htm index.php;
- root /data/www/wwwroot/down;
- #Zone limit
- location / {
- limit_conn linuxtone 1;
- limit_rate 20k;
- }
- ..........
- }
復(fù)制代碼
只允許客房端一個(gè)線程,每個(gè)線程20k.
【注】limit_zone linuxtone $binary_remote_addr 10m; 這個(gè)可以定義在主的
5. Nginx 實(shí)現(xiàn)Apache一樣目錄列表
- location / {
- autoindex on;
- }
復(fù)制代碼
6. 上文件大小限制
主配置文件里加入如下，具體大小根據(jù)你自己的業(yè)務(wù)做調(diào)整。
client_max_body_size 10m;
十、 Nginx 日志處理
1.Nginx 日志切割
#contab -e
59 23 * * * /usr/local/sbin/logcron.sh /dev/null 2>&1
[root@count ~]# cat /usr/local/sbin/logcron.sh
- #!/bin/bash
- log_dir="/data/logs"
- time=`date +%Y%m%d`
- /bin/mv ${log_dir}/access_linuxtone.org.log ${log_dir}/access_count.linuxtone.org.$time.log
- kill -USR1 `cat /var/run/nginx.pid`
復(fù)制代碼
更多的日志分析與處理就關(guān)注(同時(shí)歡迎你參加討論):http://bbs.linuxtone.org/forum-8-1.html
2.利用AWSTATS分析NGINX日志
設(shè)置好Nginx日志格式,仍后利用awstats進(jìn)行分析.
請(qǐng)參考: http://bbs.linuxtone.org/thread-56-1-1.html
3. Nginx 如何不記錄部分日志
日志太多，每天好幾個(gè)G，少記錄一些，下面的配置寫(xiě)到server{}段中就可以了
location ~ .*.(js|jpg|JPG|jpeg|JPEG|css|bmp|gif|GIF)$
{
access_log off;
}
十一、Nginx Cache服務(wù)配置
如果需要將文件緩存到本地，則需要增加如下幾個(gè)子參數(shù)：
- proxy_store on;
- proxy_store_access user:rw group:rw all:rw;
- proxy_temp_path 緩存目錄;
復(fù)制代碼
其中，
proxy_store on用來(lái)啟用緩存到本地的功能，
proxy_temp_path用來(lái)指定緩存在哪個(gè)目錄下，如：proxy_temp_path html;
在經(jīng)過(guò)上一步配置之后，雖然文件被緩存到了本地磁盤(pán)上，但每次請(qǐng)求仍會(huì)向遠(yuǎn)端拉取文件，為了避免去遠(yuǎn)端拉取文件，必須修改
- proxy_pass：
- if ( !-e $request_filename) {
- proxy_pass http://mysvr;
- }
復(fù)制代碼
即改成有條件地去執(zhí)行proxy_pass，這個(gè)條件就是當(dāng)請(qǐng)求的文件在本地的proxy_temp_path指定的目錄下不存在時(shí)，再向后端拉取。
更多更高級(jí)的應(yīng)用可以研究ncache,詳細(xì)請(qǐng)參照http://bbs.linuxtone.org 里ncache相關(guān)的貼子.
十二、Nginx 負(fù)載均衡
1. Nginx 負(fù)載均衡基礎(chǔ)知識(shí)
nginx的upstream目前支持4種方式的分配
1)、輪詢（默認(rèn)）
每個(gè)請(qǐng)求按時(shí)間順序逐一分配到不同的后端服務(wù)器，如果后端服務(wù)器down掉，能自動(dòng)剔除。
2)、weight
指定輪詢幾率，weight和訪問(wèn)比率成正比，用于后端服務(wù)器性能不均的情況。
2)、ip_hash
每個(gè)請(qǐng)求按訪問(wèn)ip的hash結(jié)果分配，這樣每個(gè)訪客固定訪問(wèn)一個(gè)后端服務(wù)器，可以解決session的問(wèn)題。
3)、fair（第三方）
按后端服務(wù)器的響應(yīng)時(shí)間來(lái)分配請(qǐng)求，響應(yīng)時(shí)間短的優(yōu)先分配。
4)、url_hash（第三方）
2. Nginx 負(fù)載均衡實(shí)例1
- upstream bbs.linuxtone.org {#定義負(fù)載均衡設(shè)備的Ip及設(shè)備狀態(tài)
- server 127.0.0.1:9090 down;
- server 127.0.0.1:8080 weight=2;
- server 127.0.0.1:6060;
- server 127.0.0.1:7070 backup;
- }
復(fù)制代碼
在需要使用負(fù)載均衡的server中增加
proxy_pass http://bbs.linuxtone.org/;
每個(gè)設(shè)備的狀態(tài)設(shè)置為:
a) down 表示單前的server暫時(shí)不參與負(fù)載
b) weight 默認(rèn)為1.weight越大，負(fù)載的權(quán)重就越大。
c) max_fails ：允許請(qǐng)求失敗的次數(shù)默認(rèn)為1.當(dāng)超過(guò)最大次數(shù)時(shí)，返回proxy_next_upstream 模塊定義的錯(cuò)誤
d) fail_timeout:max_fails次失敗后，暫停的時(shí)間。
e) backup： 其它所有的非backup機(jī)器down或者忙的時(shí)候，請(qǐng)求backup機(jī)器。所以這臺(tái)機(jī)器壓力會(huì)最輕。
nginx支持同時(shí)設(shè)置多組的負(fù)載均衡，用來(lái)給不用的server來(lái)使用。
client_body_in_file_only 設(shè)置為On 可以講client post過(guò)來(lái)的數(shù)據(jù)記錄到文件中用來(lái)做debug
client_body_temp_path 設(shè)置記錄文件的目錄 可以設(shè)置最多3層目錄
location 對(duì)URL進(jìn)行匹配.可以進(jìn)行重定向或者進(jìn)行新的代理 負(fù)載均衡
3. Nginx 負(fù)載均衡實(shí)例 2
按訪問(wèn)url的hash結(jié)果來(lái)分配請(qǐng)求，使每個(gè)url定向到同一個(gè)后端服務(wù)器，后端服務(wù)器為緩存時(shí)比較有效,也可以用作提高Squid緩存命中率.
簡(jiǎn)單的負(fù)載均等實(shí)例:
#vi nginx.conf //nginx主配置文件核心配置
- ……….
- #loadblance my.linuxtone.org
- upstream my.linuxtone.org {
- ip_hash;
- server 127.0.0.1:8080;
- server 192.168.169.136:8080;
- server 219.101.75.138:8080;
- server 192.168.169.117;
- server 192.168.169.118;
- server 192.168.169.119;
- }
- …………..
- include vhosts/linuxtone_lb.conf;
- ………
- # vi proxy.conf
- proxy_redirect off;
- proxy_set_header Host $host;
- proxy_set_header X-Real-IP $remote_addr;
- proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
- client_max_body_size 50m;
- client_body_buffer_size 256k;
- proxy_connect_timeout 30;
- proxy_send_timeout 30;
- proxy_read_timeout 60;
- proxy_buffer_size 4k;
- proxy_buffers 4 32k;
- proxy_busy_buffers_size 64k;
- proxy_temp_file_write_size 64k;
- proxy_next_upstream error timeout invalid_header http_500 http_503 http_404;
- proxy_max_temp_file_size 128m;
- proxy_store on;
- proxy_store_access user:rw group:rw all:r;
- #nginx cache
- #client_body_temp_path /data/nginx_cache/client_body 1 2;
- proxy_temp_path /data/nginx_cache/proxy_temp 1 2;
復(fù)制代碼
#vi linuxtone_lb.conf
- server
- {
- listen 80;
- server_name my.linuxtone.org;
- index index.php;
- root /data/www/wwwroot/mylinuxtone;
- if (-f $request_filename) {
- break;
- }
- if (-f $request_filename/index.php) {
- rewrite (.*) $1/index.php break;
- }
- error_page 403 http://my.linuxtone.org/member.php?m=user&a=login;
- location / {
- if ( !-e $request_filename) {
- proxy_pass http://my.linuxtone.org;
- break;
- }
- include /usr/local/nginx/conf/proxy.conf;
- }
- }
復(fù)制代碼
十三、Nginx簡(jiǎn)單優(yōu)化
1. 減小nginx編譯后的文件大小 (Reduce file size of nginx)
默認(rèn)的nginx編譯選項(xiàng)里居然是用debug模式(-g)的（debug模式會(huì)插入很多跟蹤和ASSERT之類），編譯以后一個(gè)nginx有好幾兆。去掉nginx的debug模式編譯，編譯以后只有幾百K
在 auto/cc/gcc，最后幾行有：
# debug
注釋掉或刪掉這幾行，重新編譯即可。
2. 修改Nginx的header偽裝服務(wù)器
1) 修改nginx.h
- #vi nginx-0.7.30/src/core/nginx.h
- #define NGINX_VERSION "1.8"
- #define NGINX_VER "LTWS/" NGINX_VERSION
- #define NGINX_VAR "NGINX"
- #define NGX_OLDPID_EXT ".oldbin"
復(fù)制代碼
2) 修改nginx_http_header_filter_module
#vi nginx-0.7.30/src/http/ngx_http_header_filter_module.c
將如下
- static char ngx_http_server_string[] = "Server: nginx" CRLF;
復(fù)制代碼
修改為
- static char ngx_http_server_string[] = "Server: LTWS" CRLF;
復(fù)制代碼
a) 修改nginx_http_header_filter_module
#vi nginx-0.7.30/src/http/ngx_http_special_response.c
將如下：
- static u_char ngx_http_error_full_tail[] =
- "<hr><center>" NGINX_VER "</center>" CRLF
- "</body>" CRLF
- "</html>" CRLF
- ;
復(fù)制代碼
- static u_char ngx_http_error_tail[] =
- "<hr><center>nginx</center>" CRLF
- "</body>" CRLF
- "</html>" CRLF
- ;
復(fù)制代碼
修改為:
- static u_char ngx_http_error_full_tail[] =
- "<center> "NGINX_VER" </center>" CRLF
- "<hr><center>http://www.linuxtone.org</center>" CRLF
- "</body>" CRLF
- "</html>" CRLF
- ;
- static u_char ngx_http_error_tail[] =
- "<hr><center>LTWS</center>" CRLF
- "</body>" CRLF
- "</html>" CRLF
- ;
復(fù)制代碼
修改后重新編譯一下環(huán)境,
404錯(cuò)誤的時(shí)候顯示效果圖（如果沒(méi)有指定錯(cuò)誤頁(yè)的話）：
利用curl命令查看服務(wù)器header
3.為特定的CPU指定CPU類型編譯優(yōu)化.
默認(rèn)nginx使用的GCC編譯參數(shù)是-O
需要更加優(yōu)化可以使用以下兩個(gè)參數(shù)
--with-cc-opt='-O3'
--with-cpu-opt=opteron
使得編譯針對(duì)特定CPU以及增加GCC的優(yōu)化.
此方法僅對(duì)性能有所改善并不會(huì)有很大的性能提升，供朋友們參考.
CPUD類型確定: # cat /proc/cpuinfo | grep "model name"
編譯優(yōu)化參數(shù)參考：http://en.gentoo-wiki.com/wiki/Safe_Cflags
4.Tcmalloc優(yōu)化Nginx 性能
- # wget http://download.savannah.gnu.org/releases/libunwind/libunwind-0.99-alpha.tar.gz
- # tar zxvf libunwind-0.99-alpha.tar.gz
- # cd libunwind-0.99-alpha/
- # CFLAGS=-fPIC ./configure
- # make CFLAGS=-fPIC
- # make CFLAGS=-fPIC install
- # wget http://google-perftools.googlecode.com/files/google-perftools-0.98.tar.gz
- # tar zxvf google-perftools-0.98.tar.gz
- # cd google-perftools-0.98/
- # ./configure
- # make && make install
- # echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf
- # ldconfig
- # lsof -n | grep tcmalloc
復(fù)制代碼
編譯nginx 加載google_perftools_module:
./configure --with-google_perftools_module
在主配置文件加入nginx.conf 添加:
google_perftools_profiles /path/to/profile;
5.內(nèi)核參數(shù)優(yōu)化
# vi /etc/sysctl.conf #在末尾增加以下內(nèi)容：
- net.ipv4.tcp_fin_timeout = 30
- net.ipv4.tcp_keepalive_time = 300
- net.ipv4.tcp_syncookies = 1
- net.ipv4.tcp_tw_reuse = 1
- net.ipv4.tcp_tw_recycle = 1
- net.ipv4.ip_local_port_range = 5000 65000
復(fù)制代碼
#使配置立即生效
/sbin/sysctl -p
十四、如何構(gòu)建高性的LEMP
請(qǐng)參見(jiàn): http://www.linuxtone.org/lemp/lemp.pdf
1、提供完整的配置腳本下載：http://www.linuxtone.org/lemp/scripts.tar.gz
2、提供NGINX常見(jiàn)配置范例含(虛擬主機(jī)，防盜鏈，Rewrite,訪問(wèn)控制，負(fù)載均衡
Discuz相關(guān)程序靜態(tài)化及等等),你只要稍稍修改即可線上應(yīng)用。 3、將原版的xcache替換成EA，并提供相關(guān)簡(jiǎn)單調(diào)優(yōu)腳本及配置文件。
更多的及更新資料請(qǐng)關(guān)注: http://www.linuxtone.org
十五、Nginx監(jiān)控
1、 RRDTOOL+Perl腳本畫(huà)圖監(jiān)控
先安裝好rrdtool ，關(guān)于rrdtool本文不作介紹，具體安裝請(qǐng)參照l(shuí)inuxtone監(jiān)控版塊.
#cd /usr/local/sbnin
#wget http://blog.kovyrin.net/files/mrtg/rrd_nginx.pl.txt
#mv rrd_nginx.pl.txt rrd_nginx.pl
#chmod a+x rrd_nginx.pl
#vi rrd_nginx.pl //配置腳本文件設(shè)置好路徑
#!/usr/bin/perl
use RRDs;
use LWP::UserAgent;
# define location of rrdtool databases
my $rrd = '/data/www/wwwroot/nginx/rrd';
# define location of images
my $img = '/data/www/wwwroot/nginx/html';
# define your nginx stats URL
my $URL = "http://219.232.244.13/nginx_status";
…………
【注】根據(jù)自己具體的狀況修改相應(yīng)的路徑.
#crontab –e //加入如下
* * * * * /usr/local/sbin/rrd_nginx.pl
重啟crond后，通過(guò)配置nginx虛擬主機(jī)指到/data/www/wwwroot/nginx/html目錄，通過(guò)crond自動(dòng)執(zhí)行perl腳本會(huì)生成很多圖片.
http://xxx/connections-day.png即可看到服務(wù)器狀態(tài)圖。
2、 官方Nginx-rrd 監(jiān)控服務(wù)（多虛擬主機(jī)）（推薦）
網(wǎng)址：http://www.nginx.eu/nginx-rrd.html
此解決方案其實(shí)是基于上述監(jiān)控方案的一個(gè)改進(jìn)和增強(qiáng)，同樣先安裝好rrdtool這個(gè)畫(huà)圖工具和相應(yīng)的perl模塊再做如下操作：
# yum install perl-HTML*
先建立好生成的庫(kù)存和圖片存放錄
- #mkdir -p /data/www/wwwroot/nginx/{rrd,html}
- #cd /usr/local/sbin
- #wget http://www.nginx.eu/nginx-rrd/nginx-rrd-0.1.4.tgz
- #tar zxvf nginx-rrd-0.1.4.tgz
- #cd nginx-rrd-0.1.4
- #cd etc/
- #cp nginx-rrd.conf /etc
- #cd etc/cron.d
- #cp nginx-rrd.cron /etc/cron.d
- #cd /usr/local/src/nginx-rrd-0.1.4/html
- # cp index.php /data/www/wwwroot/nginx/html/
- #cd /usr/local/src/nginx-rrd-0.1.4/usr/sbin
- #cp * /usr/sbin/
復(fù)制代碼
#vi /etc/nginx-rrd.conf
- #####################################################
- #
- # dir where rrd databases are stored
- RRD_DIR="/data/www/wwwroot/nginx/rrd";
- # dir where png images are presented
- WWW_DIR="/data/www/wwwroot/nginx/html";
- # process nice level
- NICE_LEVEL="-19";
- # bin dir
- BIN_DIR="/usr/sbin";
- # servers to test
- # server_utl;server_name
- SERVERS_URL="http://219.32.205.13/nginx_status;219.32.205.13 http://www.linuxtone.org/nginx_status;www.linuxtone.org""
復(fù)制代碼
//根據(jù)你的具體情況做調(diào)整.
SEVERS_URL 格式 http://domain1/nginx_status;domain1 http://domain2/nginx_status;domain2
這種格式監(jiān)控多虛擬主機(jī)連接狀態(tài)：
重點(diǎn)啟crond服務(wù)，仍后通過(guò)http://219.32.205.13/nginx/html/ 即可訪問(wèn)。配置過(guò)程很簡(jiǎn)單！
3、 CACTI模板監(jiān)控Nginx
利用Nginx_status狀態(tài)來(lái)畫(huà)圖實(shí)現(xiàn)CACTI監(jiān)控
nginx編譯時(shí)允許http_stub_status_module
# vi /usr/local/nginx/conf/nginx.conf
- location /nginx_status {
- stub_status on;
- access_log off;
- allow 192.168.1.37;
- deny all;
- }
復(fù)制代碼
- # kill -HUP `cat /usr/local/nginx/logs/nginx.pid`
- # wget http://forums.cacti.net/download.php?id=12676
- # tar xvfz cacti-nginx.tar.gz
- # cp cacti-nginx/get_nginx_socket_status.pl /data/cacti/scripts/
- # cp cacti-nginx/get_nginx_clients_status.pl /data/cacti/scripts/
- # chmod 755 /data/cacti/scripts/get_nginx*
復(fù)制代碼
檢測(cè)插件
- # /data/cacti/scripts/get_nginx_clients_status.pl http://192.168.1.37/nginx_status
復(fù)制代碼
在cacti管理面板導(dǎo)入
cacti_graph_template_nginx_clients_stat.xml
cacti_graph_template_nginx_sockets_stat.xml
十六、常見(jiàn)問(wèn)題與錯(cuò)誤處理
1、400 bad request錯(cuò)誤的原因和解決辦法
配置nginx.conf相關(guān)設(shè)置如下.
client_header_buffer_size 16k;
large_client_header_buffers 4 64k;
根據(jù)具體情況調(diào)整，一般適當(dāng)調(diào)整值就可以。
2、Nginx 502 Bad Gateway錯(cuò)誤
proxy_next_upstream error timeout invalid_header http_500 http_503;
或者嘗試設(shè)置:
large_client_header_buffers 4 32k;
3、Nginx出現(xiàn)的413 Request Entity Too Large錯(cuò)誤
這個(gè)錯(cuò)誤一般在上傳文件的時(shí)候會(huì)出現(xiàn)，
編輯Nginx主配置文件Nginx.conf，找到http{}段，添加
client_max_body_size 10m; //設(shè)置多大根據(jù)自己的需求作調(diào)整.
如果運(yùn)行php的話這個(gè)大小client_max_body_size要和php.ini中的如下值的最大值一致或者稍大，這樣就不會(huì)因?yàn)樘峤粩?shù)據(jù)大小不一致出現(xiàn)的錯(cuò)誤。
post_max_size = 10M
upload_max_filesize = 2M
4、解決504 Gateway Time-out(nginx)
遇到這個(gè)問(wèn)題是在升級(jí)discuz論壇的時(shí)候遇到的
一般看來(lái), 這種情況可能是由于nginx默認(rèn)的fastcgi進(jìn)程響應(yīng)的緩沖區(qū)太小造成的, 這將導(dǎo)致fastcgi進(jìn)程被掛起, 如果你的fastcgi服務(wù)對(duì)這個(gè)掛起處理的不好, 那么最后就極有可能導(dǎo)致504 Gateway Time-out
現(xiàn)在的網(wǎng)站, 尤其某些論壇有大量的回復(fù)和很多內(nèi)容的, 一個(gè)頁(yè)面甚至有幾百K。
默認(rèn)的fastcgi進(jìn)程響應(yīng)的緩沖區(qū)是8K, 我們可以設(shè)置大點(diǎn)
在nginx.conf里, 加入： fastcgi_buffers 8 128k
這表示設(shè)置fastcgi緩沖區(qū)為8×128k
當(dāng)然如果您在進(jìn)行某一項(xiàng)即時(shí)的操作, 可能需要nginx的超時(shí)參數(shù)調(diào)大點(diǎn)，例如設(shè)置成60秒：send_timeout 60;
只是調(diào)整了這兩個(gè)參數(shù), 結(jié)果就是沒(méi)有再顯示那個(gè)超時(shí), 可以說(shuō)效果不錯(cuò), 但是也可能是由于其他的原因, 目前關(guān)于nginx的資料不是很多, 很多事情都需要長(zhǎng)期的經(jīng)驗(yàn)累計(jì)才有結(jié)果, 期待您的發(fā)現(xiàn)哈!
5、如何使用Nginx Proxy
朋友一臺(tái)服務(wù)器運(yùn)行tomcat 為8080端口,IP:192.168.1.2:8080,另一臺(tái)機(jī)器IP:192.168.1.8. 朋友想通過(guò)訪問(wèn)http://192.168.1.8即可訪問(wèn)tomcat服務(wù).配置如下:
在192.168.1.8的nginx.conf上配置如下:
- server {
- listen 80;
- server_name java.linuxtone.org
- location / {
- proxy_pass http://192.168.1.2:8080;
- include /usr/local/nginx/conf/proxy.conf;
- }
- }
復(fù)制代碼
6、如何關(guān)閉Nginx的LOG
access_log /dev/null; error_log /dev/null;
十七、相關(guān)資源下載
1.nginx配置示例及腳本下載:
# wget http://www.linuxtone.org/lemp/scripts.tar.gz #此腳本范例定期更新.
相關(guān)話題 （查看更多，知識(shí)庫(kù)搜索）
其中以下這項(xiàng)挺值得留意的。
Tcmalloc 不單可用于 Mysql 的優(yōu)化，還能應(yīng)用于 Nginx
雖說(shuō) Nginx 本身的性能跟系統(tǒng)占用已經(jīng)做到很優(yōu)秀。
4.Tcmalloc優(yōu)化Nginx 性能
- # wget http://download.savannah.gnu.org/releases/libunwind/libunwind-0.99-alpha.tar.gz
- # tar zxvf libunwind-0.99-alpha.tar.gz
- # cd libunwind-0.99-alpha/
- # CFLAGS=-fPIC ./configure
- # make CFLAGS=-fPIC
- # make CFLAGS=-fPIC install
- # wget http://google-perftools.googlecode.com/files/google-perftools-0.98.tar.gz
- # tar zxvf google-perftools-0.98.tar.gz
- # cd google-perftools-0.98/
- # ./configure
- # make && make install
- # echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf
- # ldconfig
- # lsof -n | grep tcmalloc
2010年1月18日
#
摘要: tabBar.vim
這個(gè)插件實(shí)現(xiàn)了類似UltraEdit中的標(biāo)簽頁(yè)的功能，而且能通過(guò)Alt-<n>來(lái)切換,
安裝：
拷貝文件到[你的gvim的安裝目錄](méi)"vimfiles"plugin"中即可！
下載：
http://www.vim.org/scripts/script.php?script_id=1338
C:/Program Files/Vim/_v... 閱讀全文
2010年1月5日
#
學(xué)習(xí)：
http://blog.chinaunix.net/u1/59571/showart_2077664.html
個(gè)人對(duì)上面文章做的 筆記共享出來(lái) 和大家分享！
2009年12月20日
#
python easy_install moin 或 下載 moin-1.9.0 編譯
設(shè)置 path 中有 moin.py
#我這 參考
path = $PATH:/Python25/moin-1.9.0/MoinMoin/script
# wikiconfig.py 下面我點(diǎn)下 參數(shù) ，大家看代碼 就知道了
vi /Python25/moin-1.9.0/wiki/config/ wikiconfig.py
#instance_dir = '/where/ever/your/instance/is'
instance_dir = wikiconfig_dir+'/../'
# Where your own wiki pages are (make regular backups of this directory):
data_dir = os.path.join(instance_dir, 'data-1', '') # path with trailing /
navi_bar = [
# If you want to show your page_front_page here:
#u'%(page_front_page)s',
u'標(biāo)題',
u'FindPage',
u'HelpContents',
]
language_default = 'zh'
在修改linux 時(shí)不起作用 ：
修改/root/tools/moin-1.9.0/MoinMoin/script/server/standalone.py 全局先
運(yùn)行：
$>moin server standalone --config-dir=/root/wiki/mywiki/config/ --hostname=192.168.102.207 --port=18081
命令是可調(diào)參數(shù)：
#/root/tools/moin-1.9.0/MoinMoin/script/server/standalone.py
class PluginScript(MoinScript):
def __init__(self, argv, def_values):
MoinScript.__init__(self, argv, def_values)
self.parser.add_option(
"--docs", dest="docs",
help="Set the documents directory. Default: use builtin MoinMoin/web/static/htdocs"
)
self.parser.add_option(
"--user", dest="user",
help="Set the user to change to. UNIX only. Default: Don't change"
)
self.parser.add_option(
"--group", dest="group",
help="Set the group to change to. UNIX only. Default: Don't change"
)
self.parser.add_option(
"--port", dest="port", type="int",
help="Set the port to listen on. Default: 8080"
)
self.parser.add_option(
"--hostname", "--interface", dest="hostname",
help="Set the ip/hostname to listen on. Use \"\" for all interfaces. Default: localhost"
)
self.parser.add_option(
"--start", dest="start", action="store_true",
help="Start server in background."
)
self.parser.add_option(
"--stop", dest="stop", action="store_true",
help="Stop server in background."
)
self.parser.add_option(
"--pidfile", dest="pidfile",
help="Set file to store pid of moin daemon in. Default: moin.pid"
)
self.parser.add_option(
"--debug", dest="debug",
help="Debug mode of server. off: no debugging (default), web: for browser based debugging, external: for using an external debugger."
)
#成功運(yùn)行 后
2009-12-20 23:31:31,796 WARNING MoinMoin.log:139 using logging configuration read from built-in fallback in MoinMoin.log module!
2009-12-20 23:31:32,515 INFO werkzeug:106 * Running on http://192.168.1.100:8080/
一些簡(jiǎn)單的語(yǔ)法介紹『其中 HelpOnDrawings 的功能 有“驚艷”的效果！！呵呵，自己搭建個(gè)自己的wiki 出來(lái) 看吧』
2009年12月11日
#
定義：
灰羊群 （無(wú)主見(jiàn)的用戶群體）
黑羊 （ 對(duì)自己需要什么有明確的認(rèn)識(shí)，我們一般稱為專家用戶。 ）
1. 區(qū)分 灰（無(wú)主見(jiàn)） 黑 羊群
2.
user session 關(guān)聯(lián) #當(dāng) 關(guān)聯(lián)關(guān)系維護(hù)使用 用戶的會(huì)話ID（用戶不同心情，起始在數(shù)據(jù)中就應(yīng)該是不同分類的）
user 推薦 # 而推薦出產(chǎn)品 還是 跟 用戶唯一編號(hào)有關(guān)
#在推薦中需要描述 用戶的多角度 問(wèn)題
3.
蠻力推薦（ 全數(shù)據(jù) ；描述初期清洗后的數(shù)據(jù) ） 適合 產(chǎn)品關(guān)聯(lián)
清洗后期的數(shù)據(jù)（包含用戶多維度描述） 適合 用戶關(guān)聯(lián)
4.
專家跟隨推薦
描述：
用戶分類 找到黑綿羊
找到 一群灰綿羊 和 一只黑綿羊的關(guān)聯(lián)關(guān)系
讓 一群灰綿羊 可以看 黑綿羊 動(dòng)作
1，負(fù)重深蹲，仰臥起坐，慢跑，主要練習(xí)心肺功能（腿部鍛煉很重要，如果深蹲完了沒(méi)體力，慢跑可以改成慢走放松）
2，臥推，仰臥飛鳥(niǎo)，站立飛鳥(niǎo)，仰臥起坐，慢跑，主要練習(xí)胸部和肩部（飛鳥(niǎo)就是側(cè)舉，仰臥的時(shí)候用的是胸的力量，站立時(shí)用的是肩）
3，引體向上，劃船，曲臂，主要練習(xí)背部和胳膊，最后加上固定的項(xiàng)目：仰臥起坐和慢跑放松
1的消耗最大，要自己狀態(tài)最好的時(shí)候去
2主要是練習(xí)和“推，舉”相關(guān)的肌群
3是“拉，收”相關(guān)的肌群
而且有個(gè)原則，就是先練大項(xiàng)目，再練小項(xiàng)目。
深蹲、臥推、引體向上，這3個(gè)是最基本的，別的其實(shí)都可有可無(wú)
另外，適當(dāng)慢跑也是必要的，是很好的放松和有氧運(yùn)動(dòng)，促進(jìn)代謝。當(dāng)然，如果有條件可以去戶外跑，寧可跑馬路，也別在健身房里跑，空氣不理想
做動(dòng)作也是要循序漸進(jìn)，每次從很輕的重量開(kāi)始，逐步加大負(fù)荷
2009年12月8日
#
下面介紹的排序都為：非比較排序法
這里個(gè)人認(rèn)為在某些特定的地方非比較排序的速度非常明顯；
比如 ： 對(duì)待排數(shù)據(jù)中有順序分類，使用鴿巢總體分類，然后對(duì)不同類別的待排小數(shù)據(jù)集合采用 插入，快排等排序方式
Counting sort ：計(jì)數(shù)排序
描述：迭代待排序數(shù)組出元素x，確定小于此元素[z]個(gè)數(shù)，然后把x放到它在的最終輸出數(shù)組[z]上。
特性：與待排值有關(guān)；穩(wěn)定的排序算法；待排序數(shù)據(jù)要求過(guò)于嚴(yán)格，無(wú)實(shí)際用處；
算法的步驟如下：
1. 找出待排序的數(shù)組中最大和最小的元素
2. 統(tǒng)計(jì)數(shù)組中每個(gè)值為i的元素出現(xiàn)的次數(shù)，存入數(shù)組C的第i項(xiàng)
3. 對(duì)所有的計(jì)數(shù)累加（從C中的第一個(gè)元素開(kāi)始，每一項(xiàng)和前一項(xiàng)相加）
4. 反向填充目標(biāo)數(shù)組：將每個(gè)元素i放在新數(shù)組的第C(i)項(xiàng)，每放一個(gè)元素就將C(i)減去1
Radix sort：基數(shù)排序
描述：將所有待比較數(shù)值(正整數(shù))統(tǒng)一為同樣的數(shù)位長(zhǎng)度,數(shù)位較短的數(shù)前面補(bǔ)零. 然后, 從最低位開(kāi)始, 依次進(jìn)行一次排序.這樣從最低位排序一直到最高位排序完成以后, 數(shù)列就變成一個(gè)有序序列.
排序方式：LSD 由右向左排；MSD 由左向右排
特性：非比較排序；待排數(shù)據(jù)需要統(tǒng)一格式；
假設(shè)需排序數(shù)列的取值范圍從1...k,我們于是建一個(gè)K+1元的數(shù)組 a[]，并賦初值為0，然后便開(kāi)始排序工作：
算法的步驟如下：
1. 按輸入順序讀入數(shù)列，如果所讀的元素為i(1<=i<=k),我們就將a[i]的值加一，這樣直到讀完所有的元素。
2. 讀出元素并排序：我們遍歷整個(gè)數(shù)組，如果a[i]=j(j>=0),我們就輸出j次i(表示元素i在原先數(shù)列中出現(xiàn)了j次),這樣輸出的序列就是已排序的。
3. 由于一般排序算法涉及到元素之間的比較，如果化成比較樹(shù)可以知道，這樣的排序算法復(fù)雜度的下限是O(N*lnN),而計(jì)數(shù)排序沒(méi)有比較元素，所以所需排序時(shí)間就少了，我們可以看到計(jì)數(shù)排序的復(fù)雜度為O(n*k)，其中k（k的定義同上）為合并排列所需的時(shí)間，是個(gè)常數(shù)。
4. 此算法適合所需排列的元素取值范圍不大的情況下，否則會(huì)造成空間的消耗，比如，一共100個(gè)元素，其取值范圍從1-100000，顯然這個(gè)時(shí)候用基數(shù)排序是不合適的。
Bucket sort：桶排序
描述：工作的原理是將陣列分到有限數(shù)量的桶子里。每個(gè)桶子再個(gè)別排序（有可能再使用別的排序算法或是以遞回方式繼續(xù)使用桶排序進(jìn)行排序）。
桶排序以下列程序進(jìn)行：
1. 設(shè)置一個(gè)定量的陣列當(dāng)作空桶子。
2. 尋訪序列，并且把項(xiàng)目一個(gè)一個(gè)放到對(duì)應(yīng)的桶子去。
3. 對(duì)每個(gè)不是空的桶子進(jìn)行排序。
4. 從不是空的桶子里把項(xiàng)目再放回原來(lái)的序列中。
Pigeonhole sort：鴿巢排序
描述：是一種時(shí)間復(fù)雜度為O(n)且在不可避免遍歷每一個(gè)元素并且排序的情況下效率最好的一種排序算法. 但它只有在差值(或者可被映射在差值)很小的范圍內(nèi)的數(shù)值排序的情況下實(shí)用.
算法的步驟如下：與桶排同
2009年12月7日
#
date demo:
實(shí)例:
$>date
Mon Dec 7 15:43:39 CST 2009
#格式化輸出
$> date +"%Y-%m-%d"
2009-12-07
#時(shí)間游走 當(dāng)前時(shí)間 2009-12-07
# year , month , day ,hour , minute,second - ago
#昨天輸出
$> date -d "1 day ago" +"%Y-%m-%d"
2009-12-06
#2秒后輸出
$> date -d "2 second" +"%Y-%m-%d %H:%M.%S"
2009-12-07 15:50.04
#傳說(shuō)中的 1234567890 秒
$>date -d "1970-01-01 1234567890 seconds" +"%Y-%m-%d %H:%m:%S"
2009-02-13 23:02:30
#其他格式的轉(zhuǎn)換
date -d "$(echo "03/Nov/2009 11:04:28" |perl -ne 'print "$2 $1 $3 $4\n" if /(.*?)"/(.*?)"/(.*?) (.*)/;') " +%Y-%m-%d
2009-11-03
#普通 轉(zhuǎn)格式
$> date -d "2009-12-12" +"%Y/%m/%d %H:%M.%S"
2009/12/12 00:00.00
#apache 格式轉(zhuǎn)換
$>date -d "Dec 5, 2009 12:00:37 AM" +"%Y-%m-%d %H:%M.%S"
2009-12-05 00:00.37
#格式轉(zhuǎn)換 后時(shí)間 游走
$>date -d "Dec 5, 2009 12:00:37 AM 2 year ago" +"%Y-%m-%d %H:%M.%S"
2007-12-05 00:00.37
#時(shí)間差
#一小時(shí) 3600
#一天 86400 秒
$>st=$(date -d "Dec 5, 2009 12:00:37 AM 1 day ago 1 hour ago " +"%s")
$>et=$(date -d "Dec 5, 2009 12:00:37 AM" +"%s")
$>echo "時(shí)間差$[($et-$st)/86400]天，$[($et-$st)/3600%24]小時(shí)"
時(shí)間差1天，1小時(shí)
date --help
Usage: date [OPTION] [+FORMAT]
or: date [-u|--utc|--universal] [MMDDhhmm[[CC]YY][.ss]]
Display the current time in the given FORMAT, or set the system date.
-d, --date=STRING display time described by STRING, not `now'
-f, --file=DATEFILE like --date once for each line of DATEFILE
-r, --reference=FILE display the last modification time of FILE
-R, --rfc-2822 output date and time in RFC 2822 format
--rfc-3339=TIMESPEC output date and time in RFC 3339 format.
TIMESPEC=`date', `seconds', or `ns' for
date and time to the indicated precision.
-s, --set=STRING set time described by STRING
-u, --utc, --universal print or set Coordinated Universal Time
--help display this help and exit
--version output version information and exit
工具為 dist/myImg.exe
工具使用:
在 dist 中
myImg.exe Ratio c:/需要等比壓縮圖片/*.jpg d:/等比后路徑 等比款width 等比高h(yuǎn)eight
myImg.exe Watermark c:/水印圖片/x.png c:/需要加水印圖片/*.jpg d:/添加水印后圖片 加水印width處 加水印height處
等比壓縮實(shí)例:
myImg.exe Ratio
"C:"Documents and Settings"lky"My Documents"My Dropbox"tools"img"src"python"dist"test"img"*.jpg"
"C:"Documents and Settings"lky"My Documents"MyDropbox"tools"img"src"python"dist"test"toimg2"
600 400
結(jié)果在 ../dist"test"toimg 目錄下 生成 等比圖片 testratio_600_400.jpg
水印添加實(shí)例:
myImg.exe Watermark
"C:"Documents and Settings"lky"My Documents"My Dropbox"tools"img"src"python"dist"test"img"logo.png"
"C:"Documents and Settings"lky"My Documents"My Dropbox"tools"img"src"python"dist"test"toimg2"*.jpg"
"C:"Documents and Settings"lky"My Documents"My Dropbox"tools"img"src"python"dist"test"toimg3"
100 220
結(jié)果在 ../dist"test"toimg3 目錄下 生成 等比圖片 test_ratio_600_400_watermark_100_220.jpg
安裝 python PIL 包
和安裝 python py2exe
工具腳本 py
工具編譯過(guò)程:
python setup.py py2exe
import sys
def imgRatio(imgpath,tpath='.',width=600,height=400):
import Image,os
im = Image.open( imgpath )
im.thumbnail( (width,height) )
imgpath = os.path.split(imgpath)[1]
if not os.path.exists(tpath) : os.makedirs(tpath)
im.save( tpath+'/'+imgpath.split('.')[0]+'_ratio_'+str(width)+'_'+str(height)+'.jpg' )
def imgWatermark(imgwate,imgpath,sw=100,sh=50,tpath='.'):
import Image,os
baseim = Image.open( imgpath )
floatim = Image.open( imgwate )
baseim.paste( floatim, (sw,sh ) )
imgpath = os.path.split(imgpath)[1]
if not os.path.exists(tpath) : os.makedirs(tpath)
baseim.save( tpath+'/'+imgpath.split('.')[0]+'_watermark_'+str(sw)+'_'+str(sh)+'.jpg' )
args = sys.argv
import glob,os
# Ratio /path/*.jpg /tpath width height
if args[1] == 'Ratio' :
for img in glob.glob(args[2]) :
imgRatio(os.path.abspath(img),args[3],int(args[4]),int(args[5]))
# Watermark /path/x.png /path/*.jpg /tpath width height
if args[1] == 'Watermark' :
for img in glob.glob(args[3]) :
imgWatermark(args[2],img,int(args[5]),int(args[6]),args[4])
py2exe
#!/usr/bin/python
# -*- coding: utf-8 -*-
# py2exe file
# 1.install py2exe application
# 2.python setup.py py2exe
from distutils.core import setup
import py2exe
setup(console=['myImg.py'])
2009年12月3日
#
# 快排 和 分治 很像 都是 分而治之 ，但他們卻是 相反的 方式排序 ：
分治 是想拆分完成后，合并以有序的小段進(jìn)行 排序 ，而快排是直接由原始的“拆分”來(lái) 排序 。
#encoding=utf-8
#從 大 到 小
def partition(A,p,r):
tmp=A[p]
while True :
while p+1<r and A[p] > tmp : p+=1
while r-1>p and A[r] <= tmp : r-=1
if A[p]<=A[r]: A[p],A[r]=A[r],A[p]
if r-1<=p : return p
def quickSort(A,p,r):
if p<r:
q=partition(A,p,r)
quickSort(A,p,q)
quickSort(A,q+1,r)
A=[9,61,7,14,-1,7,667,3,6,8]
print A
quickSort(A,0,len(A)-1)
print A
# 結(jié)果 [667, 61, 14, 9, 8, 7, 7, 6, 3, -1]
圖解：
一次迭代過(guò)程描述 （從小到大）：
1. 以 A[0] 為切分點(diǎn) 用臨時(shí)變量 記錄 這里是 切分點(diǎn) = [5]
2. 分別起 2枚指針 [切分起左,右]
3. 分別向中間 靠攏 ， 當(dāng)左指針指向值大于 切分點(diǎn) 停止 左 ， 右指針指向值 小于 切分點(diǎn) 停止 右 。
4. 判斷 是否是 停止點(diǎn) 上 左值 小于 右值 是：交換兩指針值 ！
第一次迭代后 :
以初始分隔 [5] 就已經(jīng)切分好了 小于 5 的左 ，大于等于5 的右
|