|
在軟件這個行業里有些規則是很有殺傷力的,比如很有名的摩爾定律。
總結出這些規則的意義在于可以大致的照明方向,免得努力來努力去卻走到了陰溝里。
現實中種種利益紛爭、觀點之爭看似紛繁,但在大時間尺度下來看卻都是規則的實現手段。
這就好比下圍棋,每一手都要為謀得利益而計算,但結局卻只有三種:贏、輸或和,這就是規則的力量。
民以食為天,所以第一定律從收入開始。
程序員第一定律可以表述為:程序員的收入是技能復雜度和技能實現可能程度的函數。
如果程序員的工資是S,社會平均水平的工資為A,程序員掌握的技能復雜度為C,實現程度為P。
那么S = A x C x P。
這里面的實現程度P不太好理解,額外做點說明。
好比說有人在東北種了很多白菜,并獲得了大豐收。與此同時廣州也確實需要大白菜,按批發價他的這批白菜可以買10萬。
但關鍵是這個人找不到車皮,大白菜就只能在當地零售,這個時候這批大白菜就只能買1萬塊錢。
這就是實現程度。
大白菜內蘊了既定的價值,這種價值并不因為賣多少錢而改變,但這種價值能實現到什么程度則依賴于現實的可能性。
這視乎很簡單,但其實不是,很多人的一生就籠罩在這條定律下面,我們來基于這第一定律繼續做些推導。
技能的復雜度C可以大致等價于掌握一門技術所需要的時間。
各種集成的開發環境,各種容易學習的類庫等使軟件開發的門檻降得很低,這對整個產業是有利的,但對個體而言則是不利的。
你花5個月可以學會的技術,其他人花5個月也可以學會,而5個月可以學會的東西所蘊含的價值一定是低的。
與之相對5年才可以學會的東西,其內蘊價值一定是高的。
內蘊價值低,所對應的收入必然偏低。
為避免爭議,我這里就不寫技術的名字了,但大家可以從學習所需要的時間上來對各種技術做個分類。
有時候很多人會有一種錯覺,認為越熱門的技術收益越好。
這在大多時候是錯的。
越熱的技術,越成熟的技術越是大眾的,而越是大眾的技術內蘊價值越低,所以收益越不好。
熱度能夠幫助找到工作,但對技能復雜度C沒有影響。
各種技術的復雜度大概是呈指數增長的,越到后面前進一步越困難。
好比說學會5門語言所需要的時間大多時候遠比學精一門語言要短。
在特定年紀尚,每樣技術都會一點,對提高實現程度P略有幫助,但自身可替代性很強,對技能復雜度C的影響為負面。
長期來看得不償失。
有些技術領域很窄,上手也慢,實現程度卻高,比如顯卡驅動,打印驅動等。
但這類工作好比在鋼絲上跳舞:只要能實現自己的價值,那么回報大體不錯,但最怕技術更迭。
技術一換代,可能多年積累十去六七。
總結來看,程序員要想獲得不錯的收入,第一要掌握稀缺的技術,即技術的內蘊價值要高;第二要找到實現稀缺技術的場景。
《微軟的秘密》一書中提到,微軟里面優秀的程序員是可以擁有許多輛保時捷的。
用上面兩條做分解,就會發現原因很簡單:
一是這樣的人是NT的核心開發人員,這類人員內蘊價值極高,處于稀缺狀態;二是微軟提供了實現這種技能內蘊價值的機會。
這二者缺一不可。
#根據大家的回復做了點修改把"實現可能性"替換成了"實現程度"。
協議是指計算機通信網絡中兩臺計算機之間進行通信所必須共同遵守的規定或規則,超文本傳輸協議(HTTP)是一種通信協議,它允許將超文本標記語言(HTML)文檔從Web服務器傳送到客戶端的瀏覽器
目前我們使用的是HTTP/1.1 版本
當我們打開瀏覽器,在地址欄中輸入URL,然后我們就看到了網頁。 原理是怎樣的呢?
實際上我們輸入URL后,我們的瀏覽器給Web服務器發送了一個Request, Web服務器接到Request后進行處理,生成相應的Response,然后發送給瀏覽器, 瀏覽器解析Response中的HTML,這樣我們就看到了網頁,過程如下圖所示
我們的Request 有可能是經過了代理服務器,最后才到達Web服務器的。
過程如下圖所示
代理服務器就是網絡信息的中轉站,有什么功能呢?
1. 提高訪問速度, 大多數的代理服務器都有緩存功能。
2. 突破限制, 也就是翻-墻了
3. 隱藏身份。
URL(Uniform Resource Locator) 地址用于描述一個網絡上的資源, 基本格式如下
schema://host[:port#]/path/.../[?query-string][#anchor]
scheme 指定低層使用的協議(例如:http, https, ftp)
host HTTP服務器的IP地址或者域名
port# HTTP服務器的默認端口是80,這種情況下端口號可以省略。如果使用了別的端口,必須指明,例如 http://www.cnblogs.com:8080/
path 訪問資源的路徑
query-string 發送給http服務器的數據
anchor- 錨
URL 的一個例子
http://www.mywebsite.com/sj/test/test.aspx?name=sviergn&x=true#stuff Schema: http host: www.mywebsite.com path: /sj/test Query String: name=sviergn&x=true Anchor: stuff
http協議是無狀態的,同一個客戶端的這次請求和上次請求是沒有對應關系,對http服務器來說,它并不知道這兩個請求來自同一個客戶端。 為了解決這個問題, Web程序引入了Cookie機制來維護狀態.
先看Request 消息的結構, Request 消息分為3部分,第一部分叫Request line, 第二部分叫Request header, 第三部分是body. header和body之間有個空行, 結構如下圖
第一行中的Method表示請求方法,比如"POST","GET", Path-to-resoure表示請求的資源, Http/version-number 表示HTTP協議的版本號
當使用的是"GET" 方法的時候, body是為空的
比如我們打開博客園首頁的request 如下
GET http://www.cnblogs.com/ HTTP/1.1 Host: www.cnblogs.com
下面我們打開Fiddler 捕捉一個博客園登錄的Request 然后分析下它的結構, 在Inspectors tab下以Raw的方式可以看到完整的Request的消息, 如下圖
我們再看Response消息的結構, 和Request消息的結構基本一樣。 同樣也分為三部分,第一部分叫Response line, 第二部分叫Response header,第三部分是body. header和body之間也有個空行, 結構如下圖
HTTP/version-number表示HTTP協議的版本號, status-code 和message 請看下節[狀態代碼]的詳細解釋.
我們用Fiddler 捕捉一個博客園首頁的Response然后分析下它的結構, 在Inspectors tab下以Raw的方式可以看到完整的Response的消息, 如下圖
Http協議定義了很多與服務器交互的方法,最基本的有4種,分別是GET,POST,PUT,DELETE. 一個URL地址用于描述一個網絡上的資源,而HTTP中的GET, POST, PUT, DELETE就對應著對這個資源的查,改,增,刪4個操作。 我們最常見的就是GET和POST了。GET一般用于獲取/查詢資源信息,而POST一般用于更新資源信息.
我們看看GET和POST的區別
1. GET提交的數據會放在URL之后,以?分割URL和傳輸數據,參數之間以&相連,如EditPosts.aspx?name=test1&id=123456. POST方法是把提交的數據放在HTTP包的Body中.
2. GET提交的數據大小有限制(因為瀏覽器對URL的長度有限制),而POST方法提交的數據沒有限制.
3. GET方式需要使用Request.QueryString來取得變量的值,而POST方式通過Request.Form來獲取變量的值。
4. GET方式提交數據,會帶來安全問題,比如一個登錄頁面,通過GET方式提交數據時,用戶名和密碼將出現在URL上,如果頁面可以被緩存或者其他人可以訪問這臺機器,就可以從歷史記錄獲得該用戶的賬號和密碼.
Response 消息中的第一行叫做狀態行,由HTTP協議版本號, 狀態碼, 狀態消息 三部分組成。
狀態碼用來告訴HTTP客戶端,HTTP服務器是否產生了預期的Response.
HTTP/1.1中定義了5類狀態碼, 狀態碼由三位數字組成,第一個數字定義了響應的類別
1XX 提示信息 - 表示請求已被成功接收,繼續處理
2XX 成功 - 表示請求已被成功接收,理解,接受
3XX 重定向 - 要完成請求必須進行更進一步的處理
4XX 客戶端錯誤 - 請求有語法錯誤或請求無法實現
5XX 服務器端錯誤 - 服務器未能實現合法的請求
看看一些常見的狀態碼
200 OK
最常見的就是成功響應狀態碼200了, 這表明該請求被成功地完成,所請求的資源發送回客戶端
如下圖, 打開博客園首頁
302 Found
重定向,新的URL會在response 中的Location中返回,瀏覽器將會自動使用新的URL發出新的Request
例如在IE中輸入, http://www.google.com. HTTP服務器會返回304, IE取到Response中Location header的新URL, 又重新發送了一個Request.
304 Not Modified
代表上次的文檔已經被緩存了, 還可以繼續使用,
例如打開博客園首頁, 發現很多Response 的status code 都是304
提示: 如果你不想使用本地緩存可以用Ctrl+F5 強制刷新頁面
400 Bad Request 客戶端請求與語法錯誤,不能被服務器所理解
403 Forbidden 服務器收到請求,但是拒絕提供服務
404 Not Found
請求資源不存在(輸錯了URL)
比如在IE中輸入一個錯誤的URL, http://www.cnblogs.com/tesdf.aspx
500 Internal Server Error 服務器發生了不可預期的錯誤
503 Server Unavailable 服務器當前不能處理客戶端的請求,一段時間后可能恢復正常
使用Fiddler 能很方便的查看Reques header, 點擊Inspectors tab ->Request tab-> headers 如下圖所示.
header 有很多,比較難以記憶,我們也按照Fiddler那樣把header 進行分類,這樣比較清晰也容易記憶。
If-Modified-Since
作用: 把瀏覽器端緩存頁面的最后修改時間發送到服務器去,服務器會把這個時間與服務器上實際文件的最后修改時間進行對比。如果時間一致,那么返回304,客戶端 就直接使用本地緩存文件。如果時間不一致,就會返回200和新的文件內容。客戶端接到之后,會丟棄舊文件,把新文件緩存起來,并顯示在瀏覽器中.
例如:If-Modified-Since: Thu, 09 Feb 2012 09:07:57 GMT
實例如下圖
If-None-Match
作用: If-None-Match和ETag一起工作,工作原理是在HTTP Response中添加ETag信息。 當用戶再次請求該資源時,將在HTTP Request 中加入If-None-Match信息(ETag的值)。如果服務器驗證資源的ETag沒有改變(該資源沒有更新),將返回一個304狀態告訴客戶端使用 本地緩存文件。否則將返回200狀態和新的資源和Etag. 使用這樣的機制將提高網站的性能
例如: If-None-Match: "03f2b33c0bfcc1:0"
實例如下圖
Pragma
作用: 防止頁面被緩存, 在HTTP/1.1版本中,它和Cache-Control:no-cache作用一模一樣
Pargma只有一個用法, 例如: Pragma: no-cache
注意: 在HTTP/1.0版本中,只實現了Pragema:no-cache, 沒有實現Cache-Control
Cache-Control
作用: 這個是非常重要的規則。 這個用來指定Response-Request遵循的緩存機制。各個指令含義如下
Cache-Control:Public 可以被任何緩存所緩存()
Cache-Control:Private 內容只緩存到私有緩存中
Cache-Control:no-cache 所有內容都不會被緩存
還有其他的一些用法, 我沒搞懂其中的意思, 請大家參考其他的資料
Accept
作用: 瀏覽器端可以接受的媒體類型,
例如: Accept: text/html 代表瀏覽器可以接受服務器回發的類型為 text/html 也就是我們常說的html文檔,
如果服務器無法返回text/html類型的數據,服務器應該返回一個406錯誤(non acceptable)
通配符 * 代表任意類型
例如 Accept: */* 代表瀏覽器可以處理所有類型,(一般瀏覽器發給服務器都是發這個)
Accept-Encoding:
作用: 瀏覽器申明自己接收的編碼方法,通常指定壓縮方法,是否支持壓縮,支持什么壓縮方法(gzip,deflate),(注意:這不是只字符編碼);
例如: Accept-Encoding: gzip, deflate
Accept-Language
作用: 瀏覽器申明自己接收的語言。
語言跟字符集的區別:中文是語言,中文有多種字符集,比如big5,gb2312,gbk等等;
例如: Accept-Language: en-us
User-Agent
作用:告訴HTTP服務器, 客戶端使用的操作系統和瀏覽器的名稱和版本.
我們上網登陸論壇的時候,往往會看到一些歡迎信息,其中列出了你的操作系統的名稱和版本,你所使用的瀏覽器的名稱和版本,這往往讓很多人感到很神 奇,實際上,服務器應用程序就是從User-Agent這個請求報頭域中獲取到這些信息User-Agent請求報頭域允許客戶端將它的操作系統、瀏覽器 和其它屬性告訴服務器。
例如: User-Agent: Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; CIBA; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729; .NET4.0C; InfoPath.2; .NET4.0E)
Accept-Charset
作用:瀏覽器申明自己接收的字符集,這就是本文前面介紹的各種字符集和字符編碼,如gb2312,utf-8(通常我們說Charset包括了相應的字符編碼方案);
例如:
Cookie:
作用: 最重要的header, 將cookie的值發送給HTTP 服務器
Content-Length
作用:發送給HTTP服務器數據的長度。
例如: Content-Length: 38
Content-Type
作用:
例如:Content-Type: application/x-www-form-urlencoded
Referer:
作用: 提供了Request的上下文信息的服務器,告訴服務器我是從哪個鏈接過來的,比如從我主頁上鏈接到一個朋友那里,他的服務器就能夠從HTTP Referer中統計出每天有多少用戶點擊我主頁上的鏈接訪問他的網站。
例如: Referer:http://translate.google.cn/?hl=zh-cn&tab=wT
Connection
例如: Connection: keep-alive 當一個網頁打開完成后,客戶端和服務器之間用于傳輸HTTP數據的TCP連接不會關閉,如果客戶端再次訪問這個服務器上的網頁,會繼續使用這一條已經建立的連接
例如: Connection: close 代表一個Request完成后,客戶端和服務器之間用于傳輸HTTP數據的TCP連接會關閉, 當客戶端再次發送Request,需要重新建立TCP連接。
Host(發送請求時,該報頭域是必需的)
作用: 請求報頭域主要用于指定被請求資源的Internet主機和端口號,它通常從HTTP URL中提取出來的
例如: 我們在瀏覽器中輸入:http://www.guet.edu.cn/index.html
瀏覽器發送的請求消息中,就會包含Host請求報頭域,如下:
Host:http://www.guet.edu.cn
此處使用缺省端口號80,若指定了端口號,則變成:Host:指定端口號
同樣使用Fiddler 查看Response header, 點擊Inspectors tab ->Response tab-> headers 如下圖所示
我們也按照Fiddler那樣把header 進行分類,這樣比較清晰也容易記憶。
Date
作用: 生成消息的具體時間和日期
例如: Date: Sat, 11 Feb 2012 11:35:14 GMT
Expires
作用: 瀏覽器會在指定過期時間內使用本地緩存
例如: Expires: Tue, 08 Feb 2022 11:35:14 GMT
Vary
作用:
例如: Vary: Accept-Encoding
P3P
作用: 用于跨域設置Cookie, 這樣可以解決iframe跨域訪問cookie的問題
例如: P3P: CP=CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR
Set-Cookie
作用: 非常重要的header, 用于把cookie 發送到客戶端瀏覽器, 每一個寫入cookie都會生成一個Set-Cookie.
例如: Set-Cookie: sc=4c31523a; path=/; domain=.acookie.taobao.com
ETag
作用: 和If-None-Match 配合使用。 (實例請看上節中If-None-Match的實例)
例如: ETag: "03f2b33c0bfcc1:0"
Last-Modified:
作用: 用于指示資源的最后修改日期和時間。(實例請看上節的If-Modified-Since的實例)
例如: Last-Modified: Wed, 21 Dec 2011 09:09:10 GMT
Content-Type
作用:WEB服務器告訴瀏覽器自己響應的對象的類型和字符集,
例如:
Content-Type: text/html; charset=utf-8
Content-Type:text/html;charset=GB2312
Content-Type: image/jpeg
Content-Length
指明實體正文的長度,以字節方式存儲的十進制數字來表示。在數據下行的過程中,Content-Length的方式要預先在服務器中緩存所有數據,然后所有數據再一股腦兒地發給客戶端。
例如: Content-Length: 19847
Content-Encoding
WEB服務器表明自己使用了什么壓縮方法(gzip,deflate)壓縮響應中的對象。
例如:Content-Encoding:gzip
Content-Language
作用: WEB服務器告訴瀏覽器自己響應的對象的語言者
例如: Content-Language:da
Server:
作用:指明HTTP服務器的軟件信息
例如:Server: Microsoft-IIS/7.5
X-AspNet-Version:
作用:如果網站是用ASP.NET開發的,這個header用來表示ASP.NET的版本
例如: X-AspNet-Version: 4.0.30319
X-Powered-By:
作用:表示網站是用什么技術開發的
例如: X-Powered-By: ASP.NET
Connection
例如: Connection: keep-alive 當一個網頁打開完成后,客戶端和服務器之間用于傳輸HTTP數據的TCP連接不會關閉,如果客戶端再次訪問這個服務器上的網頁,會繼續使用這一條已經建立的連接
例如: Connection: close 代表一個Request完成后,客戶端和服務器之間用于傳輸HTTP數據的TCP連接會關閉, 當客戶端再次發送Request,需要重新建立TCP連接。
Location
作用: 用于重定向一個新的位置, 包含新的URL地址
實例請看304狀態實例
無狀態是指協議對于事務處理沒有記憶能力,服務器不知道客戶端是什么狀態。從另一方面講,打開一個服務器上的網頁和你之前打開這個服務器上的網頁之間沒有任何聯系
HTTP是一個無狀態的面向連接的協議,無狀態不代表HTTP不能保持TCP連接,更不能代表HTTP使用的是UDP協議(無連接)
Keep-Alive不會永久保持連接,它有一個保持時間,可以在不同的服務器軟件(如Apache)中設定這個時間
作為一個開發者,尤其是web開發人員,我想你有必要去了解這一系列的處理流程,在這期間,瀏覽器和服務器到底是如何打交道的?服務器又是如何處理的?瀏覽器又是如何將網頁顯示給用戶的呢?......
疑惑和細節真是太多了。坦白講,要想徹徹底底的弄清楚以上每個疑惑和處理細節,至少需要十本書的厚度,所謂“底層無極限”嘛,而且不同的web服務 器和服務器端編程語言的實現和處理流程不盡相同(但本質都是相通的)。本文中,我將根據http協議的有關知識,跟大家講解一些web開發的本質。不管你 是從事.NET,還是J2EE或者php開發等等,都離不開這些本質。希望你讀完本文,能有新的收獲和見解。由于本人水平和經驗有限,難免有誤,望讀者見 諒。
何為http協議(Hypertext Transfer Protocol,超文本傳輸協議)?
所謂協議,就是指雙方遵循的規范。http協議,就是瀏覽器和服務器之間進行“溝通”的一種規范。我們在看空間,刷微博...都是在使用http協議,當然,遠遠不止這些應用。
筆者一直聽說http是屬于“應用層的協議”,而且是基于TCP/IP協議的。這個不難理解,如果你上大學時候學過“計算機網絡”的課程,就一定知 道OSI七層參考協議(我當時是死記硬背的)。如果你接觸過socket網絡編程,就應該明白TCP和UDP這兩種使用廣泛的通信協議(建立連接、三次握 手等等,當然,這不是本文討論的重點)。如圖:
既然TCP/UDP是廣泛使用的網絡通信協議,那為啥有多出個http協議來呢?
筆者曾自己動手寫過一個簡單的web服務器處理軟件,根據我的推斷(不一定準確)。UDP協議具有不可靠性和不安全性,顯然這很難滿足web應用的需要。
而TCP協議是基于連接和三次握手的,雖然具有可靠性,但人具有一定的缺陷。但試想一下,普通的C/S架構軟件,頂多上千個Client同時連接,而B/S架構的網站,十萬人同時在線也是很平常的事兒。如果十萬個客戶端和服務器一直保持連接狀態,那服務器如何滿足承載呢?
這就衍生出了http協議。基于TCP的可靠性連接。通俗點說,就是在請求之后,服務器端立即關閉連接、釋放資源。這樣既保證了資源可用,也吸取了TCP的可靠性的優點。
正因為這點,所以大家通常說http協議是“無狀態”的,也就是“服務器不知道你客戶端干了啥”,其實很大程度上是基于性能考慮的。以至于后來有了session之類的玩意。
實戰準備工作:
在監視網絡方面,windows平臺上有一款叫做Sniffer的優秀軟件,這也是很多“黑客”經常使用的嗅探工具。 在研究http協議時,推薦大家使用一款
叫作httpwatch的工具。(遺憾的是,該工具是收費的。該咋辦就咋辦,你懂的)。安裝完成后,可以在IE瀏覽器的tools中直接打開(目前也支持firefox)。如圖所示:
點擊Record,就可以開始監視并記錄http消息了。stop、Clear等等按鈕的功能,這里就不一一介紹了。拿實例來說話,下面就是我記錄訪問main.aspx頁面的時候記錄的,能夠清晰的看到http報文消息的詳細信息,如圖:
學習http協議,主要需要了解http的請求和響應(當然,還有get、post等請求方式,狀態碼、URI、MIME等)
首先看看http請求消息(就是瀏覽器丟給服務器的):
一個http請求代表客戶端瀏覽器向服務器發送的數據。一個完整的http請求消息,包含一個請求行,若干個消息頭(請求頭),換行,實體內容
請求行:描述客戶端的請求方式、請求資源的名稱、http協議的版本號。 例如: GET/BOOK/JAVA.HTML HTTP/1.1
請求頭(消息頭)包含(客戶機請求的服務器主機名,客戶機的環境信息等):
Accept:用于告訴服務器,客戶機支持的數據類型 (例如:Accept:text/html,image/*)
Accept-Charset:用于告訴服務器,客戶機采用的編碼格式
Accept-Encoding:用于告訴服務器,客戶機支持的數據壓縮格式
Accept-Language:客戶機語言環境
Host:客戶機通過這個服務器,想訪問的主機名
If-Modified-Since:客戶機通過這個頭告訴服務器,資源的緩存時間
Referer:客戶機通過這個頭告訴服務器,它(客戶端)是從哪個資源來訪問服務器的(防盜鏈)
User-Agent:客戶機通過這個頭告訴服務器,客戶機的軟件環境(操作系統,瀏覽器版本等)
Cookie:客戶機通過這個頭,將Coockie信息帶給服務器
Connection:告訴服務器,請求完成后,是否保持連接
Date:告訴服務器,當前請求的時間
(換行)
實體內容:
就是指瀏覽器端通過http協議發送給服務器的實體數據。例如:name=dylan&id=110
(get請求時,通過url傳給服務器的值。post請求時,通過表單發送給服務器的值)
再看看HTTP響應消息(服務器返回給瀏覽器的):
一個http響應代表服務器端向客戶端回送的數據,它包括:
一個狀態行,若干個消息頭,以及實體內容
響應頭(消息頭)包含:
Location:這個頭配合302狀態嗎,用于告訴客戶端找誰
Server:服務器通過這個頭,告訴瀏覽器服務器的類型
Content-Encoding:告訴瀏覽器,服務器的數據壓縮格式
Content-Length:告訴瀏覽器,回送數據的長度
Content-Type:告訴瀏覽器,回送數據的類型
Last-Modified:告訴瀏覽器當前資源緩存時間
Refresh:告訴瀏覽器,隔多長時間刷新
Content- Disposition:告訴瀏覽器以下載的方式打開數據。例如: context.Response.AddHeader("Content-Disposition","attachment:filename=aa.jpg"); context.Response.WriteFile("aa.jpg");
Transfer-Encoding:告訴瀏覽器,傳送數據的編碼格式
ETag:緩存相關的頭(可以做到實時更新)
Expries:告訴瀏覽器回送的資源緩存多長時間。如果是-1或者0,表示不緩存
Cache-Control:控制瀏覽器不要緩存數據 no-cache
Pragma:控制瀏覽器不要緩存數據 no-cache
Connection:響應完成后,是否斷開連接。 close/Keep-Alive
Date:告訴瀏覽器,服務器響應時間
理解了以上的http請求消息和響應消息,相信你對于http協議已經理解得足夠深刻了。關于http協議的更多具體細節,可以參照http RFC文檔。
大致步驟就是:瀏覽器先向服務器發送請求,服務器接收到請求后,做相應的處理,然后封裝好響應報文,再回送給瀏覽器。瀏覽器拿到響應報文后,再通過 瀏覽器引擎去渲染網頁,解析DOM樹,javascript引擎解析并執行腳本操作,插件去干插件該干的事兒...關于瀏覽器渲染、解析的原理,可以參考 http://kb.cnblogs.com/page/129756/
說白了,所謂web的本質,無非是:請求/處理/響應 ,任何的web服務器,任何的服務端編程語言,都沒法脫離這個本質。 而瀏覽器端解析html、圖片等靜態內容,呈現給用戶,腳本引擎執行腳本代碼,完成腳本代碼要做的事兒(例如dom操作,css屬性更改,發送ajax請 求等等)。
筆者淺淺的認為,其實瀏覽器就是一種特殊的Client,而B/S架構也是一種特殊的C/S架構。這里值得一提的是,不同的web服務器和編程語 言,又是如何接收用戶http請求。如何處理,如何響應的呢?筆者拿熟悉的ASP.NET為例,通過反編譯工具查看源代碼(微軟這家伙實在封裝的太好了) 從底層進行了剖析,如圖:
由于篇幅有限,無法再繼續將asp.net、iis web服務器的細節及底層實現再做進一步地進行剖析了。因為微軟的asp.net技術體系實在龐大,而且很復雜。有時間筆者會繼續更新系列文章,歡迎讀者繼續關注。
2012世界末日暨環境保護主題站,關注國內外最新2012世界末日信息,旨在通過關注,收集,展示2012世界末日相關資料的方式,喚醒并提高人們保護環境與愛護地球的意識,引導人類保護環境.
這個是淡出淡入動畫效果:
|
|
1. 人得學習能力是否會隨著年齡的增長而變差?
可能是如此,我兩歲的兒子一首唐詩說兩遍就記住了,很長繞口的兒歌《小熊過橋》幾乎能一字不差的唱完;而我是顯然辦不到的。不過發現一個事實,就是人的學 習能力不僅僅是靠記憶能力,跟邏輯思維能力,還有人的經驗也有很大的關系;我們每個人也許都發現,你如果只是個優秀的Java程序員,如果要你去維護一 個.net的系統,不出兩個月, 你馬上就是一個.net專家。因為你知道相關的知識怎么學習,知道如何才能最快定位問題的一般方法。我個人是個完全不懂php得人,結果被強拉過去搞了個 php的項目,結果被認為是php expert! 所以我的最終答案是,人得記憶力更年齡成反比,但是學習能力跟年齡成正比。
2. 人的年齡越大,精力會跟不上程序員這樣高強度的工作嗎?
我的答案也是否定的。首先這是個偽命題,沒有哪件事情是輕松的;你覺得別人比你輕松,那也只是你覺得而已。大體上個人的回報跟付出是成正比的。其實隨著你 的年齡增長,知識積累越多,經驗越豐富,你的工作效率會更高。5年前你修一個Bug要一個星期,現在也許10分鐘就夠了,并且是又快又好。難道不是這樣 嗎?所以你的工作強度事實上會變得更低,因為你的效率更高,你會有更多時間喝咖啡,也會遭你鄰桌的同事低語“這家伙每天無所事事,咋工資比我高那么多?” 因為你的10分鐘就抵別人的一個星期。
3. 人的年齡越大,就沒有激情學習新知識了嗎?
對有些人是,對有些人不是。計算機科學日新月異,確實更新相當快。你真的會跟不上腳步嗎?可能會,如果你自己不學習。但我一定要亦步亦趨嗎?也不見得,無 論如何,即便是軟件開發,也還是有方向,有領域,你只要更上你需要更上的節奏就夠了。今天請我的一個兄弟給我講了下Struts應用,就是給我搞個最小化 的Struts項目,包含所有Struct的重要知識點,然后搬個椅子坐我旁邊,花上半個小時跟我講解;我現在儼然Struts專家了,不信,我跟你講講 看? 呵呵,開玩笑了。
如果我們覺得每天吃飯不是件枯燥無趣的事,我們應該也不太會拒絕不斷學習;如果我們一定會因為自然規律而失去某些優勢,記得你其實有更多的優勢可以彌補;最重要的是,做你喜歡的事,做你能做的事情。
正月十五,明月高懸;祝福各位龍圖大展!
今天我不談抱負理想,也不談具體的技術,我來談幾個看法上的典型錯誤。下面的這些問題都是我曾經遇到,或者是我的朋友們遇到過的問題,這些都是我個人的理解,希望對大家有幫助。
關于設計模式、設計原則
有人認為,熟悉了設計模式、設計原則,就學會了設計。其實,設計模式和設計原則,只是前人根據設計實踐做的總結和提煉,設計,歸根到底是要解決問題的,把具體問題的解決辦法,經過一定的抽象,變成程序員的語言。
我見過一些人,他們知識淵博、見識廣博,甚至理論可以給你闡述得冠冕堂皇,但是到了實際需要解決問題的時候,他們卻拿不出巧妙的、優雅的辦法,這是典型的象牙塔人。
另一方面,也有一些人看不起學習設計模式的人,他們覺得他們已經掌握了軟件設計的奧義,這些對他們來說是毫無意義的詞匯,對此大可以一笑置之。
有時候我們反而被設計模式或設計原則粗暴的掌握束縛了手腳,譬如我遇到這樣一件事情,某位努力的程序員,設計的代碼用遍了組合(例如把User對象 放置到Administrator里面),我好奇地問,有一些類和對象之間的關系很明顯符合繼承的特征,為什么不愿意用它?他說,設計原則告訴我們,要多 用組合,少用繼承。我想,對這些優秀的模式、原則、方法論,如果不能透徹地掌握,不能根據實際場景合適地運用,是不是反而不如對其不了解來的好呢?
關于多種計算機語言的學習
有人覺得學習一種語言就可以了,學習那么多語言沒有必要。事實上,多掌握一門合適的計算機語言不僅僅是多掌握一種謀生的工具,如果一種新的語言能夠很大程度上改變你對編程、對設計的看法,那么興許它就值得你去學習。
譬如C語言,可以培養嚴謹的思維;譬如動態語言,它可以幫助程序員更好地做面向對象的coding;譬如函數式語言,它在工業生產、運算領域有著不可替代的作用。
當然話說回來,所謂術業有專攻,對于某一門計算機語言(包括該語言所需的運行時環境、其中的編譯或解釋的原理)深入的掌握,是很有必要的。
另外,我們時常看到諸多計算機語言孰優孰劣的爭論,計算機語言歸根到底是一種工具,工具是隨著時代發展升級和變更的,單純的優劣爭論沒有太大意義。
關于英語
中國人為什么要學英語,程序員為什么要學英語,當我把那些方法名、變量名全部取成拼音,一樣可以,誰下的這個破規定?
遺憾的是,諸多學習材料、論文、技術資料(尤其是一些剛出不久的技術),都是英語的;另一方面,國際標準、程序員交流的通用方式,都是英文的,我想肯定很難想象,那些有名的framework、lib的源碼,如果用拼音來寫變量名會成什么樣子。
所以,如果你的英語不好(至少讀寫不好),就不要給自己找太借口,英語是一個掌握其他工具的工具,除非你堅信,中文很快就會在計算機界變成世界第一通用的語言。
關于算法
算法有多重要,這一件事的爭議一直都很大。
軟件歸根到底是用來解決問題的,提到算法就不能不提到數學(這也是為什么很多軟件領域的大師都具備相當的數學背景),對于解決問題,這里可以簡單歸納成兩步:
(1)把實際的問題抽象成簡化的數學模型
(2)用算法去解決這個數學問題
算法,在這里應該是一個廣義的概念(這里的算法并不僅僅指大學里學習的狹義的具體算法),算法是解決上述數學問題的辦法。如果工作中你并未意識到它的存在,那只是說明,你抽象出的數學模型比較簡單,解決這個模型的辦法也很簡單,或者有現成的方式可以模仿,或者有現成的框架幫你完成了,以至于你不去關注它、在乎它。
如果你做的事情是充滿創新意義的,是別人從沒有做過的,這時候算法興許就成了決定你成敗的因素。
在當前中國的環境下,視野廣闊和經歷豐富的人很好找,但是企業要招到具備上述兩點能力來解決問題的人,其實是非常困難的。
關于經驗
唯經驗論者的人有很多,他們認為,在軟件企業的職位、薪水、甚至決策能力,都取決于經驗,一個5年經驗的工程師,肯定比3年經驗的工程師能找到更好的飯碗:
“我是老員工,我工作5年了,憑什么工作3年的他薪水比我高那么多”
實際上,很多因素,包括領域積累(這是業務上的,例如互聯網領域、傳統軟件領域,這和所謂的純技術沒有直接關系)、視野、承受壓力的能力等等往往都 在很大程度上取決于“經驗”的積累,但是,這并不是絕對的。有句話叫做“事業一半是干出來的,一半是總結出來的”,也確實有一些出色的程序員,他們善于總 結、善于觀察和積累,并且善于不斷地思考,這樣的程序員就是擁有更多優秀的經驗。
另一方面,程序員是要來解決問題的,經驗不能代替解決問題,有的人具備更優秀的解決問題的能力,他為什么就不能得到更優厚的薪水?
越來越多人開始使用Java,但是他們大多數人沒有做好足夠的思想準備(沒有接受OO思想體系相關培訓),以致不能很好駕馭Java項目,甚至導致 開發后的Java系統性能緩慢甚至經常當機。很多人覺得這是Java復雜導致,其實根本原因在于:我們原先掌握的關于軟件知識(OO方面)不是太貧乏就是 不恰當,存在認識上和方法上的誤區。
軟件的生命性
軟件是有生命的,這可能是老調重彈了,但是因為它事關分層架構的原由,反復強調都不過分。
一個有生命的軟件首先必須有一個靈活可擴展的基礎架構,其次才是完整的功能。
目前很多人對軟件的思想還是焦點落在后者:完整的功能,覺得一個軟件功能越完整越好,其實關鍵還是架構的靈活性,就是前者,基礎架構好,功能添 加只是時間和工作量問題,但是如果架構不好,功能再完整,也不可能包括未來所有功能,軟件是有生命的,在未來成長時,更多功能需要加入,但是因為基礎架構 不靈活不能方便加入,死路一條。
正因為普通人對軟件存在短視誤區,對功能追求高于基礎架構,很多吃了虧的老程序員就此離開軟件行業,帶走寶貴的失敗經驗,新的盲目的年輕程序員 還是使用老的思維往前沖。其實很多國外免費開源框架如ofbiz compiere和slide也存在這方面陷阱,貌似非常符合胃口,其實類似國內那些幾百元的盜版軟件,擴展性以及持續發展性嚴重不足。
那么選擇現在一些流行的框架如Hibernate、Spring/Jdonframework是否就表示基礎架構打好了呢?其實還不盡然,關鍵還是取決于你如何使用這些框架來搭建你的業務系統。
存儲過程和復雜SQL語句的陷阱
首先談談存儲過程使用的誤區,使用存儲過程架構的人以為可以解決性能問題,其實它正是導致性能問題的罪魁禍首之一,打個比喻:如果一個人頻臨死亡,打一針可以讓其延長半年,但是打了這針,其他所有醫療方案就全部失效,請問你會使用這種短視方案嗎?
為什么這樣說呢?如果存儲過程都封裝了業務過程,那么運行負載都集中在數據庫端,要中間J2EE應用服務器干什么?要中間服務器的分布式計算和 集群能力做什么?只能回到過去集中式數據庫主機時代。現在軟件都是面向互聯網的,不象過去那樣局限在一個小局域網,多用戶并發訪問量都是無法確定和衡量, 依靠一臺數據庫主機顯然是不能夠承受這樣惡劣的用戶訪問環境的。(當然搞數據庫集群也只是五十步和百步的區別)。
從分層角度來看,現在三層架構:表現層、業務層和持久層,三個層次應該分割明顯,職責分明:持久層職責持久化保存業務模型對象,業務層對持久層 的調用只是幫助我們激活曾經委托其保管的對象,所以,不能因為持久層是保管者,我們就以其為核心圍繞其編程,除了要求其歸還模型對象外,還要求其做其做復 雜的業務組合。打個比喻:你在火車站將水果和盤子兩個對象委托保管處保管,過了兩天來取時,你還要求保管處將水果去皮切成塊,放在盤子里,做成水果盤給 你,合理嗎?
上面是談過分依賴持久層的一個現象,還有一個正好相反現象,持久層散發出來,開始擠占業務層,腐蝕業務層,整個業務層到處看見的是數據表的影子 (包括數據表的字段),而不是業務對象。這樣程序員應該多看看OO經典PoEAA.PoEAA 認為除了持久層,不應該在其他地方看到數據表或表字段名。
當然適量使用存儲過程,使用數據庫優點也是允許的。按照Evans DDD理論,可以將SQL語句和存儲過程作為規則Specification一部分。
Hibernate等ORM問題
現在使用Hibernate人也不少,但是他們發現Hibernate性能緩慢,所以尋求解決方案,其實并不是 Hibernate性能緩慢,而是我們使用方式發生錯誤:
"最近本人正搞一個項目,項目中我們用到了struts1.2+hibernate3, 由于關系復雜表和表之間的關系很多,在很多地方把lazy都設置false,所以導致數據一加載很慢,而且查詢一條數據更是非常的慢。"
Hibernate是一個基于對象模型持久化的技術,因此,關鍵是我們需要設計出高質量的對象模型,遵循DDD領域建模原則,減少降低關聯,通 過分層等有效辦法處理關聯。如果采取圍繞數據表進行設計編程,加上表之間關系復雜(沒有科學方法處理、偵察或減少這些關系),必然導致 系統運行緩慢,其實同樣問題也適用于當初對EJB的實體Bean的CMP抱怨上,實體Bean是Domain Model持久化,如果不首先設計Domain Model,而是設計數據表,和持久化工具設計目標背道而馳,能不出問題嗎?關于這個問題N多年就在Jdon爭論過。
這里同樣延伸出另外一個問題:數據庫設計問題,數據庫是否需要在項目開始設計?
如果我們進行數據庫設計,那么就產生了一系列問題:當我們使用Hibernate實現持久保存時,必須考慮事先設計好的數據庫表結構以及他們的關系如何和業務對象實現映射,這實際上是非常難實現的,這也是很多人覺得使用ORM框架棘手根本原因所在。
當然,也有腦力相當發達的人可以實現,但是這種圍繞數據庫實現映射的結果必然扭曲業務對象,這類似于兩個板塊(數據表和業務對象)相撞,必然產 生地震,地震的結果是兩敗俱傷,軟的一方吃虧,業務對象是代碼,相當于數據表結構,屬于軟的一方,最后導致業務對象變成數據傳輸對象DTO, DTO滿天飛,性能和維護問題隨之而來。
領域建模解決了上述眾多不協調問題,特別是ORM痛苦使用問題,關于 ORM/Hibernate使用還是那句老話:如果你不掌握領域建模方法,那么就不要用Hibernate,對于這個層次的你:也許No ORM 更是一個簡單之道: No ORM: The simplest solution
Spring分層矛盾問題
Spring是以挑戰EJB面貌出現,其本身擁有的強大組件定制功能是優點,但是存在實戰的一些問題,Spring作為業務層框架,不支持業務層Session 功能。
具體舉例如下:當我們實現購物車之類業務功能時,需要將購物場合保存到 Session中,由于業務層沒有方便的Session支持,我們只得將購物車保存到 HttpSession,而HttpSession只有通過HttpRequest才能獲得,再因為在Spring業務層容器中是無法訪問到 HttpRequest這個對象的,所以,最后我們只能將"購物車保存到HttpSession"這個功能放在表現層中實現,而這個功能明顯應該屬于業務 層功能,這就導致我們的Java項目層次混亂,維護性差。 違背了使用Spring和分層架構最初目的。
領域驅動設計DDD
現在回到我們討論的重點上來,分層架構是我們使用Java的根本原因之一,域建模專家Eric Evans在他的"Domain Model Design"一書中開篇首先強調的是分層架構,整個DDD理論實際是告訴我們如何使用模型對象oo技術和分層架構來設計實現一個Java項目。
我們現在很多人知道Java項目基本有三層:表現層 業務層和持久層,當我們執著于討論各層框架如何選擇之時,實際上我們真正的項目開發工作還沒有開始,就是我們選定了某種框架的組合(如 Struts+Spring+Hibernate或Struts+EJB或Struts+ JdonFramework),我們還沒有意識到業務層工作還需要大量工作,DDD提供了在業務層中再劃分新的層次思想,如領域層和服務層,甚至再細分為 作業層、能力層、策略層等等。通過層次細化方式達到復雜軟件的松耦合。DDD提供了如何細分層次的方式
當我們將精力花費在架構技術層面的討論和研究上時,我們可能忘記以何種依據選擇這些架構技術?選擇標準是什么?領域驅動設計DDD 回答了這樣的問題,DDD會告訴你如果一個框架不能協助你實現分層架構,那就拋棄它,同時,DDD也指出選擇框架的考慮目的,使得你不會人云亦云,陷入復 雜的技術細節迷霧中,迷失了架構選擇的根本方向。
現在也有些人誤以為DDD是一種新的理論,其實DDD和設計模式一樣,不是一種新的理論,而是實戰經驗的總結,它將前人 使用面向模型設計的方法經驗提煉出來,供后來者學習,以便迅速找到駕馭我們軟件項目的根本之道。
線程是指進程中的一個單一順序的控制流,是操作系統能夠調度的最小單位,一個進程中可以有多條線程,分別執行不同的任務。線程有內核線程和用戶線程之分,但在本文中僅指內核線程。在軟件開發中,使用線程有以下好處:
1、在多核或多路 CPU 的機器上多線程程序能夠并發執行,提高運算速度;
2、把 I/O,人機交互等與密集運算部分分離,提升 I/O 吞吐量和增進用戶體驗。
線程的缺點也很明顯:
1、創建一條線程需要較大的內存開銷,導致不能創建海量的線程;
2、線程由操作系統調度(分配時間片),線程切換的 CPU 成本比較高,導致大量線程存在時大量 CPU 資源消耗在線程切換上;
3、同一進程的多條線程共享全部系統資源,在多線程間共享資源需要進入加鎖,大量的鎖開銷不提,重要的是加大了編寫程序的復雜性,這一點你看看有多少書名含有“多線程”三個字就明白寫個多線程應用有多難了;
4、 I/O 方面,多線程幫助有限,以 TCP Socket Server 為例,如果每一個 client connection 由一條專屬的線程服務,那么這個 server 可能并發量很難超過 1000。為了進一步解決并發帶來的問題,現代服務器都使用 event-driven i/o 了。
event-driven i/o 解決了并發量的問題,但引入了“代碼被回調函數分割得零零碎碎”的問題。特別是當 event-driven i/o 跟 multi-threading 結合在一起的時候,麻煩就倍增了。解決這個問題的辦法就使用綠色線程,綠色線程可以在同一個進程中成千上萬地存在,從而可以在異步 I/O 上封裝出同步的 APIs,典型的就是用基于 greenlet + libevent 開發的 python 庫 gevent。綠色線程的缺陷在于操作系統不知道它的存在,需要用戶進行調度,也就無法利用到多核或多路 CPU 了。為了解決這個問題,很多大牛都做出了巨大的努力,并且成果斐然,scala、google go 和 rust 都較好地解決了問題,下文以 rust 的并發模型為例講一下。
rust 提出一個 Task 的概念,Task 有一個入口函數,也有自己的棧,并擁有進程堆內存的一部分,為方便理解,你可以把它看作一條綠色線程。rust 進程可以創建成千上萬個 Tasks,它們由內建的調度器進行調度,因為 Tasks 之間并不共享數據,只通過 channels/ports 通信,所以它們是可并行程度很高。rust 程序啟動時會生成若干條(數量由 CPU 核數決定或運行時指定)線程,這些線程并行執行 Tasks,從而利用多個 CPU 核心。
如 上圖,rust 應用程序不停地 spawn 出一個又一個 Tasks,它們由 tasks 調度器管理,在適當的時機,調度器會把某一個 Task 分配給原生線程執行,如果這個 Task 進入 I/O 等待或主動讓出 CPU(sleep),那么這個 Task 會被交回給調度器,而相應的原生線程會執行另一個新分派的 Task。盡管使用 rust 編程語言是不能創建線程的(直接調用 C 函數不算),但 rust 應用程序實際上是多線程的(一般情況下),它能夠充分地利用多核或多路 CPU。
綜上,類似 rust 的 Task 的概念是比線程更好的并發模型,更安全,編寫的代碼也更加容易維護(關于維護性,我相信寫過 gevent 程度或 go 程序的同學會認同的)。線程當然不會消亡,但隨著 scala/go/rust 的成熟,在可以預見的將來,線程會退到它呆著的角落:遠離普通程序員,只有少數人需要了解它的細節。
C++ 在 2011 年其實風頭甚勁,C++2011 標準出臺,gcc/msvc/clang 都很快速地支持了許多新特性,新興的移動設備的性能較差,更是 C++ 的新舞臺,在這個時候唱衰 C++,壓力很大。我使用 C++ 年頭不少,但除了在校的時候寫過兩個小游戲參加過兩個比賽(分別是面向社會和面向大學生的)弄些證書好找工作以外,在工作中只用過大概不到一年半,做《斬 魂》(http://zh.163.com)的早期版本,寫了服務器端的幾條進程和客戶端的 GameAI 部分。經驗少,而且寫得不好,所以基本上有人在 weibo 上問我 C++ 的問題,我都是轉發給 @bnu_chenshuo 和 @miloyip 等真正的行家去回答的。所以實際上今天寫這一篇,我底氣很是不足,但是朋友們給前兩篇很大面子,弄得我騎虎難下,只好硬著頭皮寫了。
前 文提到 C++ 的新標準,很有必要提一下標準化對 C++ 的影響。首先我們要肯定標準定制對 C++ 的積極作用,但標準化過程中的超長流程,一次次將 C++ 推向深淵。C++ 的第一個標準是 1998 年的 ISO/IEC 14882:1998,距離整個 90 年代最流行的 C++ 程序庫 MFC(Microsoft Foundation Class Library)的第一個版本發行時間已經整整 6 年。1998 年,MFC 版本號為 6.0,與其一起發布的 Visual C++ 6.0 占有了巨大的市場。因為 MFC 發布得標準制定的時間早,所以 MFC 內部實現了許多后來標準庫里也有的組件,比如各種數據結構容器。VC6 的市場占有率讓 windows 平臺下開發的許多 C++ 程序員甚至不知道有 STL,同時也無視 C++98 標準,從更兼容標準的 VC2002/2003 的市場占有率就可以看出來,直到今天,我知道國內不少公司還是只用 VC6 的。
其實在 90 年代,計算機的運算能力有限,市場上非常需要一款性能較高、抽象較強的編程語言,C++ 獲得了成功,但它標準化的時間過長,造成各種編譯器有各自互不兼容的“方言”,成了它的第一個軟肋。第一個瞄準這個軟肋的就是 java,java 在 1995 年推出,雖然性能稍遜,但它有更高的抽象能力、也更安全,并且更容易跨平臺,所以迅速獲得了成功;第二個瞄準這個軟肋的是 C#,微軟不能推動 C++ 發展,又不愿 C++ 的市場被 java 鯨吞,于是在 2001 年推出了 C#,經過 10 年的發展和微軟大量的金錢推廣,C# 已經成功獲得了它應有的江湖地位。
雖然 java/c# 都不是善類,但 C++ 在 21 世紀的第一個十年里仍然地位穩固,這是因為 Linux 和 MacOS X 大獲成功,在這兩個平臺上 C++ 都是非常有競爭力的編程語言,C++ 自然水漲船高。但隨著 web2.0 和 web app 概念的興起,以及 CPU 的主頻進一步提升,服務器端編程語言漸漸地對執行效率不再敏感,而是更在意程序員的開發效率,眾多的腳本語言開始蠶食 C++ 的市場份額,從早期的 perl 到后期的 python/php/ruby,在 2005 年以后,C++/java/C# 等靜態類型的編譯型語言的市場份額都下降了,新興的貴族是動態語言。面對動態語言在開發效率上的強勁挑戰,C++ 社區除了在 2003 年對 C++98 做了小小的 patch,基本上睡著了,完全沒有應對之策,哦不,連應用的姿態都沒有。
進入 21 世紀的第二個十年,市場又發生了變化,云計算越走越近,也許我們中的大部分人今天還可以說只聞其聲不見其形,但 The Data Center Is the Computer 這句話大家應該覺得很務實:完成一個用戶操作,在服務器端的進程間通信次數前所未有地多。在這個十年,我們需要這樣的編程語言:
1、能充分利用現代 CPU 的計算能力,不僅僅是多個核心,更是巨大的 L1/L2/L3 Cache、超線程等;
2、能夠大量減小異步 I/O 的性能提升的同時帶來的副作用:異步編程的復雜性以及對可維護性的傷害;
兩 句話其實也可以壓縮為一句:需要有更好的并發模型的語言。一開始大家都在已有的編程語言中尋找,然后找到了 erlang,實踐證明 erlang 自有其局限,所以 google go/scala/rust 等新語言如同雨后春筍般撥地而出。C++2011 標準努力降低 C++ 的編程難度,并提供了線程庫以支持現代 CPU,如果在 2005 年,這個標準絕對有競爭力,但在今天,它只能成為新的編程語言的墊腳石。正如 IE 最大的用處是用來下載其它瀏覽器,不久之后,也許會流行新的冷笑話:C++ 最大的用處就是用來實現其它編程語言。
市場一直在尋找一門中間的高級 語言,它上承 C 語言和匯編語言,下啟腳本語言。C++ 最先搶占了高地,并在與 java/c# 的爭斗中不落下風,但新的十年,它的對手又增加了 google go/scala/rust 等新銳,并且新的標準不可能在兩三年內再次出臺,兩三年內新銳成長起來后,留給它的位置就不多了。
上 文討論的基本上都是服務器編程,有必要再來看一下桌面和移動設備領域。首先看桌面軟件,rust 是 mozilla 基金會開發系統程序語言的,它的定位是部分取代 C++ 開發 firefox 的瀏覽器,所以 rust 會進入桌面開發,google go 肯定會順道啃一口。移動設備方面,主要是 android、ios 和 windows phone,隨著移動設備性能增強,編譯型語言加腳本的模式就會占大頭,編譯型語言方面主要是 C++ 和 Objective-C 在競爭,C++ 會占上風(但需求量遠遠小于腳本,從 lua 在 2011 年的增長速度可以印證),但是誰知道 rust 之類的會不會進入移動設備呢,畢竟移動設備的 CPU 核心也越來越多了呀,C++ 還是前景堪憂。
回首 C++ 的 30 年,展望它的未來,總結起來可能就是:標準化流程拖死人了。如果不是 15 年不能標準化,java/c# 的攪局可能不會出現;如果在 2005 年能夠應對動態語言……如果云時代有更好的并發模型……
題 外話:java/c# 不會有 C++ 的問題,因為它們有自己的平臺,有巨大的財富支撐。特別是平臺的作用非常巨大,你可以想像一下如果 Adobe 有自己的瀏覽器或手機操作系統 ActionScript/MXML 會不會是今天的境地;也可以想像一下 google go 的飛速發展動力是什么。
勞動密集型公司
這樣的公司以業務為導向,市場團隊在公司中占據較高的地位。每一個技術人員最終被折算到了“人天”里面去,團隊規模相對較大,所有技術人員都比較容 易被替代,能力強的可以做更多的事情,能力弱的就少做一些。通過強有力的制度、政策和流程的規約,團隊有條不紊地運作起來。業務氛圍強勢,技術通道升級較 慢,需要非常長期的積累才可以獲得豐厚的回報,諸多優秀人才脫離編碼,而潛心轉管理、談需求并獲得回報。愿意招納畢業生編碼,以減小運營成本。只鼓勵小范 圍、淺層次的創新,對于優秀的創意、想法,必須轉化為生產力才能夠被認可。
技術密集型公司
這樣的公司較為重視技術和創新,敢于在產品中使用預期能夠帶來收益的技術。公司非常愿意招聘一些有豐富研發經驗、有廣泛閱歷的程序員加入,同時也能 吸引一些比較優秀的技術人才,并且長期為公司工作。團隊人員較少,研發過程無論是從時間還是環境來看,通常比較寬松,用較少約束、任務驅動的形式,鼓勵程 序員按期完成下發的任務。技術人員層次劃分較多,不同層次技術人員在一起辦公,往往都不脫離編碼,和項目結合緊密。愿意招不同層次的研發人員,不愿意招經 驗豐富但脫離技術的人到研發團隊。
思維密集型公司
這樣的公司對研發人員思辨能力要求較高,愿意做一些創造性的產品。公司技術人員的招聘較為嚴格,更看重人員的創新氣質、解決問題的思路、建模和抽象 的能力,而對于具體的某種技術實現,并沒有很高的要求。團隊人員不多,項目壓力不大,任務給定的要求和流程約束較少,需要團隊成員較強的自主能力來解決問 題。技術人員層次劃分不多,討論氣氛濃厚,設計精益求精,創新的點子容易得到認可并嘗試實現。
你所在的公司,屬于哪一種?
漁夫 蛇 青蛙的故事
漁夫看到船邊有條蛇,口中正銜著一只青蛙。漁夫動了惻隱之心,把青蛙從蛇的口中救了出來。但漁夫又為蛇將挨餓而難過,便拿出一瓶酒,往蛇的口中滴了幾滴。 蛇高興地游走了,青蛙也為重獲新生而高興,漁夫則為自己的善舉而感到快樂。他想,這真是皆大歡喜!沒料到,僅僅過了幾分鐘,漁夫聽到有東西在叩擊他的船 板。他低頭一看,那條蛇又回來了,而且嘴里咬著兩只青蛙——它來討要更多酒的獎賞!
漁夫的本意是希望蛇不再捕捉青蛙,但是由于憐憫而給了它幾滴酒——這是獎勵而不是懲罰,結果事與愿違。你獎勵了什么行為,就會得到更多這樣的行為。所以,這則寓言要告訴我們的是,別去獎勵那些錯誤的行為。
我們再講一個企業獎勵錯誤行為的故事
一家企業制定了一個規定,如果該企業的員工加班到晚上7 點可以獲得10元錢的晚餐補助,如果加班到8點可以打出租車回家(平常5點下班)。該獎勵制度執行了一段時間之后,公司管理者竟然發現,有很多員工在正常 下班前或者很早就已經完成了工作,但是他們居然不正常下班而是留下來繼續加班,有的待到七點,有的待到八點以后。一個管理者親眼看見一個員工在下午4點前 就完成了文檔整理,然后一直在那里上網聊天一直到晚上8點。
你也行會認為這些員工鉆公司的空子有些不太好,但是這不能完全怪他們,因為早早的完成工作不見的會得到公司的獎勵,相反有意把工作拖到晚上8點之后就可以拿到打車費,并且能免費獲得一頓飯錢,多劃算呀!
管理者一定要牢記住這句話"受到獎勵的事情人們都喜歡去做" 為此管理者應該仔細檢測獎勵制度,哪些是積極的 ,哪些可能帶來消極的影響,修改掉哪些不合理的部分,通過獎勵正確的行為來獲得自己想要的結果。
美國管理專家拉伯福認為,企業在獎勵員工方面最常范的十個錯誤.
1、需要好的結果,卻獎勵了那些看上去最忙碌,工作時間最長的人
2、要求工作的質量,卻設下了不合理的完成工期
3、希望從根本上解決問題,卻獎勵那些治標不治本的人
4、要求員工對公司忠誠,卻支付高薪給新來的員工或威脅要離職的員工
5、要求事情簡單化,卻獎勵制造瑣碎和使事情復雜化的人
6、想要創造和諧的工作環境,卻獎勵那些光說不做并且經常抱怨的人
7、要求員工有創意,卻指責那些公司里有特立獨行的人
8、要求節儉,卻獎勵那些浪費資源的人
9、要求員工有團隊精神,卻犧牲團隊利益獎勵那些投機取巧的人
10、要求創新,卻獎勵保守的人,責罰未能完成的創意
如何改進我們的獎勵行為
孔子云:舉一而不能以三反,不可教也。每一個治理者都可以對照拉伯福所說的這十種錯誤,舉一反三,驗照一下自己是不是犯過類似的錯誤。例如:
1、 我們 是不是口頭上公布講究實績、注重實效,卻往往獎勵了那些專會做表面文章、投機取巧之人?
2、 我們是不是口頭上公布員工考核以業績為主,卻往往憑主觀印象評價和獎勵員工?
3、 我們是不是口頭上公布鼓勵創新,卻往往處罰了敢于創新之人?
4、 我們是不是口頭上公布鼓勵不同意見,卻往往處罰了敢于發表不同意見之人?
5、 我們是不是口頭上公布按章辦事,卻往往處罰了堅持原則的員工?
6、 我們是不是口頭上鼓勵員工勤奮工作、努力奉獻,卻往往獎勵了不干實事、專事搗鬼、鉆營之人?
總結
總之,我們每一個治理者都要牢記:“在表現與獎勵之間建立起正確的連帶關系,是改進組織運作的唯一要訣”。在考核和獎勵員工時非凡要注重的是,要注重其實 際業績,而不要注重其口頭上怎么說。不能獎勵了投機取巧,冷落了埋頭實干,否則以后我們指望誰來做事呢?
治理大師卡耐基說過:我年紀越大,就越不重視別人說些什么,我只看他們做些什么。其實中國古賢更早就說過這樣的話:“始吾于人也,聽其言而信其行;今吾于 人也,聽其言而觀其行”。在獎罰問題上,每個治理者確實不可粗心大意,草率行事。否則,“種瓜得瓜,種豆得豆”,種下了苦果可是要自己吃的!
博士
有一個博士分到一家研究所,成為學歷最高的一個人。
有一天他到單位后面的小池塘去釣魚,正好正副所長在他的一左一右,也在釣魚。
他只是微微點了點頭,這兩個本科生,有啥好聊的呢?
不一會兒,正所長放下釣竿,伸伸懶腰,蹭蹭蹭從水面上如飛地走到對面上廁所。
博士眼睛睜得都快掉下來了。水上飄?不會吧?這可是一個池塘啊。
正所長上完廁所回來的時候,同樣也是蹭蹭蹭地從水上飄回來了。
怎么回事?博士生又不好去問,自己是博士生哪!
過一陣,副所長也站起來,走幾步,蹭蹭蹭地飄過水面上廁所。這下子博士更是差點昏倒:不會吧,到了一個江湖高手集中的地方?
博士生也內急了。這個池塘兩邊有圍墻,要到對面廁所非得繞十分鐘的路,而回單位上又太遠,怎么辦?
博士生也不愿意去問兩位所長,憋了半天后,也起身往水里跨:我就不信本科生能過的水面,我博士生不能過。
只聽咚的一聲,博士生栽到了水里。
兩位所長將他拉了出來,問他為什么要下水,他問:“為什么你們可以走過去呢?”
兩所長相視一笑:“這池塘里有兩排木樁子,由于這兩天下雨漲水正好在水面下。我們都知道這木樁的位置,所以可以踩著樁子過去。你怎么不問一聲呢?”
這個故事告訴我們:學歷代表過去,只有學習力才能代表將來。尊重經驗的人,才能少走彎路。一個好的團隊,也應該是學習型的團隊。
個人理解和感悟:看學歷更要看能力
招聘廣告上面我們經常會看到“要求本科以上學歷”,很少有企業招聘的時候 是不在乎學歷的,而且在一些正規的企業里,如果沒有足夠的學歷,是不予以考慮加薪升職的。企業在人才的競爭上面出現了一種盲目攀比學歷的不良傾向,現在經 常可以看到在某些企業的官方介紹上面寫“公司的本科以上學歷占有xx比例”的字眼,,似乎聘用的人才學歷越高
越好,在職員工高學歷的越多越好。有一則消息稱研究生學歷的人比本科學歷的人平均年薪要高出2w元,從這里看出,學歷在企業招聘和考核中的重要性。
現在越來越多的人堅持考研或者讀MBA,他們認為一旦有了高的學歷就可以“春風得意馬蹄疾,一頁看遍長安花”了。目前學歷仍然是一個隱形的、力量巨大的“殺手”,生生的把沒有一紙文憑的人拒之門外。
有文憑不等于有水平,沒有學歷不等于沒有能力,大量的事實說明, 不少才華橫溢、能力卓越的人才,他們并沒有高的學歷,有的甚至沒有大學文憑,例如愛迪生、高爾基諾貝爾 比爾蓋茨 喬布斯等,這些人雖然沒有高的學歷,但是他們取得的成就是非凡的,同樣現實中生活中也能輕易的發現,很多擁有高學歷的人在工作中能力平平、毫無建樹、庸庸 碌碌的過萬了一生,管理者在選擇人才時,只能把學歷當作一種參考條件,更重要的是要看這個人的實際能力。如果企業不從實際出發,競相制定一些高學歷的規 定,對學歷的要求過為嚴格,甚至唯學歷取人,很難選拔出優秀的人才,衡量人才既要有文化程度方面的要求,更總要視履行崗位職責的能力,真正使那些有學歷, 有智慧又有能力的人得到重用.
伯 樂相馬,主要是看馬能否跑千里而不是看馬的出身。近有消息說,有些用人單位招聘人才的取向已更加務實,選才標準正在由“學歷型”向“能力型”轉變,這是一 種令人欣慰的轉變。畢竟,千里馬是跑出來的,人才是干出來的。創造業績主要不是靠職前的學歷,而是靠任職后的實踐經歷和創造性努力。但愿我們公開選拔干部 時,能夠更重任職的能力而不是更重職前的學歷。
一個人是否真正的有才能,并不能以學歷作為衡量的唯一標準,管理者在選人、用人時,不要被學歷遮住了視野,二應該把有實際能力的員工放在最重要的位置上
春節前和同事在回家的路上看到了建筑工地,不由的感慨建筑業相比軟件業來講實在是成熟太多了! 想想看,建筑師設計好圖紙,交給建筑公司(大包工頭), 大包工頭再報給小包工頭, 小包工頭隨便抓一些農民工就可以干活了! 農民工們可不懂得那么多高深的建筑原理, 對整個建筑也并不了解,可是他們只需要把自己的一磚一瓦做好,整個建筑就能做成了 -- 當然也有豆腐渣工程-- 但畢竟是少數,排除在外。
更重要的是他們根本不用擔心項目的后期客戶突然想改設計方案,客戶不會也不可能要求你把朝北的窗戶挪到南邊去,也不會要求把10層樓中的第3層和第7層扒掉重蓋。
我們這些苦苦掙扎的碼農們肯定會想, 什么時候軟件業也能這樣啊,什么時候我們也能快樂編程,按時上下班,或者以后這些底層的Labor work都讓機器人做了, 我們都去做需求,架構,設計, 然后項目按進度,高質量的完成, 大家都很happy...
但是無數的無情現實告訴教育我們:別做夢了,這是絕對不可能的, 至少在可以預見的時間段(比如50年)是不可能的, 原因就在于軟件的復雜性,在現有的技術情況下, 軟件的固有復雜性無法解決, 只有依靠我們這么碼農們去彌補。
為什么軟件這么復雜, 為什么我們無法像建筑業蓋房子,汽車業裝配汽車一樣去寫軟件?
布魯克斯 在著名的《人月神話》中提到軟件的內在復雜性, 的確,軟件系統的復雜性遠遠超過建筑業和制造業, 軟件的需求是在人的腦子中的, 用自然語言都很難完整、準備的表達出來,更不用說用計算機(好吧,更好聽的名字是”電腦“)這種原始的工具了。 不錯,我用的正是”原始“這個詞, 從二進制語言,到匯編語言,再到高級語言,其最基本的、最核心的東西依然是順序,循環,分支, 即使加上面向對象,動態語言,庫, 框架,計算機語言的本質仍然沒有改變,我們只是在已經建好的大廈上做裝飾而已。 使用這種原始的工具,怎么能夠表示復雜的需求?
程序員的出現正是為了填充這之間的巨大鴻溝,程序員需要用自己的大腦,使用極其”原始“的工具, 把無法準確表述的,尚在腦子中的需求映射到代碼上,其難度可想而知!
當然我們程序員也不笨, 在長期的斗爭中,我們學會了把一個問題用劃分為一個一個的模塊, 讓這些模塊低耦合,高內聚, 我們還學會了分層,讓各個部分的聯系達到最小, 可是所有的這些努力只是把復雜性降低了一點, 本質的復雜性依然存在。
未完待續。。。
酒宴開始。
酒杯盛酒,酒杯碰撞,這是物理層;
你要根據不同人的外貌特征找到你要敬酒的人所坐的位置,這是IP協議(網絡層);
你明白,敬酒的實際目的是加深感情,這在應用層,而這酒中的感情,才是報文的數據部分。
你和某位新見面的兄弟互相來回敬酒,這叫TCP;
你給同一位好兄弟敬酒好多次,死命灌他,他也不回禮,這叫UDP;
你對全桌的人說,來,咱們同歸于盡,這叫廣播;
你在對這一桌的人順序挨個敬酒,這叫令牌環。
你對該兄弟說,初次見面,請多關照,請問閣下尊姓大名,敬酒一杯,這叫SYN報文;
這位兄弟說,同是天涯淪落人,相逢何必曾相識,喝!這叫ACK報文;
你一看,對方的啤酒怎么沒有氣泡啊,不行,你怎么能拿茶水當啤酒呢?這叫數據校驗。
有一個兄弟過來給你桌上的領導敬酒,你說不行,領導喝多了,不能再喝了,這叫防火墻;
有一位兄弟過來敬酒,你說10分鐘里面已經喝了5杯了,達到我極限了,這叫帶寬;
而且我還沒回禮呢,現在喝不下了,先緩緩,這叫擁塞控制;
你現在要給你最好的兄弟敬酒,于是你先找到了他所在的桌子(網絡號),再找到他本人的位置(主機號);
從你要準備敬酒到敬酒完成,這叫時延,其中要經歷倒酒(發送時延)、碰杯(傳播時延)、你的兄弟被灌下(處理時延)這幾個過程。
終于,你醉了,你吐了一地,不省人事,這叫緩沖區溢出。
故事一
去過廟的人都知道,一進廟門,首先是彌陀佛,笑臉迎客,而在他的北面,則是黑口黑臉的韋陀。
但相傳在很久以前,他們并不在同一個廟里,而是分別掌管不同的廟。 彌樂佛熱情快樂,所以來的人非常多,但他什么都不在乎,丟三拉四,沒有好好的管理賬務,所以依然入不敷出。而韋陀雖然管賬是一把好手,但成天陰著個臉,太 過嚴肅,搞得人越來越少,最后香火斷絕。
佛祖在查香火的時候發現了這個問題,就將他們倆放在同一個廟里,由彌樂佛負責公關,笑迎八方客,于是香火大旺。而韋陀鐵面無私,錙珠必較,則讓他負責財務,嚴格把關。在兩人的分工合作中,廟里一派欣欣向榮景象。
故事二
在動物園里的小駱駝問媽媽:"媽媽媽媽,為什么我們的睫毛那么地長?"
駱駝媽媽說:"當風沙來的時候,長長的睫毛可以讓我們在風暴中都能看得到方向。"
小駱駝又問:"媽媽媽媽,為什么我們的背那么駝,丑死了!"
駱駝媽媽說:"這個叫駝峰,可以幫我們儲存大量的水和養分,讓我們能在沙漠里耐受十幾天的無水無食條件。"
小駱駝又問:"媽媽媽媽,為什么我們的腳掌那么厚?"
駱駝媽媽說:"那可以讓我們重重的身子不至于陷在軟軟的沙子里,便于長途跋涉啊。"
小駱駝高興壞了:"嘩,原來我們這么有用啊!!可是媽媽,為什么我們還在動物園里,不去沙漠遠足呢?"
故事三
有個魯國人擅長編草鞋,他妻子擅長織白絹。他想遷到越國去。友人對他說:“你到越國去,一定會貧窮的。”“為什么?”“草鞋,是用來穿著走路的,但越國人 習慣于赤足走路;白絹,是用來做帽子的,但越國人習慣于披頭散發。憑著你的長處,到用不到你的地方去,這樣,要使自己不貧窮,難道可能嗎?”
故事一告訴我們:其實在用人大師的眼里,沒有廢人,正如武功高手,不需名貴寶劍,摘花飛葉即可傷人,關鍵看如何運用。
故事二告訴我們:天生我才必有用,可惜現在沒人用。一個好的心態+一本成功的教材+一個無限的舞臺=成功。每個人的潛能是無限的,關鍵是要找到一個能充分發揮潛能的舞臺。
故事二告訴我們:一個人要發揮其專長,就必須適合社會環境需要。如果脫離社會環境的需要,其專長也就失去了價值
個人理解和感悟:充分發揮員工的長處
管理者的任務,簡單的說就是找到對的人,把他們放到對的地方,然后鼓勵他們充分發揮自己的創意,完成本職工作,在這個過程中管理者既要用人職場,又要容忍之短,使員工最大限度的發揮自己的才能,達到合理使用人才的目的。
正確的用人之道,就是用人的長處,即讓一個人的長處和優勢得到充分的發揮,讓一個人的短處和劣勢得到有效的避免,正所謂“人盡其才,物盡其用”“木匠手中 無爛木”“智者不用其短,而用愚人之所長也”,從某種意義上說天下沒有無用之人,一個擅長用人的管理者,能將每個人都派上用場
如何才能揚人之所長
1、管理者必須做到客觀公正。每個人都不可避免的會有自己的好惡,也會收到成見、偏見影響、管理者一定要待人寬容,心胸開闊,一切從公司的利益出發,不可錯過一個人才
2、管理者應該充分利用科學方法。人才入冰山,其優秀特質浮出水面的只有1/3 ,如果不運用一些科學的方法很難看出來,方法有很多,筆試、面試、心理測試、情景模擬、評價中心等,在使用的過程中要注意靈活運用
3、將人才放到對的位置上。根據其特點,為其提供充分展示自己能力的平臺,讓其在實際的工作中不斷鍛煉
4、適時展開具有針對性、個性化的培訓。培訓不但要補員工所短,同時應該培訓員工長處,讓員工之“長”根突出、更醒目。并讓其在你的公司里面形成一定的品牌
5、優化配置、平衡互補,取各家之“長”溶于一爐,并相互揚“長”,相互促“長”
看來看下面的一段代碼:
代碼片段1
這段代碼的輸出是什么?相信很多人都會很容易的猜到:false,因為a、b兩個對象的地址不同,用“==”比較時是false。恭喜你,答對了。
再看下面的一段代碼:
代碼片段2
你可能會回答,這沒什么不一樣啊,所以還是false。很遺憾,如果你執行上面的一段代碼,結果是true。
上面的代碼可能讓你有些意外,那好吧,再看看下面的這段代碼:
代碼片段3
結果是true嗎?很遺憾,如果你執行上面的一段代碼,結果是false。
感到吃驚嗎?那最后再看下面的一段代碼:
代碼片段4
最后的結果,可能你已經猜到了,是true。
現在我們分析一下上面的代碼。可以很容易的看出,這一系列代碼的最終目的都是用“==”對兩個對象進行比較。Java中,如果用“==”比較兩個對象結果為true,說明這兩個對象實際上是同一個對象,false說明是兩個對象。
現在,我們來看看為什么會出現上面的現象。
我們先看代碼片段4:最后的運行結果是true,說明a、b兩個對象實際上是同一個對象。但是a對象是通過調用Integer的valueOf方法創建的,而b對象是通過自動裝箱創建出來的,怎么會是同一個對象呢?難道問題在字節碼那里,畢竟Java程序是依靠虛擬器運行字節碼來實現的。
通過jdk中自帶的工具javap,解析字節碼,核心的部分摘取如下:
代碼中我們只調用了一次Integer.valueOf方法,但是字節碼中出現了兩次對Integer.valueOf方法的調用。那么另一次是哪里呢?只可能在自動裝箱時調用的。因此這段代碼實際上等價于:
現在問題就簡單了:看jdk源代碼,查看valueOf方法的具體實現:
看到這兒,上面的代碼就很明確了:對于-128到127的數字,valueOf返回的是緩存中的對象。所以兩次調用Integer.valueOf(100)返回的都是同一個對象。
我們再先看代碼片段3:根據上面的分析,代碼片段3實際上等價于以下代碼:
由于156不在-128到127范圍內,所以兩個對象都是通過new Integer()的方式創建的,所以最后結果為false。
片段1和片段2就不做具體分析了,相信讀者可以自行分析。
最后,請大家思考一下問題:通過上面的分析,了解到整數的自動裝箱是通過Integer.valueOf(int number)實現的,那么自動拆箱是如何實現的呢?
1.關于JSP標簽的好處就不再羅嗦
數據字典就是使用的下拉框,只要定義使用那個字典就會將這個字典可用的內容顯示出來
顯示字典時只要定義那個字典和屬性值就可以顯示出字典的顯示值
2.首先在web.xml中定義自定義標簽加載的引用,兩個屬性分別是引用的URI和加載路徑
3.在web-html.tld中定義自己的標簽,數據字典應用的話我們需要一個標簽庫,三個標簽。分別是,select標簽,options標簽,和現實數據字典的標簽,每個標簽都對應不同的實現類
4.實現類
實現類的作用就是在后臺拼接所需HTML標簽內容,然后由JSP進行輸出
實現類最主要的兩個方法,一個遇到這個標簽開始時輸出,一個是結束時輸出
如果需要定義屬性,可以參考實現類定義屬性,并在TLD中定義,在JSP中使用標簽時快捷鍵就可以出來這個屬性
首先是select標簽的代碼:
關于返回參數,返回具體數字也可以,不用過于糾結
然后是下拉內容實現類
具體你的字典數據從數據庫中如何存儲如何查詢,可以自定義實現
顯示的標簽實現,為了將來可以在頁面取到標簽內容值,我們定義隱藏域來保存屬性值,然后在顯示顯示內容
5.JSP中引用,直接在index.jsp中引用
需要引入相應的標簽內容,引入的方式在JSP頭部引用
標簽的屬性可以設置也可以不設置,標簽的使用和HTML標簽的使用是一樣的,定義屬性即可
6.后話
訪問項目就可以看到效果,附件是這個項目的源代碼,導入到MyEclipse中可以查看
如果想要自己設計一個大的標簽庫,可以設計一個父類,包含一些主要的屬性,例如name,id,style等屬性。然后在子類中定義自己的特有屬性
這個實現只是學習一下JSP自定義標簽使用的HelloWorld程序,然后包含了字典應用的實際例子,程序簡單,僅供參考
已經是到北京的第五個年頭了,從最開始的想做手機游戲而學習編程,到后來做 Web 開發,又開始做日志分析,接觸到了 Hadoop ,最終確定下來自己的技術方向。曾經以為五年的時間,差不多都應該做出自己的產品來,而實際情況卻是:一直在用的技術還了解的只是皮毛。所以,雖然在 IT 這個行業已經可以說自己工作了五年時間,但感覺自己還只是剛剛起步,跑在前面的大有人在,自己還要繼續努力。
從去年開始接觸的 Hadoop ,當時的日志分析已經遇到了瓶頸,用 Hadoop 一試,確實性能提高不少,只可惜,當時的公司因為各方面的原因,開始關注云存儲這個方向,雖然即使到了現在我也不太好判定這個戰略方向的轉變 是對還是錯,但是對于當時只是普通員工的我來說,剛好發現了一個實用的技術卻沒有時間和機會研究、應用,讓人都有點惱火。可能像我這樣的凡夫俗子,還沒有 達到能站在和老板相同高度看待問題的程度,而我能做的,換家公司,找一個能應用自己感興趣的技術的公司。于是, 2011 年,就又以跳槽開始了。
但 是我并沒有想到今年會跳兩次,我一直都感覺自己是個踏踏實實的人,但實際情況卻是這幾年北京這幾個同學我換的工作最多。我也很明白:頻繁的換工作,害的其 實是自己。每一份工作,都需要花一定的時間去適應,就拿試用期來說,一般的都應該是三個月吧,一年換兩份工作,光試用期就半年出去了,真正能踏踏實實做點 事的時間,又能有多少呢?本來在年初換工作時,打算結婚也被拿了出來說事,還想著有上一年的時間,在老家付個首付,沒有想到,造化弄人,六月份的時候,一 邊看著轉正的通知郵件,一邊和主管協商著什么時候離職。
但 我并不后悔去了這家公司,雖然只有短短兩個月的時間,卻讓我學到了很多東西,開闊了視野。原來還有這樣讓人認同的企業文化,原來還有經歷這么豐富的同事, 原來還有這么愛帶著兄弟們吃喝玩樂的主管,原來程序員的生活,不一定就是加班加班,原來我們可以讓自己的生活更精彩。尤其是在去了一趟杭州之后。第一次坐 飛機,下飛機的時候耳膜難受的要死,聲音都快聽不見了,而我們只有一天的時間,第二天就又要飛回北京,我是想著趕緊休息休息,而同事是一邊說著西湖、蘇堤 啥的就雙眼冒光,大晚上的整個繞西湖走了一圈,沒把我累死。不過也確實感受到了和北京不一樣的生活方式和態度,那些就在岸邊上的茶莊,彰顯著和北京燒烤攤 不一樣的韻味。只是,當終于下了飛機,換了快軌,出了地鐵之后,又一次回到北京的地面上時,我竟然都有種過年時候回到了老家的感覺,原來,在一個城市生活 上一段時間,哪怕只是幾年,或多或少的,竟然會產生感情。
可 惜的是,我還沒有體會的多深,因為公司內部的原因,我們的項目沒用做成,大家因為這個項目聚在了一起,項目沒了,大家也就都散了。而且散的那么快,快的都 不可思議。應聘到了一個公司,一個項目做不成,那還可以做別的,一個公司可以有好多項目,而我們這個項目組的成員,明顯大家都很有自己的想法,只想做自己 想做的事,而并不是到了一個公司后就開始混日子。那么既然是這樣,我想我應該祝福他們,后來一個月后,主管又聯系我們聚了一次,大家果然都在做自己擅長、 喜歡的工作,雖然已經不在一個團隊,但由衷的為他們感到高興。
應該說,今年我本來是起了一個好頭,在項目組中有這些有著共同理想的同事,但因為中間的變故,團隊散了,我也慢慢的走向了墮落。現在回想起來,簡直都覺得有點不可思議。
在等待離職的日子里,我看完了《七龍珠》全集,還有《盜墓筆記》,看到最新的更新 ( 當時還沒有完結 ) ,每天去了之后就是看漫畫、看小說,本來之前因為項目的原因,一個月的時間把 Demo 寫的差不多都可以進行演示了,結果變故一來,立馬就好像泄了氣的皮球一樣,什么準備結婚,什么鉆研技術,一概不管,完全就把上班當成了去網 吧。自然,白天都成這樣了,晚上還期望能老老實實的看書嗎,不可能了,再然后,等再到了新公司之后,看書的習慣就怎么也沒用再培養起來。
到 了新公司,這個應該老實點了吧,畢竟當時都已經六月份了,半年的時間都已經過去了,如果再折騰折騰,整個一年就過去了,技術這玩意,要說看看書就能學會, 我還真是做不到,必須得有實際的東西去做,在項目上應用,才能快速的掌握。道理也都明白,可就是中間經歷了那么一檔子事之后,整個人都浮躁了起來,再想回 到以前的狀態,真的很難,只能是慢慢的適應。
這 一適應就又是三個月,十一假期時候,交接過來的老版本的日志分析系統出了次問題,正好趕上在唐山參加同學婚禮,三十號下午到的唐山,晚上和同學侃到一兩 點,四五點又起來接新娘盤頭,參加一天的婚禮下午又坐車回北京,休息了一個晚上之后,從二號早上七點開始恢復數據,一直到三號早上六點,之前也加班搞過通 宵,但像這次這樣整還真是頭一次,完事之后啥感覺?要說程序寫的不好能害死人,程序交接的不好,更能害死人。
假期之后,替換老系統的計劃提上了日程,和之前的不一樣,也不用再寫什么 Demo 先演示啥的,論證已經通過,直接開始用就是。 Hadoop 、 HBase 、 Hive 、 Chukwa 、 Sqoop ,一個都不能少,有很多時候其他組的同事看到我在整 Hive 都奇怪:你們組就每天調 SQL ?
有的時候我自己都快搞不清業務關系,以及寫好的 hql 的執行條件,以至于寫了一大堆的腳本,而其他同事在某一處想調試時,光這個執行順序我就得好好解釋一遍,突然發現,我現在的這套程序,雖然聽 上去比之前老版本的簡單,但實際執行的步驟復雜,隨著考慮問題的增多,我的腳本也越來越多,慢慢的,可能就和老系統差不多了,只不過,老系統是一個腳本執 行 N 多程序,我是 N 多程序對應著自己的腳本。原來,程序員看別人的程序與看自己的程序,在最開始的時候,是有私心的。
把 HBase 中表的存儲空間從 150G 優化到了 120G , hql 分析時間由兩個小時優化到了半個小時,好像有那么點成果,可是自己一直對執行效率不是很滿意,搗鼓了一個多月一直都沒啥進展,直到在和同事的討論中,聽取了別人的建議,再結合自己的業務,存儲一下從 120G 優化到了不到 5G ,執行時間也從三個小時優化到了十分鐘。但是,這樣就已經可以了嗎?不行, 2012 ,還得繼續。此外,明白了一個道理:和別人多溝通、多分享,比自己一個人埋頭苦干要強百倍。
剩下的,對來年做個規劃吧, 2012 了,該辦的事必須得抓緊時間辦啊。
關 于看書,之前看過一篇文章,提到程序員都是自學成才,通過項目,通過好書,尤其是精讀一本好書。只是可惜,計算機類的圖書,越是好書塊頭越大,看前頭幾章 的時候壓力最大,“這得啥時候才能看完呢?”雖然這是個錯誤的觀點吧,但有時候還是忍不住會去想,這個時候,毅力、恒心真的很重要,當然,如果是結合項目 需要來看,那就更好了,一邊看一邊能解決實際問題,這樣看書肯定是效率百倍。如果能再按照書中給出的練習強度來檢查學習程度,那就更加 OK 了,只是,結合自身實際來看,這個也需要點恒心。
列下書單吧,希望自己能堅持完成。
《深入理解計算機系統》
《 Java 編程思想》
《 C++ 編程思想》
《微積分學教程》
關 于英語,快放假了無所事事時,看到了篇講如何學習英語的文章,很受啟發,英語這玩意,先別說它重不重要,要想學,關鍵還是看自己有沒有興趣,有興趣,再結 合合理的學習方法,如果能堅持一段時間,我想,應該是能見到點效果的吧。這個事情想了很長時間,但一直都只是停留在想想的階段,從來就沒有說實際行動過一 次。如果再不抓住這一年的時間,恐怕以后自己會找到更多的借口,所以,把這個也寫上吧,一年的時間,說長不長,說短不短,多給自己安排點事,別再留出看漫 畫的時間來。
列下目標吧,希望自己能堅持完成。
能看完一本原版英文小說
能聽懂一部無字幕英文電影的對白
關于技術, Hadoop 現在只是應用,對它的源碼還沒有怎么看,接下來打算從比較簡單入手,慢慢的,由淺入深吧,希望能對它的底層實現有更加清晰的認識。這個在日常工作中天天都用的到,按說應該是花時間最多的,希望能比前兩個成績多點吧。
目標的話,能分析一遍 Hadoop 及其子項目的源碼。
計劃列了不少,能全部完成的話還真得拜了佛,但不管怎樣,能堅持完成二三,也算是對 2012 有個交代,一年的時間,激情會慢慢消磨殆盡,但如果能時不時的繃緊這根弦,把它養成習慣,或許也就省了燒香了。
有了創業的想法,如何邁出第一步?曾經我跟朋友講過很多次,我告訴他:如果你有想法,一定要立即執行,不要考慮能不能成功的問題。
但是輪到自己的時候就會很猶豫,我本質上來說也是很喜歡研究技術的人所以創業的話我會希望完全自己編寫程序,但是自己寫所要學習的知識太多了,花費的時間太長了,一開始考慮的太多,反而忘了如何走出第一步。
這 么多年來一直想做一個網站,但是目的并不太明確,現在終于有了一點頭緒,于是全身都燃燒起來了,但是接下來的事情,放假,結婚,南北兩地跑,一刻不能清 閑,連續兩周沒有上網。雖然激情沒有冷卻,但是已經比剛開始思考的東西多了很多,各種奇思妙想,創新點子都冒出來了,只是苦惱了,一直都無法付諸實踐。其 中很多想法都是到了網站達到一定程度才能做的。
這段時間考慮了太多的東西,不懂得如何推廣網站,需要學習,網站的內容需要用戶來創造,如何才能吸引用戶來這里落地安家,如何保證安全,如何定位、規范內容,起個什么名字,申請什么域名,選擇什么語言,投資多少錢,找人合作嗎,如何應對競爭,如何盈利.....
各 種考慮紛至沓來,腦子亂糟糟,反而不知道如何走出第一步了,只感覺自己成功的希望很渺小,那股子激情越來越弱,現實太殘酷,勇氣已經快要消失了,唯一剩下 的一個念頭是:做這個網站可以逼自己學到東西,所以不論能不能掙錢,都有做這個網站的價值。于是還是鼓起勇氣對自己說,一定要把這個網站做出來。
現在看的太遠也不是什么好事,當務之急應該是把網站搭起來。我覺得應該是邊做邊學。如果暫時做不到就先放下來,把它當做自己的一個目標。
再想想網站的詳細定位,想個好名字就去申請域名和空間。哪怕只有一個主頁,第一步一定要邁起來。面對困難不敢邁步的人,永遠不能成功。
數據庫安全涉及的問題
數據庫安全是當今最重要的問題。您的數據庫可能允許顧客通過互聯網購買產品,它也可能包含用來預測業務趨勢的歷史數據;無論是哪種情況,公司都需要可靠的數據庫安全計劃。
數據庫安全計劃應該定義:
允許誰訪問實例和/或數據庫
在哪里以及如何檢驗用戶的密碼
用戶被授予的權限級別
允許用戶運行的命令
允許用戶讀取和/或修改的數據
允許用戶創建、修改和/或刪除的數據庫對象
DB2安全機制
DB2中有三種主要的安全機制,可以幫助 DBA 實現數據庫安全計劃:身份驗證(authentication)、授權(authorization) 和特權(privilege)。
身份驗證是用戶在嘗試訪問DB2實例或數據庫時遇到的第一種安全特性。DB2身份驗證與底層操作系統的安全特性緊密協作來檢驗用戶ID和密碼。DB2還可以利用Kerberos這樣的安全協議對用戶進行身份驗證。
授權決定用戶和/或用戶組可以執行的操作以及他們可以訪問的數據對象。用戶執行高級數據庫和實例管理操作的能力由指派給他們的權限決定。在 DB2 中有5種不同的權限級別:SYSADM、SYSCTRL、SYSMAINT、DBADM和LOAD。
特權的粒度比授權要細,可以分配給用戶和/或用戶組。特權定義用戶可以創建或刪除的對象。它們還定義用戶可以用來訪問對象(比如表、視圖、索引和包)的命 令。DB2 9中新增的一個概念是基于標簽的訪問控制(LBAC),它允許以更細的粒度控制誰有權訪問單獨的行和/或列。
客戶機、服務器、網關和主機
數據庫環境常常由幾臺不同的機器組成;必須在所有潛在的數據訪問點上保護數據庫。在處理 DB2 身份驗證時客戶機、服務器、網關和主機的概念尤其重要。
數據庫服務器是數據庫實際所在的機器(在分區的數據庫系統上可能是多臺機器)。DB2數據庫客戶機是對服務器上的數據庫執行查詢的機器。這些客戶機可以是本地的(駐留在與數據庫服務器相同的物理機器上),也可以是遠程的(駐留在單獨的機器上)。
如果數據庫駐留在運行AS/400(iSeries)或OS/390(zSeries)的大型機上,它就稱為主機或主機服務器。
網關是一臺運行DB2 Connect產品的機器。DB2客戶機可以通過網關連接駐留在主機上的DB2數據庫。
網關也稱為DB2 Connect服務器。安裝了 Enterprise Server Edition產品的系統也內置了DB2 Connect功能。
DB2身份驗證
DB2 身份驗證控制數據庫安全計劃的以下方面:
誰有權訪問實例和/或數據庫
在哪里以及如何檢驗用戶的密碼
在發出attach或connect命令時,它在底層操作系統安全特性的幫助下完成這個任務。attach命令用來連接DB2實例,connect命令用來連接DB2實例中的數據庫。下面的示例展示了DB2對發出這些命令的用戶進行身份驗證的不同方式。具體如下
用創建 DB2 實例時使用的用戶ID登錄到安裝 DB2 的機器上。發出以下命令:
$ db2 attach to db2inst1
Instance Attachment Information
Instance server = DB2/LINUX 9.7.5
Authorization ID = DB2INST1
Local instance alias = DB2INST1
在這里,隱式地執行身份驗證。使用登錄機器的用戶ID,并假設這個ID已經經過了操作系統的檢驗。
$ db2 connect to sample user db2inst1 using a
Database Connection Information
Database server = DB2/LINUX 9.7.5
SQL authorization ID = DB2INST1
Local database alias = SAMPLE
在這里,顯式地執行身份驗證。用戶db2inst1和密碼a由操作系統進行檢驗。用戶db2inst1成功地連接到示例數據庫。
db2 connect to sample user test1 using password new chgpass confirm chgpass
與上例中一樣,用戶ID db2inst1和密碼password由操作系統進行檢驗。然后,操作系統將db2inst1的密碼從a改為chgpass。因此,如果再次發出例 2 中的命令,它就會失敗。
DB2身份驗證類型
DB2使用身份驗證類型決定在什么地方進行身份驗證。例如,在客戶機---服務器環境中,是客戶機還是服務器檢驗用戶的 ID和密碼?在客戶機---網關---主機環境中,是客戶機還是主機檢驗用戶的ID和密碼?
DB2 9能夠根據用戶是試圖連接數據庫,還是執行實例連接和實例級操作,指定不同的身份驗證機制。在默認情況下,實例對于所有實例級和連接級請求使用一種身份驗 證類型。這由數據庫管理程序配置參數AUTHENTICATION來指定。V9.1 中引入了數據庫管理程序配置參數 SRVCON_AUTH。這個參數專門處理對數據庫的連接。例如,如果在DBM CFG 中進行以下設置:
$ db2 get dbm cfg|grep -i auth
Server Connection Authentication (SRVCON_AUTH) = KERBEROS
Database manager authentication (AUTHENTICATION) = SERVER_ENCRYPT
那么在連接實例時會使用SERVER_ENCRYPT。但是在連接數據庫時會使用KERBEROS身份驗證。如果在服務器上沒有正確地初始化KERBEROS,但是提供了有效的用戶ID/密碼,那么允許這個用戶連接實例,但是不允許他連接數據庫。
下表總結了可用的 DB2 身份驗證類型。在客戶機---網關---主機環境中,這些身份驗證選項在客戶機和網關上設置,而不是在主機上。本節將詳細討論如何設置這些選項。
類型 | 描述 |
SERVER | 身份驗證在服務器上進行。 |
SERVER_ENCRYPT | 身份驗證在服務器上進行。密碼在客戶機上進行加密,然后再發送到服務器。 |
CLIENT | 身份驗證在客戶機上進行(例外情況見 處理不可信的客戶機 )。 |
*KERBEROS | 由 Kerberos 安全軟件執行身份驗證。 |
*KRB_SERVER_ENCRYPT | 如果客戶機設置是 KERBEROS,那么由 Kerberos 安全軟件執行身份驗證。否則使用 SERVER_ENCRYPT。 |
DATA_ENCRYPT | 身份驗證在服務器上進行。服務器接受加密的用戶 ID 和密碼,并對數據進行加密。這個選項的操作方式與 SERVER_ENCRYPT 相同,但是數據也要加密。 |
DATA_ENCRYPT_CMP | 身份驗證方式與 DATA_ENCRYPT 相同,但是允許不支持 DATA_ENCRYPT 的老式客戶機使用 SERVER_ENCRYPT 身份驗證進行連接。在這種情況下,數據不進行加密。如果進行連接的客戶機支持 DATA_ENCRYPT,就會進行數據加密,而不能降級到 SERVER_ENCRYPT 身份驗證。這個身份驗證類型只在服務器的數據庫管理程序配置文件中是有效的,而且在客戶機或網關實例上使用 CATALOG DATABASE 時是無效的。 |
GSSPLUGIN | 身份驗證方式由一個外部 GSS-API 插件決定。 |
GSS_SERVER_ENCRYPT | 身份驗證方式由一個外部 GSS-API 插件決定。在客戶機不支持服務器的 GSS-API 插件之一的情況下,使用 SERVER_ENCRYPT 身份驗證。 |
注意:這些設置只對 Windows 2000、AIX、Solaris 和 Linux® 操作系統有效。
在服務器上設置身份驗證
在數據庫服務器上,在數據庫管理程序配置(DBM CFG)文件中使用 AUTHENTICATION 參數設置身份驗證。請記住,DBM CFG文件是一個實例級配置文件。因此,AUTHENTICATION參數影響這個實例中的所有數據庫。以下命令演示如何修改這個參數。
要查看配置文件中的身份驗證參數:
$db2 get dbm cfg
要將身份驗證參數修改為 server_encrypt
:
$ db2 update dbm cfg using authentication server
$db2stop
$db2start
注:雖然更新完注冊表參數后,直接執行 db2 get dbm cfg|grep -i auth可以看到注冊表參數已經修改完畢。但是為使其生效,還是需要重啟實例。
某些身份驗證類型(比如GSSPLUGIN、KERBEROS 和 CLIENT)要求設置其他數據庫管理程序配置參數,比如 TRUST_ALLCLNTS、SRV_PLUGIN_MODE 和 SRVCON_PW_PLUGIN。關于這些設置的更多細節見下文。
在網關上設置身份驗證
使用catalog database命令在網關上設置身份驗證。在這里的示例中,我們將使用名為myhostdb 的主機數據庫。
要將網關身份驗證類型設置為 SERVER,應該在網關機器上發出以下命令:
db2 catalog database myhostdb at node nd1 authentication SERVER
db2 terminate
注意,身份驗證不會在網關本身執行。在DB2 Version 8中,身份驗證必須在客戶機或主機數據庫服務器上執行。
在客戶機上設置身份驗證
我們來考慮兩臺單獨的客戶機上的兩種情況。我們將一個客戶機配置為連接服務器機器上的數據庫(DB2 UDB LUW 分布式平臺),另一個客戶機連接主機上的數據庫(例如 DB2 for zSeries)。
連接服務器數據庫的客戶機: 在針對要連接的數據庫的數據庫目錄項中,客戶機身份驗證設置必須匹配數據庫服務器上的設置(但是 KRB_SERVER_ENCRYPT、DATA_ENCRYPT_CMP 和 GSS_SERVER_ENCRYPT 例外)。
我們假設服務器身份驗證類型設置為 SERVER。在客戶機上發出以下命令對名為 sample 的服務器數據庫進行編目:
$db2 catalog database sample at node nd1 authentication SERVER
注:如果沒有指定身份驗證類型,客戶機將默認使用 SERVER_ENCRYPT。
連接主機數據庫的客戶機: 我們假設網關上的身份驗證類型設置為SERVER。如果沒有指定身份驗證類型,那么在通過 DB2 Connect訪問數據庫時假設采用SERVER_ENCRYPT身份驗證。身份驗證在主機數據庫服務器上進行。從客戶機發出以下命令會導致客戶機向網關 發送未加密的用戶 ID 和密碼:
db2 catalog database myhostdb at node nd1 authentication SERVER
現在假設網關上的身份驗證類型設置為SERVER_ENCRYPT。身份驗證同樣在主機數據庫服務器上進行。用戶ID和密碼在客戶機上進行加密,然后再發送到網關,并在網關上進行加密,然后再發送到主機。這是默認的做法。
處理不可信的客戶機
如果服務器或網關將身份驗證類型設置為CLIENT,那么這意味著期望客戶機對 用戶的ID和密碼進行身份驗證。但是,一些客戶機的操作系統沒有本機安全特性。這種不可信的客戶機包括在Windows 98和Windows ME上運行的DB2。DB2 V9.1不支持 Windows 98 或 Windows ME,但是它支持低版本的客戶機,所以仍然可能必須處理不可信的V8客戶機。
在 DBM CFG 文件中有兩個額外參數,用于在服務器或網關身份驗證方法設置為CLIENT,而不可信的客戶機試圖連接數據庫或DB2實例時,決定應該在哪里進行身份驗證。這些參數是 TRUST_ALLCLNTS和TRUST_CLNTAUTH 參數。
當服務器或網關身份驗證類型為CLIENT 時,除了TRUST_ALLCLNTS和 TRUST_CLNTAUTH 參數之外,還有兩個因素會起作用。第一個因素是用戶 ID 和密碼是否是顯式提供的,第二個因素是進行連接的客戶機的類型。有三種DB2客戶機:
不可信的客戶機 :如上所述
主機客戶機 :運行在 zSeries 這樣的主機操作系統上的客戶機
可信客戶機 :運行在具有本機安全特性的非主機操作系統(比如 Windows NT、2000、2003、XP 以及所有形式的 Unix / Linux)上的客戶機
當身份驗證設置為 CLIENT 時
下表總結了如果服務器的身份驗證類型設置為 CLIENT,那么在每種類型的客戶機向服務器發出連接命令時將在哪里進行身份驗證。
是否提供了 ID/密碼? | TRUST_ALLCLNTS | TRUST_CLNTAUTH | 不可信的客戶機 | 可信的客戶機 | 主機客戶機 |
No | Yes | CLIENT | CLIENT | CLIENT | CLIENT |
No | Yes | SERVER | CLIENT | CLIENT | CLIENT |
No | No | CLIENT | SERVER | CLIENT | CLIENT |
No | No | SERVER | SERVER | CLIENT | CLIENT |
No | DRDAONLY | CLIENT | SERVER | SERVER | CLIENT |
No | DRDAONLY | SERVER | SERVER | SERVER | CLIENT |
Yes | Yes | CLIENT | CLIENT | CLIENT | CLIENT |
Yes | Yes | SERVER | SERVER | SERVER | SERVER |
Yes | No | CLIENT | SERVER | CLIENT | CLIENT |
Yes | No | SERVER | SERVER | SERVER | SERVER |
Yes | DRDAONLY | CLIENT | SERVER | SERVER | CLIENT |
Yes | DRDAONLY | SERVER | SERVER | SERVER | SERVER |
DRDAONLY 意味著只信任主機客戶機,而不管使用 DRDA 進行連接的 DB2 Version 8 客戶機。
下面的示例說明如何在服務器和客戶機上設置身份驗證類型和參數:
在服務器上設置身份驗證:
$db2 update dbm cfg using authentication client
$db2 update dbm cfg using trust_allclnts yes
$db2 update dbm cfg using trust_clntauth server
$db2stop
$db2start
在客戶機上設置身份驗證:
$db2 catalog database sample at node nd1 authentication client
在上面的示例中,如果從任何客戶機發出命令
db2 connect to sample
那么身份驗證在客戶機上進行。如果從任何客戶機發出命令
db2 connect to sample user test1 using password
那么身份驗證在服務器上進行。
DB2的安全插件架構
DB2 V8.2引入了安全插件的概念。這個概念在DB2 V9.1中得到了進一步增強。通過使用標準的 GSS-API 調用,用戶可以編寫一個安全插件并將對用戶 ID 進行身份驗證的工作交給一個外部安全程序。這種方式的一個示例是DB2本身的KERBEROS身份驗證。在一臺機器上安裝 DB2 ESE或應用程序開發客戶機時,安裝過程中將有一些示例應用程序代碼放入實例目錄,如果查看 samples\security\plugins 目錄,就會看到如何編寫安全插件的示例。本節將概述如何在 DB2 安全架構中使用插件,但是不討論如何編寫或編譯插件本身。關于這個主題的詳細描述,請參考 DB2 UDB 安全性: 理解 DB2 Universal Database 安全性插件 。
Kerberos 身份驗證
Kerberos 身份驗證為DB2提供了一種無需通過網絡發送用戶ID和密碼的用戶身份驗證方法。Kerberos安全協議作為第三方身份驗證服務執行身份驗證,它使用傳 統的密碼術創建一個共享的密鑰。這個密鑰成為用戶的憑證,在請求本地或網絡服務時在所有情況下都使用它檢驗用戶的身份。通過使用Kerberos安全協 議,可以實現對遠程DB2數據庫服務器的單點登錄。
首先,討論如何設置DB2來使用Kerberos身份驗證。如上所述,Kerberos身份驗證在DB2 中是使用插件架構實現的。默認的kerberos 插件的源代碼在samples/security/plugins
目錄中,稱為IBMkrb5.c
。在DB2 中使用Kerberos之前,必須在客戶機和服務器上啟用和支持 Kerberos。為此,必須滿足以下條件:
1、客戶機和服務器必須屬于同一個域(用 Windows 術語來說,是可信域)。
2、必須設置適當的主體(Kerberos 中的用戶 ID)。
3、必須創建服務器的keytab文件,實例所有者必須能夠讀這個文件。
4、所有機器必須有同步的時鐘。
可以在 Kerberos 產品附帶的文檔中找到關于設置 Kerberos 的更多信息。
為了在 DB2 中啟用 Kerberos 身份驗證,必須先告訴客戶機在哪里尋找將使用的Kerberos 插件。在客戶機上,運行以下命令:
DB2 UPDATE DBM CFG USING CLNT_KRB_PLUGIN IBMkrb5
DB2 TERMINATE
在這個示例中,使用默認的 KERBEROS 插件。如果使用的Kerberos實現需要特殊功能的話,DBA可以修改這個插件來執行特殊功能。
還可以告訴客戶機它正在針對哪個服務器主體進行身份驗證。這個選項可以避免Kerberos身份驗證的第一步,即客戶機尋找它要連接的實例的服務器主體。在客戶機上對數據庫進行編目時可以指定AUTHENTICATION參數。它的格式是:
DB2 CATALOG DB dbname AT NODE node name AUTHENTICATION KERBEROS TARGET PRINCIPAL service/host@REALM
這一步是可選的。
DB2 CATALOG DB sample AT NODE testnd AUTHENTICATION KERBEROS TARGET PRINCIPAL gmilne/gmilne02.torolab.ibm.com@TOROLAB.IBM.COM
設置 Kerberos 身份驗證的下一步是設置服務器。srvcon_gssplugin_list
參數可以設置為支持的GSS-API插件的列表,但是只允許有一個Kerberos 插件。如果這個列表中沒有Kerberos 插件,那么自動地使用默認的IBMkrb5插件。如果希望允許所有身份驗證(實例連接和數據庫連接)使用Kerberos,那么執行以下命令:
DB2 UPDATE DBM CFG USING AUTHENTICATION KERBEROS
或者
DB2 UPDATE DBM CFG USING AUTHENTICATION KRB_SERVER_ENCRYPT
如果只希望 DB2 使用 Kerberos 對數據庫連接進行身份驗證(對實例連接使用 SERVER),那么執行以下命令:
DB2 UPDATE DBM CFG USING SVRCON_AUTH KERBEROS
或者
DB2 UPDATE DBM CFG USING SVRCON_AUTH KRB_SERVER_ENCRYPT
根據實例的位長度(32 或 64 位),DB2將在實例啟動時自動地裝載 IBMkrb5 插件。
其他身份驗證設置
如果查看 V9.1 實例中的DBM CFG,會看到影響DB2對用戶ID進行身份驗證的方式的各種設置。正如前面提到的,有針對標準操作系統用戶ID身份驗證的設置(CLIENT、 SERVER、SERVER_ENCRYPT、DATA_ENCRYPT、DATA_ENCRYPT_CMP),還有將身份驗證工作交給外部程序的插件 (KERBEROS、KRB_SERVER_ENCRYPT、GSSPLUGIN、 GSS_SERVER_ENCRYPT)。本節專門介紹其他一些配置變量如何影響對用戶的身份驗證。
Client Userid-Password Plugin (CLNT_PW_PLUGIN) =
Group Plugin (GROUP_PLUGIN) =
GSS Plugin for Local Authorization (LOCAL_GSSPLUGIN) =
Server Plugin Mode (SRV_PLUGIN_MODE) = UNFENCED
Server List of GSS Plugins (SRVCON_GSSPLUGIN_LIST) =
Server Userid-Password Plugin (SRVCON_PW_PLUGIN) =
Cataloging allowed without authority (CATALOG_NOAUTH) = NO
Bypass federated authentication (FED_NOAUTH) = NO
在上面的列表中,去掉了已經討論過的參數。
CLNT_PW_PLUGIN | 這個參數在客戶端的 DBM CFG 中指定。它指定用來進行客戶機和本地身份驗證的客戶機插件的名稱。 |
GROUP_PLUGIN | 默認值是空(NULL)。將它設置為用戶定義的插件就會調用這個插件進行所有組枚舉,而不依賴于操作系統的組查找。這與后面討論的授權部分相關。 |
LOCAL_GSSPLUGIN | 這個參數指定默認的 GSS-API 插件庫的名稱,當數據庫管理程序配置的身份驗證參數值設置為GSSPLUGIN 或 GSS_SERVER_ENCRYPT 時,這個庫用來進行實例級的本地授權。 |
SRV_PLUGIN_MODE | (YES/NO) 這個參數的默認設置是 NO。當改為 YES 時,以 FENCED 模式啟動 GSS-API 插件,其工作方式類似于 FENCED 存儲過程。FENCED 插件的崩潰不會導致 DB2 實例崩潰。在插件還處于開發階段時,建議以 fenced 模式運行它們,這樣的話插件中的邏輯問題和內存泄漏就不會導致實例崩潰。在確定插件是可靠的之后,應該以 unfenced 模式運行以提高性能。 |
SRVCON_GSSPLUGIN_LIST | 一 個插件列表,當使用 KERBEROS、KRB_SERVER_ENCRYPT、GSSPLUGIN 或 GSS_SERVER_ENCRYPT 時,服務器上的數據庫管理程序在身份驗證期間將使用這些插件。列表中的每個插件應該用逗號(‘,’)分隔,它們之間沒有空格。插件按照優先次序列出,首先 使用列表中的第一個插件對發送的用戶 ID/密碼進行身份驗證。只有當列出的所有插件都返回了錯誤時,DB2 才會向用戶返回身份驗證錯誤。 |
SRVCON_PW_PLUGIN | 在指定 CLIENT、SERVER 或 SERVER_ENCRYPT 身份驗證時,這個參數允許用戶修改 DB2 用來檢驗用戶 ID 和密碼的默認身份驗證方法。在默認情況下,它的值是 NULL,因此使用默認的 DB2 方法。 |
CATALOG_NOAUTH | (YES/NO) 默認值是 NO。將這個參數修改為 YES 就允許不屬于 SYSADM、SYSCTRL 或 SYSMAINT 組成員的用戶修改機器上的 Database、Node、Admin 和 DCS 編目。如果登錄的用戶使用不可信客戶機(定義見上文),或者登錄所用的用戶 ID 不允許連接數據庫或實例,但是用戶又必須在客戶機上進行編目,只有在這種情況下這個參數才是有用的。 |
FED_NOAUTH | 如 果 fed_noauth 設置為 yes,身份驗證設置為 server 或 server_encrypt,聯邦設置為 yes,那么在實例上避免進行身份驗證。它假設身份驗證在數據源上進行。當 fed_noauth 設置為 yes 時系統會發出警告。在客戶機和 DB2 服務器上都不進行身份驗證。知道SYSADM身份驗證名稱的任何用戶都擁有聯邦服務器的 SYSADM 權限。 |