posted @ 2018-01-29 14:53 tangtb 閱讀(525) | 評論 (0) | 編輯 收藏
摘要: IBM WebSphere MQ Choosing a primary installation(選擇主安裝) 閱讀全文
摘要: 如果要從程序內(nèi)的多個線程同時訪問同一個隊列管理器,應為需要同時訪問的每個線程都創(chuàng)建一個新的 MQQueueManager 對象。 閱讀全文
posted @ 2017-03-22 15:29 tangtb 閱讀(538) | 評論 (0) | 編輯 收藏
摘要: Ganglia是UC Berkeley發(fā)起的一個開源集群監(jiān)視項目,設計用于測量數(shù)以千計的節(jié)點。Ganglia的核心包含gmond、gmetad以及一個Web前端。主要 是用來監(jiān)控系統(tǒng)性能,如:cpu 、mem、硬盤利用率, I/O負載、網(wǎng)絡流量情況等,通過曲線很容易見到每個節(jié)點的工作狀態(tài),對合理調(diào)整、分配系統(tǒng)資源,提高系統(tǒng)整體性能起到重要作用 閱讀全文
posted @ 2015-02-25 14:48 tangtb 閱讀(6823) | 評論 (0) | 編輯 收藏
摘要: Pig是一個基于Hadoop的大規(guī)模數(shù)據(jù)分析平臺對高級過程語言,適合于使用 Hadoop 和 MapReduce 平臺來查詢大型半結構化數(shù)據(jù)集。通過允許對分布式數(shù)據(jù)集進行類似 SQL 的查詢,該語言的編譯器會把類SQL的數(shù)據(jù)分析請求轉換為一系列經(jīng)過優(yōu)化處理的MapReduce運算,Pig 可以簡化 Hadoop 的使用。 閱讀全文
posted @ 2014-06-04 22:14 tangtb 閱讀(5912) | 評論 (0) | 編輯 收藏
摘要: HBase是一個分布式的、面向列的開源數(shù)據(jù)庫,該技術來源于 Fay Chang 所撰寫的Google論文“Bigtable:一個結構化數(shù)據(jù)的分布式存儲系統(tǒng)”。就像Bigtable利用了Google文件系統(tǒng)(File System)所提供的分布式數(shù)據(jù)存儲一樣,HBase在Hadoop之上提供了類似于Bigtable的能力。HBase是Apache的Hadoop項目的子項目。HBase不同于一般的關系數(shù)據(jù)庫,它是一個適合于非結構化數(shù)據(jù)存儲的數(shù)據(jù)庫。另一個不同的是HBase基于列的而不是基于行的模式。 閱讀全文
posted @ 2014-06-04 22:00 tangtb 閱讀(12288) | 評論 (0) | 編輯 收藏
摘要: Redis是一個開源的使用ANSI C語言編寫、支持網(wǎng)絡、可基于內(nèi)存亦可持久化的日志型、Key-Value數(shù)據(jù)庫,并提供多種語言的API。從2010年3月15日起,Redis的開發(fā)工作由VMware主持。
Redis 是一個高性能的key-value數(shù)據(jù)庫和Memcached類似,它支持存儲的value類型相對更多,包括string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash(哈希類型)。 閱讀全文
Redis 是一個高性能的key-value數(shù)據(jù)庫和Memcached類似,它支持存儲的value類型相對更多,包括string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash(哈希類型)。 閱讀全文
posted @ 2014-06-03 22:48 tangtb 閱讀(1475) | 評論 (1) | 編輯 收藏
posted @ 2014-06-03 21:09 tangtb 閱讀(1922) | 評論 (0) | 編輯 收藏
摘要: Sqoop項目開始于2009年,最早是作為Hadoop的一個第三方模塊存在,后來為了讓使用者能夠快速部署,也為了讓開發(fā)人員能夠更快速的迭代開發(fā),Sqoop獨立成為一個Apache項目。
Sqoop是一個用來將Hadoop和關系型數(shù)據(jù)庫中的數(shù)據(jù)相互轉移的工具,可以將一個關系型數(shù)據(jù)庫(例如 : MySQL ,Oracle ,Postgres等)中的數(shù)據(jù)導進到Hadoop的HDFS中,也可以將HDFS的數(shù)據(jù)導進到關系型數(shù)據(jù)庫中。 閱讀全文
Sqoop是一個用來將Hadoop和關系型數(shù)據(jù)庫中的數(shù)據(jù)相互轉移的工具,可以將一個關系型數(shù)據(jù)庫(例如 : MySQL ,Oracle ,Postgres等)中的數(shù)據(jù)導進到Hadoop的HDFS中,也可以將HDFS的數(shù)據(jù)導進到關系型數(shù)據(jù)庫中。 閱讀全文
posted @ 2014-05-31 14:41 tangtb 閱讀(20300) | 評論 (3) | 編輯 收藏
摘要: Hadoop由 Apache Software Foundation 公司于 2005 年秋天作為Lucene的子項目Nutch的一部分正式引入。它受到最先由 Google Lab 開發(fā)的 Map/Reduce 和 Google File System(GFS) 的啟發(fā)。
Hadoop是一個能夠對大量數(shù)據(jù)進行分布式處理的軟件框架。但是 Hadoop 是以一種可靠、高效、可伸縮的方式進行處理的。
Hadoop是一個能夠讓用戶輕松架構和使用的分布式計算平臺。用戶可以輕松地在Hadoop上開發(fā)和運行處理海量數(shù)據(jù)的應用程序,用戶可以在不了解分布式底層細節(jié)的情況下,開發(fā)分布式程序。充分利用集群的威力高速運算和存儲。 閱讀全文
Hadoop是一個能夠對大量數(shù)據(jù)進行分布式處理的軟件框架。但是 Hadoop 是以一種可靠、高效、可伸縮的方式進行處理的。
Hadoop是一個能夠讓用戶輕松架構和使用的分布式計算平臺。用戶可以輕松地在Hadoop上開發(fā)和運行處理海量數(shù)據(jù)的應用程序,用戶可以在不了解分布式底層細節(jié)的情況下,開發(fā)分布式程序。充分利用集群的威力高速運算和存儲。 閱讀全文
posted @ 2014-05-31 14:30 tangtb 閱讀(2543) | 評論 (0) | 編輯 收藏
posted @ 2014-05-31 14:14 tangtb 閱讀(1595) | 評論 (0) | 編輯 收藏