tangtb

          Hadoop,SpringMVC,ExtJs,Struts2,Spring,SpringSecurity,Hibernate,Struts
          posts - 25, comments - 88, trackbacks - 0, articles - 0
            BlogJava :: 首頁(yè) :: 新隨筆 :: 聯(lián)系 :: 聚合  :: 管理

          2014年1月9日

               摘要: IBM WebSphere MQ Choosing a primary installation(選擇主安裝)  閱讀全文

          posted @ 2018-01-29 14:53 tangtb 閱讀(532) | 評(píng)論 (0)編輯 收藏

               摘要: 如果要從程序內(nèi)的多個(gè)線程同時(shí)訪問同一個(gè)隊(duì)列管理器,應(yīng)為需要同時(shí)訪問的每個(gè)線程都創(chuàng)建一個(gè)新的 MQQueueManager 對(duì)象。  閱讀全文

          posted @ 2017-03-22 15:29 tangtb 閱讀(547) | 評(píng)論 (0)編輯 收藏

               摘要: Ganglia是UC Berkeley發(fā)起的一個(gè)開源集群監(jiān)視項(xiàng)目,設(shè)計(jì)用于測(cè)量數(shù)以千計(jì)的節(jié)點(diǎn)。Ganglia的核心包含gmond、gmetad以及一個(gè)Web前端。主要 是用來監(jiān)控系統(tǒng)性能,如:cpu 、mem、硬盤利用率, I/O負(fù)載、網(wǎng)絡(luò)流量情況等,通過曲線很容易見到每個(gè)節(jié)點(diǎn)的工作狀態(tài),對(duì)合理調(diào)整、分配系統(tǒng)資源,提高系統(tǒng)整體性能起到重要作用  閱讀全文

          posted @ 2015-02-25 14:48 tangtb 閱讀(6829) | 評(píng)論 (0)編輯 收藏

               摘要: Pig是一個(gè)基于Hadoop的大規(guī)模數(shù)據(jù)分析平臺(tái)對(duì)高級(jí)過程語言,適合于使用 Hadoop 和 MapReduce 平臺(tái)來查詢大型半結(jié)構(gòu)化數(shù)據(jù)集。通過允許對(duì)分布式數(shù)據(jù)集進(jìn)行類似 SQL 的查詢,該語言的編譯器會(huì)把類SQL的數(shù)據(jù)分析請(qǐng)求轉(zhuǎn)換為一系列經(jīng)過優(yōu)化處理的MapReduce運(yùn)算,Pig 可以簡(jiǎn)化 Hadoop 的使用。  閱讀全文

          posted @ 2014-06-04 22:14 tangtb 閱讀(5918) | 評(píng)論 (0)編輯 收藏

               摘要: HBase是一個(gè)分布式的、面向列的開源數(shù)據(jù)庫(kù),該技術(shù)來源于 Fay Chang 所撰寫的Google論文“Bigtable:一個(gè)結(jié)構(gòu)化數(shù)據(jù)的分布式存儲(chǔ)系統(tǒng)”。就像Bigtable利用了Google文件系統(tǒng)(File System)所提供的分布式數(shù)據(jù)存儲(chǔ)一樣,HBase在Hadoop之上提供了類似于Bigtable的能力。HBase是Apache的Hadoop項(xiàng)目的子項(xiàng)目。HBase不同于一般的關(guān)系數(shù)據(jù)庫(kù),它是一個(gè)適合于非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的數(shù)據(jù)庫(kù)。另一個(gè)不同的是HBase基于列的而不是基于行的模式。  閱讀全文

          posted @ 2014-06-04 22:00 tangtb 閱讀(12297) | 評(píng)論 (0)編輯 收藏

               摘要: Redis是一個(gè)開源的使用ANSI C語言編寫、支持網(wǎng)絡(luò)、可基于內(nèi)存亦可持久化的日志型、Key-Value數(shù)據(jù)庫(kù),并提供多種語言的API。從2010年3月15日起,Redis的開發(fā)工作由VMware主持。
          Redis 是一個(gè)高性能的key-value數(shù)據(jù)庫(kù)和Memcached類似,它支持存儲(chǔ)的value類型相對(duì)更多,包括string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash(哈希類型)。  閱讀全文

          posted @ 2014-06-03 22:48 tangtb 閱讀(1484) | 評(píng)論 (1)編輯 收藏

               摘要: 前置條件
          成功安裝配置Hadoop集群
          成功編譯安裝Hadoop Eclipse插件
          本地有和服務(wù)器相同版本的Hadoop安裝包,并已解壓(本例使用hadoop-1.1.2)
            閱讀全文

          posted @ 2014-06-03 21:09 tangtb 閱讀(1931) | 評(píng)論 (0)編輯 收藏

               摘要: Sqoop項(xiàng)目開始于2009年,最早是作為Hadoop的一個(gè)第三方模塊存在,后來為了讓使用者能夠快速部署,也為了讓開發(fā)人員能夠更快速的迭代開發(fā),Sqoop獨(dú)立成為一個(gè)Apache項(xiàng)目。
          Sqoop是一個(gè)用來將Hadoop和關(guān)系型數(shù)據(jù)庫(kù)中的數(shù)據(jù)相互轉(zhuǎn)移的工具,可以將一個(gè)關(guān)系型數(shù)據(jù)庫(kù)(例如 : MySQL ,Oracle ,Postgres等)中的數(shù)據(jù)導(dǎo)進(jìn)到Hadoop的HDFS中,也可以將HDFS的數(shù)據(jù)導(dǎo)進(jìn)到關(guān)系型數(shù)據(jù)庫(kù)中。  閱讀全文

          posted @ 2014-05-31 14:41 tangtb 閱讀(20314) | 評(píng)論 (3)編輯 收藏

               摘要: Hadoop由 Apache Software Foundation 公司于 2005 年秋天作為L(zhǎng)ucene的子項(xiàng)目Nutch的一部分正式引入。它受到最先由 Google Lab 開發(fā)的 Map/Reduce 和 Google File System(GFS) 的啟發(fā)。
          Hadoop是一個(gè)能夠?qū)Υ罅繑?shù)據(jù)進(jìn)行分布式處理的軟件框架。但是 Hadoop 是以一種可靠、高效、可伸縮的方式進(jìn)行處理的。
          Hadoop是一個(gè)能夠讓用戶輕松架構(gòu)和使用的分布式計(jì)算平臺(tái)。用戶可以輕松地在Hadoop上開發(fā)和運(yùn)行處理海量數(shù)據(jù)的應(yīng)用程序,用戶可以在不了解分布式底層細(xì)節(jié)的情況下,開發(fā)分布式程序。充分利用集群的威力高速運(yùn)算和存儲(chǔ)。  閱讀全文

          posted @ 2014-05-31 14:30 tangtb 閱讀(2555) | 評(píng)論 (0)編輯 收藏

          posted @ 2014-05-31 14:14 tangtb 閱讀(1603) | 評(píng)論 (0)編輯 收藏

               摘要: 以下列出來的是本人日常用到的linux系統(tǒng)命令、vi操作命令和命令行快捷鍵,標(biāo)紅的為最常用到的,其它有的是偶爾用到,有的是現(xiàn)用現(xiàn)從網(wǎng)上搜索,在這個(gè)做個(gè)備忘,并沒有全部列出,以后想起來或者用到了再添加。  閱讀全文

          posted @ 2014-01-09 20:34 tangtb 閱讀(362) | 評(píng)論 (0)編輯 收藏

          主站蜘蛛池模板: 宁阳县| 阿巴嘎旗| 花莲市| 子洲县| 沙河市| 霍邱县| 吉木萨尔县| 汝阳县| 健康| 三都| 合江县| 新巴尔虎左旗| 班玛县| 奈曼旗| 芦溪县| 普兰县| 静乐县| 曲阜市| 石渠县| 铜川市| 巴林左旗| 亳州市| 梅河口市| 长兴县| 通州市| 南靖县| 西城区| 乌拉特前旗| 洮南市| 达孜县| 云安县| 吉林市| 五峰| 浪卡子县| 泸溪县| 宁城县| 韶山市| 酉阳| 浦北县| 天柱县| 连南|