當(dāng)今編程人員面臨的最大挑戰(zhàn)就是巨大性，硬件越來越巨大，OS越來越巨大，編程語言和API越來越巨大，我們構(gòu)建的應(yīng)用也越來越巨大。按照外媒的一項(xiàng)觀測(cè)陳訴，以下列出了Java措施員在已往12個(gè)月內(nèi)一直利用的一些東西或框架，或者會(huì)對(duì)你有意義。

先來看看大數(shù)據(jù)的觀念。按照維基百科，大數(shù)據(jù)是復(fù)雜或巨大的數(shù)據(jù)集的廣義術(shù)語，因此傳統(tǒng)的數(shù)據(jù)處理懲罰措施不敷以支持如此復(fù)雜的體量。

在很多環(huán)境下，利用SQL數(shù)據(jù)庫存儲(chǔ)/檢索數(shù)據(jù)都是很好的選擇。而現(xiàn)如今的許多環(huán)境下，它都不再能滿意我們的目標(biāo)，這一切都取決于用例的變革。

此刻來接頭一些差異的非SQL存儲(chǔ)/處理懲罰數(shù)據(jù)東西，譬喻，NoSQL數(shù)據(jù)庫，全文搜索引擎，及時(shí)流式處理懲罰，圖形數(shù)據(jù)庫等。

1、MongoDB——最受接待的，跨平臺(tái)的，面向文檔的數(shù)據(jù)庫。

MongoDB是一個(gè)基于漫衍式文件存儲(chǔ)的數(shù)據(jù)庫，利用C++語言編寫。旨在為Web應(yīng)用提供可擴(kuò)展的高機(jī)能數(shù)據(jù)存儲(chǔ)辦理方案。應(yīng)用機(jī)能坎坷依賴于數(shù)據(jù)庫機(jī)能，MongoDB則長短干系數(shù)據(jù)庫中成果最富厚，最像干系數(shù)據(jù)庫的，跟著MongDB 3.4版本宣布，其應(yīng)用場(chǎng)景合用本領(lǐng)獲得了進(jìn)一步拓展。

MongoDB的焦點(diǎn)優(yōu)勢(shì)就是機(jī)動(dòng)的文檔模子、高可用復(fù)制集、可擴(kuò)展分片集群。你可以試著從幾大方面相識(shí)MongoDB，如及時(shí)監(jiān)控MongoDB東西、內(nèi)存利用量和頁面錯(cuò)誤、毗連數(shù)、數(shù)據(jù)庫操縱、復(fù)制集等。

2、Elasticsearch ——為云構(gòu)建的漫衍式RESTful搜索引擎。

ElasticSearch是基于Lucene的搜索處事器。它提供了漫衍式多用戶本領(lǐng)的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java開拓的，并作為Apache許可條款下的開放源碼宣布，是較量風(fēng)行的企業(yè)級(jí)搜索引擎。

ElasticSearch不只是一個(gè)全文本搜索引擎，照舊一個(gè)漫衍式及時(shí)文檔存儲(chǔ)，個(gè)中每個(gè)field均是被索引的數(shù)據(jù)且可被搜索;也是一個(gè)帶及時(shí)闡明成果的漫衍式搜索引擎，而且可以或許擴(kuò)展至數(shù)以百計(jì)的處事器存儲(chǔ)及處理懲罰PB級(jí)的數(shù)據(jù)。ElasticSearch在底層操作Lucene完成其索引成果，因此其很多根基觀念源于Lucene。

3、Cassandra——開源漫衍式數(shù)據(jù)庫打點(diǎn)系統(tǒng)，最初是由Facebook開拓的，旨在處理懲罰很多商品處事器上的大量數(shù)據(jù)，提供高可用性，沒有單點(diǎn)妨礙。

Apache Cassandra是一套開源漫衍式NoSQL數(shù)據(jù)庫系統(tǒng)。集Google BigTable的數(shù)據(jù)模子與Amazon Dynamo的完全漫衍式架構(gòu)于一身。于2008開源，從此，由于Cassandra精采的可擴(kuò)展性，被Digg、Twitter等Web 2.0網(wǎng)站所采用，成為了一種風(fēng)行的漫衍式布局化數(shù)據(jù)存儲(chǔ)方案。

因Cassandra是用Java編寫的，所以理論上在具有JDK6及以上版本的呆板中都可以運(yùn)行，官方測(cè)試的JDK尚有OpenJDK 及Sun的JDK。 Cassandra的操縱呼吁，雷同于我們平時(shí)操縱的干系數(shù)據(jù)庫，對(duì)付熟悉MySQL的伴侶來說，操縱會(huì)很容易上手。

4、Redis ——開源(BSD許可)內(nèi)存數(shù)據(jù)布局存儲(chǔ)，用作數(shù)據(jù)庫，緩存和動(dòng)靜署理。

Redis是一個(gè)開源的利用ANSI C語言編寫的、支持網(wǎng)絡(luò)、可基于內(nèi)存亦可耐久化的日志型、Key-Value數(shù)據(jù)庫，并提供多種語言的API。Redis 有三個(gè)主要使其有別于其它許多競(jìng)爭(zhēng)敵手的特點(diǎn)：Redis是完全在內(nèi)存中生存數(shù)據(jù)的數(shù)據(jù)庫，利用磁盤只是為了耐久性目標(biāo); Redis對(duì)比很多鍵值數(shù)據(jù)存儲(chǔ)系統(tǒng)有相對(duì)富厚的數(shù)據(jù)范例; Redis可以將數(shù)據(jù)復(fù)制到任意數(shù)量的從處事器中。

5、Hazelcast ——基于Java的開源內(nèi)存數(shù)據(jù)網(wǎng)格。

Hazelcast 是一種內(nèi)存數(shù)據(jù)網(wǎng)格 in-memory data grid，提供Java措施員要害任務(wù)生意業(yè)務(wù)和萬億級(jí)內(nèi)存應(yīng)用。固然Hazelcast沒有所謂的“Master”，可是仍然有一個(gè)Leader節(jié)點(diǎn)(the oldest member)，這個(gè)觀念與ZooKeeper中的Leader雷同，可是實(shí)現(xiàn)道理卻完全差異。同時(shí)，Hazelcast中的數(shù)據(jù)是漫衍式的，每一個(gè)member持有部門數(shù)據(jù)和相應(yīng)的backup數(shù)據(jù)，這點(diǎn)也與ZooKeeper差異。

Hazelcast的應(yīng)用便捷性深受開拓者喜歡，但假如要投入利用，還需要慎重思量。

6、EHCache——遍及利用的開源Java漫衍式緩存。主要面向通用緩存、Java EE和輕量級(jí)容器。