Java开发人员使用哪些大数据工具？

1、MongoDB——最受接待的，跨平台的，面向文档的数据库。

MongoDB是一个基于漫衍式文件存储的数据库，行使C++说话编写。旨在为Web应用提供可扩展的高机能数据存储办理方案。应用机能坎坷依靠于数据库机能，MongoDB则长短相关数据库中成果最富厚，最像相关数据库的，跟着MongDB 3.4版本宣布，其应用场景合用手段获得了进一步拓展。

MongoDB的焦点上风就是机动的文档模子、高可用复制集、可扩展分片集群。你可以试着从几大方面相识MongoDB，如及时监控MongoDB器材、内存行使量和页面错误、毗连数、数据库操纵、复制集等。

2、Elasticsearch ——为云构建的漫衍式RESTful搜刮引擎。

ElasticSearch是基于Lucene的搜刮处事器。它提供了漫衍式多用户手段的全文搜刮引擎，基于RESTful web接口。Elasticsearch是用Java开拓的，并作为Apache容许条款下的开放源码宣布，是较量风行的企业级搜刮引擎。

ElasticSearch不只是一个全文本搜刮引擎，照旧一个漫衍式及时文档存储，个中每个field均是被索引的数据且可被搜刮;也是一个带及时说明成果的漫衍式搜刮引擎，而且可以或许扩展至数以百计的处事器存储及处理赏罚PB级的数据。ElasticSearch在底层操作Lucene完成其索引成果，因此其很多根基观念源于Lucene。

3、Cassandra——开源漫衍式数据库打点体系

最初是由Facebook开拓的，旨在处理赏罚很多商品处事器上的大量数据，提供高可用性，没有单点妨碍。

Apache Cassandra是一套开源漫衍式NoSQL数据库体系。集Google BigTable的数据模子与Amazon Dynamo的完全漫衍式架构于一身。于2008开源，从此，因为Cassandra精采的可扩展性，被Digg、Twitter等Web 2.0网站所采用，成为了一种风行的漫衍式布局化数据存储方案。

因Cassandra是用Java编写的，以是理论上在具有JDK6及以上版本的呆板中都可以运行，官方测试的JDK尚有OpenJDK 及Sun的JDK。 Cassandra的操纵呼吁，相同于我们平常操纵的相关数据库，对付认识MySQL的伴侣来说，操纵会很轻易上手。

4、Redis ——开源(BSD容许)内存数据布局存储，用作数据库，缓存和动静署理。

Redis是一个开源的行使ANSI C说话编写的、支持收集、可基于内存亦可耐久化的日记型、Key-Value数据库，并提供多种说话的API。Redis 有三个首要使其有别于其余许多竞争敌手的特点：Redis是完全在内存中生涯数据的数据库，行使磁盘只是为了耐久性目标; Redis对比很多键值数据存储体系有相对富厚的数据范例; Redis可以将数据复制到恣意数目的从处事器中。

5、Hazelcast ——基于Java的开源内存数据网格。

Hazelcast 是一种内存数据网格 in-memory data grid，提供Java措施员要害使命买卖营业和万亿级内存应用。固然Hazelcast没有所谓的“Master”，可是如故有一个Leader节点(the oldest member)，这个观念与ZooKeeper中的Leader相同，可是实现道理却完全差异。同时，Hazelcast中的数据是漫衍式的，每一个member持有部门数据和响应的backup数据，这点也与ZooKeeper差异。

Hazelcast的应用便捷性深受开拓者喜好，但假如要投入行使，还必要稳重思量。

6、EHCache——普及行使的开源Java漫衍式缓存。

首要面向通用缓存、Java EE和轻量级容器。

EhCache 是一个纯Java的历程内缓存框架，具有快速、干练等特点，是Hibernate中默认的CacheProvider。首要特征有：快速简朴，具有多种缓存计策;缓存数据有两级，内存和磁盘，因此无需担忧容量题目;缓存数据会在假造机重启的进程中写入磁盘;可以通过RMI、可插入API等方法举办漫衍式缓存;具有缓存缓和存打点器的侦听接口;支持多缓存打点器实例，以及一个实例的多个缓存地区;提供Hibernate的缓存实现。

7、Hadoop ——用Java编写的开源软件框架，用于漫衍式存储，并对很是大的数据集举办漫衍式处理赏罚。

用户可以在不相识漫衍式底层细节的环境下，开拓漫衍式措施。充实操作集群举办高速运算和存储。Hadoop实现了一个漫衍式文件体系(Hadoop Distributed File System)，简称HDFS。Hadoop的框架最焦点的计划就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，MapReduce则为海量的数据提供了计较。

（编辑：河北网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!