在线客服
扫描二维码
下载博学谷APP
扫描二维码
关注博学谷微信公众号
相信大家都明白开源软件的重要性，好用的开源软件真的是太多了。本文就主要针对大数据领域，给大家推荐十款好用的开源软件，即HBase、Hadoop分布式文件系统、Hive、Spark、Redis、SpagoBI、Lucene、HDP、CDH、HPCC。
1、HBase
HBase是为有数十亿行和数百万列的超大表设计的，这是一种分布式数据库，可以对大数据进行随机性的实时读取/写入访问。它有点类似谷歌的Bigtable，不过基于Hadoop和Hadoop分布式文件系统（HDFS）而建。
2、Hadoop分布式文件系统（HDFS）
HDFS是面向Hadoop的文件系统，不过它也可以用作一种独立的分布式文件系统。它基于Java，具有容错性、高度扩展性和高度配置性。支持的操作系统：Windows、Linux和OS X。
3、Hive
Apache Hive是面向Hadoop生态系统的数据仓库。它让用户可以使用HiveQL查询和管理大数据，这是一种类似SQL的语言。
4、Spark
作为MapReduce之外的一种选择，Spark是一种数据处理引擎。它声称，用在内存中时，其速度比MapReduce最多快100倍；用在磁盘上时，其速度比MapReduce最多快10倍。它可以与Hadoop和Apache Mesos一起使用，也可以独立使用。支持的操作系统：Windows、Linux和OS X。
5、Redis
Redis现在由Pivotal赞助，这是一种键值缓存和存储系统。提供收费支持。要注意：虽然该项目并不正式支持Windows，不过微软在GitHub上有一个Windows派生版。支持的操作系统：Linux。
6、SpagoBI
Spago被市场分析师们称为“开源领袖”，它提供商业智能、中间件和质量保证软件，另外还提供Java EE应用程序开发框架。该软件百分之分免费、开源，不过也提供收费的支持、咨询、培训及其他服务。
7、Lucene
基于Java的Lucene可以非常迅速地执行全文搜索。据官方网站声称，它在现代硬件上每小时能够检索超过150GB的数据，它含有强大而高效的搜索算法。开发工作得到了Apache软件基金会的赞助。
8、HDP
HDP是Apache Hadoop分发版。Hortonworks Data Platform(HDP)用于创建安全的企业数据湖，为企业提供实现快速、实时商业洞察力所需的分析信息。HDP是一个开源大数据的生态系统。
9、CDH
CDH是Apache Hadoop分发版。CDH除没有HDP那样开放开源外，其它都很类似。CDH文档都组织、整理的不错，可作为了解、学习大数据、Apache Hadoop的一个重要资源。
10、HPCC
在Apache Hadoop & Spark统治的大数据市场，HPCC显得弥足珍贵，值得更多关注。HPCC 包括以下核心组件：Thor (the Data Refinery Cluster)；Roxie (Rapid Online XML Inquiry Engine, the Query Cluster)；ECL (Enterprise Control Language)ECL IDE；ESP (Enterprise Services Platform)。HPCC在安全、身份和风险管理有众多成功案例。
以上十款大数据领域好用的开源软件就推荐到这里了。当然啦，好用的开源软件的还有很多，小编会陆续整理出来。希望本篇文章能够对大家有所帮助。
— 申请免费试学名额 —
在职想转行提升，担心学不会？根据个人情况规划学习路线，闯关式自适应学习模式保证学习效果
讲师一对一辅导，在线答疑解惑，指导就业！
上一篇：
学大数据学得想哭？大数据真有这么难学吗？
下一篇：
学云计算大数据必看的六本经典书籍推荐
相关推荐 更多
大数据挖掘工具软件有哪些？大数据软件工具介绍
当下，我们无时无刻不徜徉在大数据的海洋。对于数据分析师来讲，借助一些大数据挖掘工具软件，可以更好地帮助企业了解用户并提供相应的服务。那么大数据挖掘工具软件有哪些呢？
14527
2019-09-03 11:41:21
程序员常用数据库有哪些？
数据库就是数据存储的仓库，任何互联网产品都需要使用数据库保存运营过程中所产生的各种数据。SQL是一种数据库查询语言和程序设计语言，主要就是用于管理数据库中的数据，如存取数据、查询数据、更新数据等。在大数据技术不断提升与应用的市场背景下，数据库技术也得到很大的发展，目前数据库产品非常多，最常用的数据库有：Oracle、DB2、MongoDB、SQLServer、MySQL等。
12129
2019-12-05 18:48:08
大数据疫情防控应用 大数据与个人隐私之间存在的冲突
大数据与个人隐私之间存在的冲突，网上出现多起以寻找确诊病例密切接触者为名，公布个人姓名、手机号码、户籍地详址、身份证号码等个人隐私的事件，且电信运营、铁路部门和各大互联网公司等事实上掌握了大量公民的个人信息，特别是联系方式、地理位置和行踪轨，这无疑是掌握了用户的个人隐私。
10156
2020-02-21 10:17:35
ETL数据工程师职业发展怎么样？
随着大数据发展的逐渐落地，其技术也被广泛的应用于各个领域，大数据工程师也因此成为了目前最具潜力的热门岗位。说到大数据工程师就不得不提及ETL数据工程师，相信大家对这个职位或多或少都有所了解。但是对于ETL数据工程师的具体工作内容、能力要求和职业发展规划大家又了解多少呢？本文就来和大家好好谈谈ETL数据工程师的这一岗位，希望给想从事这个行业的小伙伴一点方向的指引。
10977
2020-02-25 18:28:52
数据库原理知识点全面讲解
掌握数据库已经成为了每个程序员的必备基本技能，今天我们就来带大家彻彻底底弄数据库原理的相关知识点，内容包括了事务、并发一致性、封锁、隔离级别、多版本并发控制和Next-Key Lock。希望本文全面的讲解可以一次性解决大家关于数据库原理的所有疑问。
8491
2020-04-29 11:10:35
