Zookeeper 简介 分布式应用 分布式应用的优点 分布式应用的挑战 什么是Apache ZooKeeper？ ZooKeeper的好处 Zookeeper 简介 ZooKeeper是一种分布式协调服务，用于管理大型主机。在分布式环境中协调和管理服务是一个复杂的过程。ZooKeeper通过其简单的架构和API解决了这个问题。ZooKee...

Zookeeper 应用程序 雅虎 Apache Hadoop Apache HBase Apache Solr Zookeeper 应用程序 Zookeeper为分布式环境提供灵活的协调基础架构。ZooKeeper框架支持许多当今最好的工业应用程序。我们将在本章中讨论ZooKeeper的一些最显着的应用。 雅虎 ZooKeeper框架...

Hadoop 大数据解决方案 传统方法 局限性 谷歌的解决方案 Hadoop Hadoop 大数据解决方案 传统方法 在这种方法中，企业将具有存储和处理大数据的计算机。这里的数据将存储在RDBMS如Oracle数据库，MS SQL Server或DB2和复杂的软件可以写入与数据库交互，处理所需的数据，并将其呈现给用户进行分析。 ...

Kafka 应用 Twitter LinkedIn Netflix Mozilla Oracle Kafka 应用 Kafka支持许多当今最好的工业应用。我们将在本章中简要介绍Kafka最为显着的应用。 Twitter Twitter是一种在线社交网络服务，提供发送和接收用户推文的平台。注册用户可以阅读和发布tweet，但未注册的用户...

按时间统计 返回空 Buckets 扩展例子 潜力无穷 按时间统计 如果搜索是在 Elasticsearch 中使用频率最高的，那么构建按时间统计的 date_histogram 紧随其后。为什么你会想用 date_histogram 呢？ 假设你的数据带时间戳。无论是什么数据（Apache事件日志、股票买卖交易时间、棒球运动时间）只要带有时...

Hadoop HDFS概述 HDFS的特点 HDFS架构 Namenode Datanode Block HDFS的目的 Hadoop HDFS概述 Hadoop文件系统是使用分布式文件系统设计开发的。它运行在商用硬件上。与其他分布式系统不同，HDFS是高度容错的，并且使用低成本硬件设计。 HDFS拥有大量的数据并提供更容易的访问。为了...

Hadoop 流 使用Python的示例 映射器阶段代码 减速器阶段代码 执行WordCount程序 例如 流如何工作 重要命令 Hadoop 流 Hadoop流是Hadoop发行版附带的一个实用程序。此实用程序允许您使用任何可执行文件或脚本作为映射程序和/或reducer创建和运行Map / Reduce作业。 使用Python...

Hadoop - 命令参考 Hadoop - 命令参考 “$ HADOOP_HOME / bin / hadoop fs” 中有更多的命令比这里演示的更多，尽管这些基本的操作会让你开始。运行不带附加参数的./bin/hadoopdfs将列出可以使用FsShell系统运行的所有命令。此外， $ HADOOP_HOME / bin / hadoop fs...

分布式处理之MapReduce 方法介绍 基础架构 MapReduce模式 问题实例 分布式处理之MapReduce 方法介绍 MapReduce是一种计算模型，简单的说就是将大批量的工作（数据）分解（MAP）执行，然后再将结果合并成最终结果（REDUCE）。这样做的好处是可以在任务被分解后，可以通过大量机器进行并行计算，减少整个操作的时...

范围限定的聚合 全局桶 范围限定的聚合 所有聚合的例子到目前为止，你可能已经注意到，我们的搜索请求省略了一个 query 。整个请求只不过是一个聚合。 聚合可以与搜索请求同时执行，但是我们需要理解一个新概念： 范围 。 默认情况下，聚合与查询是对同一范围进行操作的，也就是说，聚合是基于我们查询匹配的文档集合进行计算的。 让我们看看第一个聚合的...