Hadoop应用架构

版权信息 书名：Hadoop应用架构 作者：[美] Mark Grover，Ted Malaska，onathan Seidman，Gwen Shapira 译者：郭文超 ISBN：978-7-115-44243-7 本书由北京图灵文化发展有限公司发行数字版。版权所有，侵权必 究。 您购买的图灵电子书仅供您个人使用，未经授权，不得以任何方式复制 和传播本书内容。 我们愿意相信读者具有这样的良知和觉悟，与我们共同保护知识产权。 如果购买者有侵权行为，我们可能对该用户实施包括但不限于关闭该帐 号等维权措施，并可能追究法律责任。 图灵社区会员 Guojia（452738289@qq.com） 专享 尊重版权 版权声明 O'Reilly Media, Inc. 介绍 业界评论 译者序 背景 关于本书 致谢 序 前言 示例代码 目标读者 写作目的 本书结构 排版约定 使用代码示例 Safari® Books Online 联系我们 致谢 Mark Grover的致谢 Ted Malaska的致谢 Jonathan Seidman的致谢 Gwen Shapira的致谢 第一部分 考虑 Hadoop 应用的架构设计 第 1 章 Hadoop 数据建模 1.1 数据存储选型 1.1.1 标准文件格式 1.1.2 Hadoop文件类型 1.1.3 序列化存储格式 1.1.4 列式存储格式 1.1.5 压缩 1.2 HDFS模式设计 1.2.1 文件在HDFS中的位置 1.2.2 高级HDFS模式设计 1.2.3 HDFS模式设计总结 1.3 HBase模式设计 1.3.1 行键 1.3.2 时间戳 1.3.3 hop 1.3.4 表和Region 1.3.5 使用列 1.3.6 列簇 1.3.7 TTL 1.4 元数据管理 1.4.1 什么是元数据 1.4.2 为什么元数据至关重要 1.4.3 元数据的存储位置 1.4.4 元数据管理举例 1.4.5 Hive metastore与HCatalog的局限性 1.4.6 其他存储元数据的方式 1.5 结论 第 2 章 Hadoop 数据移动 2.1 数据采集考量 2.1.1 数据采集的时效性 2.1.2 增量更新 2.1.3 访问模式 2.1.4 数据源系统及数据结构 2.1.5 变换 2.1.6 网络瓶颈 2.1.7 网络安全性 2.1.8 被动推送与主动请求 2.1.9 错误处理 2.1.10 复杂度 2.2 数据采集选择 2.2.1 文件传输 2.2.2 文件传输与其他采集方法的考量 2.2.3 ......