图书介绍

Pig编程指南PDF|Epub|txt|kindle电子书版本网盘下载

Pig编程指南
  • (美)AlanGates著 著
  • 出版社: 北京:人民邮电出版社
  • ISBN:9787115301116
  • 出版时间:2013
  • 标注页数:191页
  • 文件大小:40MB
  • 文件页数:208页
  • 主题词:程序语言-程序设计-指南

PDF下载


点此进入-本书在线PDF格式电子书下载【推荐-云解压-方便快捷】直接下载PDF格式图书。移动端-PC端通用
种子下载[BT下载速度快]温馨提示:(请使用BT下载软件FDM进行下载)软件下载地址页直链下载[便捷但速度慢]  [在线试读本书]   [在线获取解压码]

下载说明

Pig编程指南PDF格式电子书版下载

下载的文件为RAR压缩包。需要使用解压软件进行解压得到PDF格式图书。

建议使用BT下载工具Free Download Manager进行下载,简称FDM(免费,没有广告,支持多平台)。本站资源全部打包为BT种子。所以需要使用专业的BT下载软件进行下载。如BitComet qBittorrent uTorrent等BT下载工具。迅雷目前由于本站不是热门资源。不推荐使用!后期资源热门了。安装了迅雷也可以迅雷进行下载!

(文件页数 要大于 标注页数,上中下等多册电子书除外)

注意:本站所有压缩包均有解压码: 点击下载压缩包解压工具

图书目录

第1章 初识Pig1

1.1 Pig是什么?1

1.1.1 Pig是基于Hadoop的1

1.1.2  Pig Latin,一种并行数据流语言4

1.1.3 Pig的用途7

1.1.4 Pig的设计思想8

1.2 Pig发展简史9

第2章 安装和运行Pig11

2.1 下载和安装Pig11

2.1.1 从Apache下载Pig软件包11

2.1.2 从Cloudera下载Pig12

2.1.3 使用Maven下载Pig12

2.1.4 下载Pig源码13

2.2 运行Pig13

2.2.1 本地单机运行Pig13

2.2.2 在Hadoop集群上运行Pig15

2.2.3 在云服务上运行Pig17

2.2.4 命令行使用以及配置选项介绍17

2.2.5 返回码18

第3章 命令行交互工具Grunt20

3.1 在Grunt中输入Pig Latin脚本20

3.2 在Grunt中使用HDFS命令21

3.3 在Grunt中控制Pig22

第4章 Pig数据模型23

4.1 数据类型23

4.1.1 基本类型23

4.1.2 复杂类型24

4.1.3 NULL值26

4.2 模式26

第5章 Pig Latin介绍33

5.1 基础知识33

5.1.1 大小写敏感34

5.1.2 注释34

5.2 输入和输出34

5.2.1 加载34

5.2. 2存储35

5.2.3 输出36

5.3 关系操作37

5.3.1 foreach37

5.3.2 Filter40

5.3.3 Group42

5.3.4 Order by44

5.3.5 Distinct45

5.3.6 Join46

5.3.7 Limit48

5.3.8 Sample49

5.3.9 Parallel49

5.4 用户自定义函数UDF51

5.4.1 注册UDF52

5.4.2 define命令和UDF53

5.4.3 调用静态Java函数54

第6章 Pig Latin高级应用56

6.1 高级关系操作56

6.1.1 foreach的高级功能56

6.1.2 使用不同的Join实现方法60

6.1.3 cogroup65

6.1.4 union65

6.1.5 cross67

6.2 在Pig中集成遗留代码和MapReduce程序69

6.2.1 stream69

6.2.2 mapreduce71

6.3 非线性数据流72

6.4 执行过程控制74

6.4.1 set75

6.4.2 设置分割器76

6.5 Pig Latin预处理器76

6.5.1 参数传入76

6.5.2 宏78

6.5.3 包含其他的Pig Latin脚本79

第7章 开发和测试Pig Latin脚本81

7.1 开发工具81

7.1.1 语法高亮和语法检查81

7.1.2 describe82

7.1.3 explain82

7.1.4 illustrate88

7.1.5 Pig统计信息89

7.1.6 MapReduce任务运行状态信息90

7.1.7 调试技巧93

7.2 使用PigUnit测试用户的脚本95

第8章 让Pig飞起来99

8.1 编写优质的脚本100

8.1.1 尽早地并经常地进行过滤100

8.1.2 尽早地并经常地进行映射101

8.1.3 正确并合理使用join102

8.1.4 适当的情况下使用multiquery103

8.1.5 选择正确的数据类型103

8.1.6 选择合适的并行值103

8.2 编写优质的UDF104

8.3 调整Pig和Hadoop104

8.4 对计算中间结果进行压缩106

8.5 数据层优化107

8.6 垃圾数据处理107

第9章 在Python中嵌入Pig Latin脚本108

9.1 编译109

9.2 绑定110

9.3 运行112

9.4 工具方法114

第10章 编写评估函数和过滤函数115

10.1 使用Java编写评估函数115

10.1.1 UDF将在哪里执行116

10.1.2 求值函数基本概念116

10.1.3 输入和输出模式120

10.1.4 错误处理和处理过程信息报告123

10.1.5 构造器和将数据从前端传送到后端124

10.1.6 重载UDF129

10.1.7 运算函数的内存问题132

10.2 代数运算接口132

10.3 累加器接口136

10.4 使用Python写UDF137

10.5 书写过滤器函数140

第11章 编写加载函数和存储函数141

11.1 加载函数142

11.1.1 前端执行计划函数142

11.1.2 从前端调用传递信息到后端调用144

11.1.3 后端数据读取144

11.1.4 可扩展的加载函数接口149

11.2 存储函数153

11.2.1 存储函数前端执行计划154

11.2.2 存储函数和UDFContext155

11.2.3 写数据155

11.2.4 任务失败后数据的清理159

11.2.5 存储元数据信息159

第12章 Pig和其他Hadoop社区的成员161

12.1 Pig和Hive161

12.2 Cascading161

12.3 NoSQL数据库161

12.3.1 HBase162

12.3.2 Cassandra164

12.4 Hadoop中的元数据165

附录A 内置的用户自定义函数和Piggybank167

内置UDF167

内置加载函数和存储函数167

内置求值函数和过滤函数168

Piggybank186

附录B Hadoop综述187

MapReduce187

Map阶段187

Combiner阶段188

Shuffle阶段188

Reduce阶段189

输出阶段189

分布式缓存189

故障处理189

HDFS190

作者介绍191

书末说明191

热门推荐