图书介绍
Pig编程指南PDF|Epub|txt|kindle电子书版本网盘下载
![Pig编程指南](https://www.shukui.net/cover/4/30372378.jpg)
- (美)AlanGates著 著
- 出版社: 北京:人民邮电出版社
- ISBN:9787115301116
- 出版时间:2013
- 标注页数:191页
- 文件大小:40MB
- 文件页数:208页
- 主题词:程序语言-程序设计-指南
PDF下载
下载说明
Pig编程指南PDF格式电子书版下载
下载的文件为RAR压缩包。需要使用解压软件进行解压得到PDF格式图书。建议使用BT下载工具Free Download Manager进行下载,简称FDM(免费,没有广告,支持多平台)。本站资源全部打包为BT种子。所以需要使用专业的BT下载软件进行下载。如BitComet qBittorrent uTorrent等BT下载工具。迅雷目前由于本站不是热门资源。不推荐使用!后期资源热门了。安装了迅雷也可以迅雷进行下载!
(文件页数 要大于 标注页数,上中下等多册电子书除外)
注意:本站所有压缩包均有解压码: 点击下载压缩包解压工具
图书目录
第1章 初识Pig1
1.1 Pig是什么?1
1.1.1 Pig是基于Hadoop的1
1.1.2 Pig Latin,一种并行数据流语言4
1.1.3 Pig的用途7
1.1.4 Pig的设计思想8
1.2 Pig发展简史9
第2章 安装和运行Pig11
2.1 下载和安装Pig11
2.1.1 从Apache下载Pig软件包11
2.1.2 从Cloudera下载Pig12
2.1.3 使用Maven下载Pig12
2.1.4 下载Pig源码13
2.2 运行Pig13
2.2.1 本地单机运行Pig13
2.2.2 在Hadoop集群上运行Pig15
2.2.3 在云服务上运行Pig17
2.2.4 命令行使用以及配置选项介绍17
2.2.5 返回码18
第3章 命令行交互工具Grunt20
3.1 在Grunt中输入Pig Latin脚本20
3.2 在Grunt中使用HDFS命令21
3.3 在Grunt中控制Pig22
第4章 Pig数据模型23
4.1 数据类型23
4.1.1 基本类型23
4.1.2 复杂类型24
4.1.3 NULL值26
4.2 模式26
第5章 Pig Latin介绍33
5.1 基础知识33
5.1.1 大小写敏感34
5.1.2 注释34
5.2 输入和输出34
5.2.1 加载34
5.2. 2存储35
5.2.3 输出36
5.3 关系操作37
5.3.1 foreach37
5.3.2 Filter40
5.3.3 Group42
5.3.4 Order by44
5.3.5 Distinct45
5.3.6 Join46
5.3.7 Limit48
5.3.8 Sample49
5.3.9 Parallel49
5.4 用户自定义函数UDF51
5.4.1 注册UDF52
5.4.2 define命令和UDF53
5.4.3 调用静态Java函数54
第6章 Pig Latin高级应用56
6.1 高级关系操作56
6.1.1 foreach的高级功能56
6.1.2 使用不同的Join实现方法60
6.1.3 cogroup65
6.1.4 union65
6.1.5 cross67
6.2 在Pig中集成遗留代码和MapReduce程序69
6.2.1 stream69
6.2.2 mapreduce71
6.3 非线性数据流72
6.4 执行过程控制74
6.4.1 set75
6.4.2 设置分割器76
6.5 Pig Latin预处理器76
6.5.1 参数传入76
6.5.2 宏78
6.5.3 包含其他的Pig Latin脚本79
第7章 开发和测试Pig Latin脚本81
7.1 开发工具81
7.1.1 语法高亮和语法检查81
7.1.2 describe82
7.1.3 explain82
7.1.4 illustrate88
7.1.5 Pig统计信息89
7.1.6 MapReduce任务运行状态信息90
7.1.7 调试技巧93
7.2 使用PigUnit测试用户的脚本95
第8章 让Pig飞起来99
8.1 编写优质的脚本100
8.1.1 尽早地并经常地进行过滤100
8.1.2 尽早地并经常地进行映射101
8.1.3 正确并合理使用join102
8.1.4 适当的情况下使用multiquery103
8.1.5 选择正确的数据类型103
8.1.6 选择合适的并行值103
8.2 编写优质的UDF104
8.3 调整Pig和Hadoop104
8.4 对计算中间结果进行压缩106
8.5 数据层优化107
8.6 垃圾数据处理107
第9章 在Python中嵌入Pig Latin脚本108
9.1 编译109
9.2 绑定110
9.3 运行112
9.4 工具方法114
第10章 编写评估函数和过滤函数115
10.1 使用Java编写评估函数115
10.1.1 UDF将在哪里执行116
10.1.2 求值函数基本概念116
10.1.3 输入和输出模式120
10.1.4 错误处理和处理过程信息报告123
10.1.5 构造器和将数据从前端传送到后端124
10.1.6 重载UDF129
10.1.7 运算函数的内存问题132
10.2 代数运算接口132
10.3 累加器接口136
10.4 使用Python写UDF137
10.5 书写过滤器函数140
第11章 编写加载函数和存储函数141
11.1 加载函数142
11.1.1 前端执行计划函数142
11.1.2 从前端调用传递信息到后端调用144
11.1.3 后端数据读取144
11.1.4 可扩展的加载函数接口149
11.2 存储函数153
11.2.1 存储函数前端执行计划154
11.2.2 存储函数和UDFContext155
11.2.3 写数据155
11.2.4 任务失败后数据的清理159
11.2.5 存储元数据信息159
第12章 Pig和其他Hadoop社区的成员161
12.1 Pig和Hive161
12.2 Cascading161
12.3 NoSQL数据库161
12.3.1 HBase162
12.3.2 Cassandra164
12.4 Hadoop中的元数据165
附录A 内置的用户自定义函数和Piggybank167
内置UDF167
内置加载函数和存储函数167
内置求值函数和过滤函数168
Piggybank186
附录B Hadoop综述187
MapReduce187
Map阶段187
Combiner阶段188
Shuffle阶段188
Reduce阶段189
输出阶段189
分布式缓存189
故障处理189
HDFS190
作者介绍191
书末说明191