博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop中的Streaming(20)
阅读量:5888 次
发布时间:2019-06-19

本文共 337 字,大约阅读时间需要 1 分钟。

hot3.png

            Streaming适用于文本处理,可以处理二进制流。

            在文本模式下使用时,它有一个数据的行视图。

            map的输入数据通过标准输入流传递给map函数,并且是一行一行地传输,最后将结果行写到标准输出。

            map输出的键/值对是以一个制表符分割的行,它以这样的形式写到标准输出。

            reduce函数的输入格式相同--------------通过制表符来分割的键/值对---------------并通过标准输入流进行传输。

            reduce函数从标准输入流中读取输入行,该输入已由Hadoop框架根据键排过序,最后将结果写入到标准输出。

                                                                                                                            Name:Xr

                                                                                                                            Date:2014-03-08 21:09

转载于:https://my.oschina.net/Xiao629/blog/206459

你可能感兴趣的文章
ZStack源码剖析之二次开发——可扩展框架
查看>>
Elasticsearch分布式一致性原理剖析(一)-节点篇
查看>>
一个基于vue的图片轮播组件的实现
查看>>
Scrapy 之 settings
查看>>
动态规划入门H - 合唱队形 (最优子序列的另一个应用,这里是最优递增和最优递减子序列的结合)...
查看>>
游戏服务器JVM优化
查看>>
【359天】每日项目总结系列096(2018.01.30)
查看>>
HDU 1039 Easier Done Than Said?
查看>>
vue+微信支付目录+JSSDK签名解决方案
查看>>
搭建自己的博客 —— 关于域名设置
查看>>
mybatis sqlSession的运行过程
查看>>
你可能需要的优秀英文网站
查看>>
翻译 | 一行 JavaScript 代码的逆向工程
查看>>
ES6系列---对象功能扩展
查看>>
mac下mongodb的安装与配置
查看>>
JS类与类继承
查看>>
canvas 鼠标点击出现烟花效果
查看>>
参加了一次夜跑活动,比赛完顺便给自己刷了下票
查看>>
10分钟教你理解Yii的别名机制 - set&get
查看>>
Laravel核心——Ioc服务容器源码解析(服务器绑定)
查看>>