纵有疾风起
人生不言弃

hadoop

Hadoop学习笔记—3.Hadoop RPC机制的使用-起风网

Hadoop学习笔记—3.Hadoop RPC机制的使用

WaitingforLove阅读(549)评论(0)

一、RPC基础概念 1.1 RPC的基础概念   RPC,即Remote Procdure Call,中文名:远程过程调用;   (1)它允许一台计算机程序远程调用另外一台计算机的子程序,而不用去关心底层的网络通信细节,对我们来说是透明的。...

Hadoop学习笔记—4.初识MapReduce-起风网

Hadoop学习笔记—4.初识MapReduce

Thedreamofyou阅读(517)评论(0)

一、神马是高大上的MapReduce   MapReduce是Google的一项重要技术,它首先是一个编程模型,用以进行大数据量的计算。对于大数据量的计算,通常采用的处理手法就是并行计算。但对许多开发者来说,自己完完全全实现一个并行计算程序...

Hadoop学习笔记—5.自定义类型处理手机上网日志-起风网

Hadoop学习笔记—5.自定义类型处理手机上网日志

晁然然然然阅读(489)评论(0)

一、测试数据:手机上网日志 1.1 关于这个日志   假设我们如下一个日志文件,这个文件的内容是来自某个电信运营商的手机上网日志,文件的内容已经经过了优化,格式比较规整,便于学习研究。   该文件的内容如下(这里我只截取了三行): 1363...

CreateFolder

vicky阅读(543)评论(0)

import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;import org.apache.hadoop.conf.Configur...

DeleteFolder

Drinktowind阅读(433)评论(0)

import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;/*** * @author */import org.apache.had...