Hadoop学习笔记—3.Hadoop RPC机制的使用
一、RPC基础概念 1.1 RPC的基础概念 RPC,即Remote Procdure Call,中文名:远程过程调用; (1)它允许一台计算机程序远程调用另外一台计算机的子程序,而不用去关心底层的网络通信细节,对我们来说是透明的。...
一、RPC基础概念 1.1 RPC的基础概念 RPC,即Remote Procdure Call,中文名:远程过程调用; (1)它允许一台计算机程序远程调用另外一台计算机的子程序,而不用去关心底层的网络通信细节,对我们来说是透明的。...
一、神马是高大上的MapReduce MapReduce是Google的一项重要技术,它首先是一个编程模型,用以进行大数据量的计算。对于大数据量的计算,通常采用的处理手法就是并行计算。但对许多开发者来说,自己完完全全实现一个并行计算程序...
一、测试数据:手机上网日志 1.1 关于这个日志 假设我们如下一个日志文件,这个文件的内容是来自某个电信运营商的手机上网日志,文件的内容已经经过了优化,格式比较规整,便于学习研究。 该文件的内容如下(这里我只截取了三行): 1363...
=================== ===============================----------------hadoop集群搭建 -----------------------===================...
-------------------------Oozie--------------------【一、部署】 1)部署Oozie服务端[root@cMaster~]#sudo yum install oozie #cMaster上以ro...
root@cslave2:/]#jps2834 NodeManager2487 DataNode12282 Jps2415 QuorumPeerMainroot@cslave2:/]#sudo service hbase-regionser...
import org.apache.hadoop.conf.*;import org.apache.hadoop.fs.*;import java.io.IOException;import java.net.URI;import java...
import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;import org.apache.hadoop.conf.Configur...
import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;import org.apache.hadoop.conf.Configur...
import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;/*** * @author */import org.apache.had...