浅谈大数据框架调用过程中用到的RPC

在大数据框架的调用中,在一个节点上经常会需要调用另一个节点上的程序,这时就需要用到RPC。

RPC——远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务。RPC采用客户机/服务器模式。请求程序就是一个客户机,而服务提供程序就是一个服务器。首先,客户机调用进程发送一个有进程参数的调用信息到服务进程,然后等待应答信息。在服务器端,进程保持睡眠状态直到调用信息的到达为止。当一个调用信息到达,服务器获得进程参数,计算结果,发送答复信息,然后等待下一个调用信息。最后,客户端调用进程接收答复信息,获得进程结果,然后调用执行继续进行。hadoop、hbase等分布式体系结构就是构建在RPC之上的。

类似代码如下:

MyCall.java
//定义一个继承versionedprotocol的接口MyCall
import org.apache.hadoop.ipc.VersionedProtocol;

public interface MyCall extends VersionedProtocol{
public static final long versionID = 0L;
int add(int a,int b);
}

MyCallImpl.java
//定义一个实现MyCall接口的类MyCallImpl
import java.io.IOException;
import org.apache.hadoop.ipc.ProtocolSignature;

public class MyCallImpl implements MyCall{
@Override
public long getProtocolVersion(String protocol, long clientVersion)
throws IOException {
return versionID;
}

@Override
public ProtocolSignature getProtocolSignature(String protocol,
long clientVersion, int clientMethodsHash) throws IOException {
return new ProtocolSignature();
}
//自定义想要实现的功能
@Override
public int add(int a, int b) {
return a+b;
}
}

MyServer.Java
//服务端启动程序
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.ipc.RPC;
import org.apache.hadoop.ipc.RPC.Server;

public class MyServer {

public static void main(String[] args) throws Exception {
//创建一个RPC的创建器
RPC.Builder builder = new RPC.Builder(new Configuration());
//设置客户端要访问的IP
builder.setBindAddress("127.0.0.1");
//设置客户端要访问的端口
builder.setPort(8888);
//设置客户端要访问的实例
builder.setInstance(new MyCallImpl());
//设置客户端实现RPC时的协议类
builder.setProtocol(MyCall.class);
Server build =   builder.build();
System.out.println("服务器启动了....");
//启动服务器端
build.start();
}

MyClient.java
//客户端程序
import java.net.InetSocketAddress;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.ipc.RPC;

public class MyClient {
public static void main(String[] args) throws Exception {
//初始化要访问的服务器的IP和端口
InetSocketAddress addr = new InetSocketAddress("localhost", 8888);
MyCall myCall = RPC.getProxy(MyCall.class, MyCall.versionID, addr, new Configuration());
while(true){
int result = myCall.add(2, 3);
System.out.println(result);
Thread.sleep(3000);
}
}
}

运行服务端程序后,运行如图:


此时运行客户端程序,运行结果如图:


此时成功通过服务端调用功能并返回给客户端结果,也就是整个RPC的调用过程。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值