1 hadoop 下载hdfs文件到本地

拿到hdfs的输入流(把hdfs的文件搬运到内存)   拿到本地文件输出流(java)把内存搬运到本地文件

 

2 hadoop 数据同步的过程

元数据信息指的是文件的大小 名称 修改时间 地址 创建时间等等

edits 文件与fsimage文件合并在 secondary namenode里面

八天学会hadoop (1) 数据同步 rpc

 

 

3 rpc 底层原理

八天学会hadoop (1) 数据同步 rpc

 

   如图为两台服务器的controller service。controller service 各在一台服务器上,rpc调用需要一个中间接口 LoginServiceInterface  controller 所在服务器有个代理类proxy 实现了中间接口,调用login方法时被劫持,调用socket sendmsg方法  右边service服务器有个动态代理对象(真正调用Login方法还是impl对象本身)接受参数 返回结果。

 

 

 

 

 

 

 

 

 

 

相关文章:

  • 2022-01-26
  • 2021-06-04
  • 2022-12-23
  • 2021-06-09
  • 2021-04-30
  • 2021-11-05
  • 2021-05-21
  • 2021-11-28
猜你喜欢
  • 2021-09-04
  • 2021-10-16
  • 2021-07-06
  • 2021-05-29
  • 2021-10-20
  • 2022-12-23
  • 2021-12-22
相关资源
相似解决方案