java吧 关注:1,190,768贴子:12,602,688
  • 3回复贴,共1

Hadoop库依赖hadoop集群运行吗?

只看楼主收藏回复

rt,目前在自学hadoop。我发现mapreduce的时候发现相关文件都会导入一些hadoop库,但是从代码上看好像没有对运行系统有具体要求,请问如果我只想测试一下mapreduce能不能用的话需要实际部署hadoop集群吗?还是说像普通java文件一样跑就行了?


IP属地:澳大利亚来自iPhone客户端1楼2022-04-29 22:50回复
    要打成jar包,用shell命令执行


    IP属地:浙江来自Android客户端2楼2022-04-30 07:37
    收起回复
      我的理解hadoop就是一个分布式的mapreduce,就跟redis是分布式缓存中间件一样,sdk只是用来与hadoop做通讯用的。
      而且你这么想,java8本身自带forkjoin pool和parallel stream了,如果不是为了分布式,hadoop对于java来说意义大么?


      IP属地:辽宁来自Android客户端4楼2022-05-09 22:49
      回复