当前位置:首页>开发>正文

hadoop遇到的问题 我在解压hadoop压缩包的时候遇到这问题怎么办

2023-04-11 05:50:37 互联网 未知 开发

hadoop遇到的问题 我在解压hadoop压缩包的时候遇到这问题怎么办

我在解压hadoop压缩包的时候遇到这问题怎么办?

I would go back and re-gzip the tar file though (to save space):
gzip xxxxxx.x.x.tar
tar -zxvf xxxxxx.x.x.tar.gz
想刨根问底的可以查下他的意思,在看下TAR 指令的用法,。
总之:我出现这个错误时,就是把指令改为:
tar -xvf xxxx.tar.gz
然后指令就运行了。。

什么是伪分布式?(hadoop中遇到的)

伪分布式就是假分布式,假就假在只有一台机器而不是多台机器来完成一个任务,但是模拟了分布式的这个过程,所以伪分布式下Hadoop也就是虽然在一个机器上配置了hadoop的所有节点,但伪分布式完成了所有分布式所必须的事件。伪分布式Hadoop和单机版最大区别就在于需要配置HDFS。

扩展资料:
当客户端想读取一个文件的时候,客户端需要和伪分布式节点进行交互,因为它是唯一存储数据节点元数据的节点。伪分布式规定奴隶节点的存储数据的地址跟位置。客户端通过伪分布式找到它需要数据的节点,然后直接在找到DataNode中进行读操作。
考虑到安全和授权的目的,伪分布式给客户端提供token,这个token需要出示给DateNote进行认证,认证通过后,才可以读取文件。

请教Windows运行hadoop wordcount程序碰到权限问题

1、果断看你的后台在master.....log日志文件中的日志输出,它会告诉你原因。 2、学hadoop的时候,配置项和知识点很多,个人遇到的也不一样,但解决问题不变的原则就是出现问题先找日志。只要细心和专业点,都能独立解决点这个问题。

最新文章