hadoop配置bashrc和profile有什么区别?

07-23 12:23

/etc/profile、/etc/bashrc、~/.bash_profile、~/.bashrc很容易混淆，他们之间有什么区别?它们的作用到底是什么?/etc/profile:用来设置系统环境参数，比如$PATH.这里面的环境变量是对系统内所有用户生效的。/etc/bashrc:这个文件设置系统bashshel...[ 查看全部 ]

1g的文件是怎么进行hadoop存储的?

07-16 10:56

hdfs是按块进行存储的。1GB文件会划分成若干块(默认64MB一个块，也可以自己配置)，然后分配到不同的存储节点上存储。nameserver会记录哪些块存储在哪个节点上，等读的时候需要访问nameserver，获取到不同的数据节点，然后再访问数据即可。[ 查看全部 ]

Hadoop节点替换怎么做？

07-08 12:14

相当于一个计算点，有网络连接，可以独立处理NameNode和JobTracker发布的任务。可以在一台机器上设置多个节点，前提是跑得动，也可以每台机器一个节点，可能会造成浪费，要看实际情况了[ 查看全部 ]

什么是Hadoop分布式文件系统？

07-01 12:44

分布式文件系统(DistributedFileSystem)是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。Hadoop是Apache软件基金会所研发的开放源码并行运算编程工具和分散式档案系统，与MapReduce和Google档案系统的概念类似。HDFS(Hadoop分布式...[ 查看全部 ]