Java123社区 - 轻松开发从此开始! 请登陆 免费注册

微科社区

当前位置:主页 > TAG标签 > hadoop
  • Hadoop(HDFS+MapReduce)的那些事儿[jQuery]Hadoop(HDFS+MapReduce)的那些事儿 2012-04-01

    一台单机在存储容量、并发性上毫无疑问都是有很大限定的。为了办理单机无法完成的大存储(1TB)和大规模盘算,漫衍式体系就应运而生了。传统的基于RDBMS的存储和盘算存在着 扩展差...

    74人浏览
  • Hadoop “Failed to set setXIncludeAware(true) for parser” 错[jQuery]Hadoop “Failed to set setXIncludeAware(true) for parser” 错 2012-03-30

    Hadoop “Failed to set setXIncludeAware(true) for parser” 错误 本日利用Java毗连Hbase的时间出现错误,非常如下: ERROR conf.Configuration : Failed to set setXIncludeAware(true) for parser org.apache.xerces.jaxp.Documen...

    164人浏览
  • 解析基于Hadoop平台的云存储应用实践字号[jQuery]解析基于Hadoop平台的云存储应用实践字号 2012-03-29

    随着网络和办事器的敏捷生长,数据的容量越来越大,数据的存储面对严厉的挑战,怎样有效地存储数量巨大的数据,云存储是个不错的选择。扼要先容云盘算和云存储的观点,并以...

    25人浏览
  • Hadoop 常见错误汇总 (转载)[jQuery]Hadoop 常见错误汇总 (转载) 2012-03-28

    由于常常碰到种种错误,以是转载过来,以备忘: 常常碰到的exception是:PipeMapRed.waitOutputThreads(): subprocess failed with code N "OS error code 1: Operation not permitted" "OS error code 2: No such file or dire...

    30人浏览
  • 初步认识Hadoop[jQuery]初步认识Hadoop 2012-03-28

    1. 配景知识 由谷歌公司研发的谷歌文件体系和MapReduce变成模子在处理惩罚海量数据方面引起了业界的回声。 Hadoop是实现了MapReduce编程模子的开源体系。 Hadoop Java API主页: http://hadoop....

    19人浏览
  • /tmp/hadoop-root/mapred/system/jobtracker.info could only be[jQuery]/tmp/hadoop-root/mapred/system/jobtracker.info could only be 2012-03-27

    java.net.NoRouteToHostException: No route to host 在hadoop集群中使用copyFromLocal命令的时候发生错误,识别不到datanode节点,重新初始化也没有用,此时删除临时文件夹下的所有文件,关闭iptables,...

    38人浏览
  • 利用mrunit进行hadoop map/reduce单元测试[jQuery]利用mrunit进行hadoop map/reduce单元测试 2012-03-22

    Apache MRUnit 团队发布了 MRUnit 0.8.0-incubating 版本,这是 MRUnit 的第二个发行版本。 下载地址: http://www.apache.org/dyn/closer.cgi/incubator/mrunit/ 改进记录: https://issues.apache.org/jira/browse/MRUNIT/fix...

    65人浏览
  • hadoop shell命令远程提交[jQuery]hadoop shell命令远程提交 2012-03-22

    hadoop shell命令远程提交 一,hadoop shell命令远程提交原理 hadoop shell命令执行目前很多场景下面主要通过 Linux shell来交互操作,无论对于远程操作还是习惯于windows/web操作的开发人员而言,...

    78人浏览
  • hadoop 异常记录 Cannot delete /tmp/hadoop/mapred/system.[其他数据库]hadoop 异常记录 Cannot delete /tmp/hadoop/mapred/system. 2017-01-17

    org.apache.hadoop.ipc.RemoteException:org.apache.hadoop.hdfs.server.namenode.SafeModeException:Cannotdelete/tmp/hadoop/mapred/system.Namenodeisinsafemode. Theratioofreportedblocks0.7857hasnotreachedthethreshold0.9990.Safemodewillbeturnedoffa...

    451人浏览 好评(1578)
  • hadoop 异常记录 ERROR: org.apache.hadoop.hbase.MasterNotR[其他数据库]hadoop 异常记录 ERROR: org.apache.hadoop.hbase.MasterNotR 2017-01-12

    当我把hadoop、hbase安装配置(具体参考这里)好了之后,启动hbase的shell交互模式,输入命令却出现了下面这样的错误: ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times 这是为什...

    1290人浏览
推荐内容