首页新闻找找看学习计划
当前位置: 博问标签 /hadoop/未解决/ 已解决
1
回答数

5 java hadoop spark 报错

在做项目的时候,设置了Thread.currentThread.setClassLoaderContext(classLoaderContext);在执行项目的时候在hadoop的位置报错 publi
0
回答数

100 hadoop eclipse插件连接HDFS报如下错误

配置已经都搞定,然后eclipse刷不出HDFS内容,报这个错,有知道的大神吗?
1
回答数

10 hadoop 2.6.0中配置sqoop 1.99.6-hadoop200时使用show version --all报错

平台配置: 系统:Ubuntu 12.04 LTS hadoop 2.6.0, sqoop1.99.6-hadoop200, hive-1.1.1, mysql 5.5.48, mysql-conne
0
回答数

20 有关hadoop中Job的运行状态转换的问题

各位博主:你们好!我是南京理工大学一名大四的学生:陈晓涛;要做一个基于hadoop的静态调度器。在看源码,有一些疑问,望大家能给我解答一下。hadoop作 业初始化的过程中当一个Job的所有的task
0
回答数

50 Hadoop集群搭建测试wordcount

搭建好hadoop集群后测试wordcount这个例子,执行到最后一步老是出现这样的错误,执行了hadoop namenode -format并没用,能ping通,貌似不是防火墙问题,请问是什么问题啊
1
回答数

30 在eclipse里面尝试着用nutch2.2.1版本抓取网页存储在MySQL数据库中出错

我在Cygwin下面执行bin/nutch crawl urls -depth 3 -topN 5也是出现这样的错去,请问是怎么回事呢?是不是那个hadoop-core-1.2.0.jar包要修改一下
0
回答数

40 hadoop2.6.0集群start-all.sh启动是没有看到secondary相关信息,其他进程和日志都正常

环境: 1 master,3 slaves;centos6.7 、hadoop2.6.0、jdk1.8.0_60; start-dfs.sh或start-all.sh脚本启动时都是正常,startin
1
回答数

solaris部署hadoop集群跑wordcount报错

内容详情请点击问题查看!
1
回答数

10 运行hadoop中的计算圆周率的demo出现报错

内容详情请点击问题查看!
1
回答数

100 hadoop mapreduce 数据倾斜怎么办

一般看到的解决方案 1文件缓存 问题 数据过大有瓶颈 本来hadoop就是处理大数据的 2转换map输出的key值 问题 数据需要合并结果 key修改后 无法合并原始相同key对应的val 3将倾斜的
0
回答数

30 HIVE: Map Join Vs Common Join

话说,join 大表与一小表,使用Map Join将会有显著的性能提升。 今天测试,果真如此: 大表约400万记录,大小约400M; 小表200条记录,大小1K. 启用 set hive.auto.c
3
回答数

50 【求助】Hive向分区表导入数据File not found: File does not exist:reduce.xml

启动hdfs正常,NN、DN、SN都正常。启动hive只有一个runjar进程,但查询、建本地表、查表都正常。 在从本地表tb3导入分区表tb4_p时出错: insert overwrite tabl
2
回答数

100 hadoop面试问题

1.你们公司的集群规模? 2.你们这个日志系统的业务数据有多大,有多少行? 3.你们提交的job任务大概有多少个?这些job执行完大概用多少时间? 4.你的项目提交到job的时候数据量有多大? 不知道
2
回答数

40 关于uv的统计问题,假若用户没接收cookie,怎么利用IP与useragent来断定是否为同一个用户?

公司刚做基于hadoop的日志处理,目前在用CNZZ的统计,问题是我们做的日志分析系统与CNZZ的差距都比较明显,uv的统计相差30%,而我们没有实现与CNZZ的无接收cookie的用户重复判断,这个
0
回答数

40 hadoop2.2.0搭建sqoop1.99.4遇到服务器无法链接问题

hadoop版本为2.2.0,sqoop-1.99.4-bin-hadoop200,配置完全按照网上的成功教程配置,但是启动之后,运行show version --all指令,报出下面的错误: sqo
0
回答数

10 hive show tables 很慢,show tables之前做了什么?

最近执行hive show tables;命令很慢(第二次很快),集群也就30台机器,hadoop 0.20 cdh的 hive版本0.7.1 请高手指教!!!
1
回答数

50 ssh连接问题

配置hadoop的Master与Slave的SSH免密登录,密钥已经生成,authorized_keys权限设置为600,Master的sshd_config文件内容部分配置如下: 使用ssh连接lo
0
回答数

20 hadoop 中多路分区

如果我想在hadoop中将分区函数getparitions()的返回类型改为 int[]数组,里面每个元素表示将该(key,value)分配到的reduce编号,也就是一个(key,value)可以分
0
回答数

10 Hadoop配置:链接不了,发现50030端口打不开,发现JobTracker,TaskTracker都没有

Call From youcheng1-OEM/192.168.1.192 to localhost:49000 failed on connection exception: java.net.Co
2
回答数

10 .net 的如何学习hadoop

内容详情请点击问题查看!
0
回答数

hadoop集群中的slave的regionserver服务运行一段时间就挂掉了

WARN org.apache.hadoop.hdfs.DFSClient: Failed to connect to /192.168.1.192:50010, add to deadNodes a
1
回答数

10 centos下hadoop的启动问题,求大神

内容详情请点击问题查看!
1
回答数

50 对于cassandra hadoop 的初步使用

使用hadoop map 将数据从txt导入到cassandra 但是出现错误 13/09/08 18:00:30 INFO input.FileInputFormat: Total input pa
1
回答数

10 通过thrift访问hdfs的模式是怎么样的?是通过thriftclient直接访问datanode还是thriftserver访问DataNode

通过thrift访问hdfs的模式是怎么样的?是通过thriftclient直接访问datanode还是thriftserver访问DataNode?
1
回答数

50 hadoop wordcount

5:~$ javac -cp $HADOOP_HOME/hadoop-*-core.jar -d classes WordCount.javaWordCount.java:53: error: can