首页新闻找找看学习计划
当前位置: 博问标签 /hadoop/未解决/ 已解决
3
回答数

大数据平台的搭建都还很模糊想找人讲讲

大数据平台的搭建都还很模糊想找人讲讲,很多细节自己好像注意不到
1
回答数

10 map 100% reduce 100%后卡很长时间才job completed successfully

最近碰到个棘手的问题,hive to hbase时,mr 100%后要卡2个小时才往下运行。请教各位大佬怎么解决,日志如下: 19/12/07 09:26:00 INFO mapreduce.Job:
0
回答数

20 Hive上删除Hdfs表的分区文件,查看表分区时,分区依旧存在问题

下面是我的操作步骤: [root@bigdata-poc-shtz-3 test]# hadoop fs -ls -R hdfs://bigdata:8020/user/hive/warehouse/
0
回答数

20 CDH集权启动报错 Failed to send metrics.

各位道友: 遇到一个问题: 这个是什么鬼?
0
回答数

20 DataNode被自动关闭没有任何异常

DataNode启动后运行一段时间就掉了,反正我去睡一觉起来jps就没有这个进程了。NameNode没掉。后来发现还能继续上传文件,namenode上还有DataNode的信息,端口也还占用着,就是j
2
回答数

为什么idea导出的mapreduce jar包运行会出现各种问题呢

为什么idea导出的mapreduce jar包运行会出现各种问题呢
0
回答数

hdfs的回收站的位置只能是/user/用户名吗?

hdfs的回收站的位置只能是/user/用户名吗?
0
回答数

将jar包放在什么位置可以让hadoop启动时自动加载类

将jar包放在什么位置可以让hadoop启动时自动加载类
0
回答数

hadoop机架感知不能加载类

我已经在core-site.xml配置文件中配置了net.topology.node.switch.mapping.impl。并把jar包放在了/opt/modules/hadoop-2.7.2/sh
0
回答数

hdfs namenode -importCheckpoint 是不是只有当secondarynamenode和namenode在同一主机上才行

hdfs namenode -importCheckpoint 是不是只有当secondarynamenode和namenode在同一主机上才行
0
回答数

20 小白请教centerOS下 sqoop import

在命令行执行sqoop import命令如下: sqoop import --connect jdbc:mysql://localhost:3306/source_data?charset-utf8
5
回答数

升学了我选大数据还是软件开发好

因为职高的时候自学过JavaEE相关的开发,做过分布式相关应用。对于Web网页方面也比较了解。能用原生的js/css/html和Bootstrap、jquery之类的框架编写网页。现在因为升学了,考了
0
回答数

10 hadoop配置ha的时候,新加的名称节点中的看不到datanode数据节点有哪些

第一台主机是好的,但是第二台启用高可用时,主机上的数据节点不显示
2
回答数

启动hadoop后,hadoop命令无效,fs.defaultFS中配置的9000端口没有

core-site.xml文件配置了9000 <property> <name>fs.defaultFS</name> <value>hdfs://master:9000</value> </prop
0
回答数

5 关于ranger界面配置hdfs服务

ranger界面,准确来讲,开启ranger Plugin,会自动生成一个hdfs服务,但是配置第二个hdfs服务时测试显示成功,可是创建的服务不生效。Plugin不显示服务名 !
1
回答数

60 ImmutableBytesWritable 这是什么类型,有什么用

如题,这个在mapreduce 写入Hbase时遇到的一种数据类型。这个类型有什么用
0
回答数

hadoop 多文件处理场景,使用什么手段

目前有两个文件。一个用户文件,一个平均分文件。 如何用mapreduce 拆分用户文件时,将每条数据再进入 平均分文件中做一次对比。 这种场景如何解决,或者有没有什么手段来处理。
1
回答数

50 hadoop出现的问题

F:\Hadoop2.7\hadoop-2.7.3>hadoop fs -ls / ls: Call From I2GRU6UC60PSUHM/192.168.100.1 to localhost:9
0
回答数

20 测试MapReduce时报错: WARN hdfs.DFSClient: Caught exception java.lang.InterruptedException

在为分布式情况下测试MapReduce时一直卡在INFO mapreduce.Job: Running job: job_1539195694237_0014 我用的是hadoop2.7.4 Ubun
2
回答数

10 什么样的数据量才需要用到hadoop?

hadoop和我们日常用到的数据库有什么不同,Mysql都能记录很大的数据量?
0
回答数

Hive Shell命令插入数据报错

Hadoop版本:2.8.4 HBase版本:2.1.0 Hive版本:2.3.3 Hadoop HA 与 HBase HA配置完成,且可正常使用。 Hive配置完成后,使用Hive Shell 可以
1
回答数

centos7环境下初始化hive时报错,请指教,谢谢!!!

[root@master hive-1.2.2]# schematool -initSchema -dbType mysqlMetastore connection URL: jdbc:mysql:/
1
回答数

100 hadoop mapreduce 问题,出现错误

报错为: [root@wzq116 /]# hadoop jar /usr/bin/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.
1
回答数

hadoop配置出现地址指向127.0.0.1时远程不可访问

修改CORE-SITE.XML中的配置前,指向127.0.0.1,外网不可访问8088端口,但可以访问50070端口。 修改core-site.xml后,指向0.0.0.0后可访问8088以及5007