关于关键词 的检测结果，共 136 条
【hadoop】
参考: https://blog.csdn.net/clypm/article/details/79496934本文介绍hbase在集群中的分布式安装教程，由于hbase需要依赖于hadoop和zookeeper集群，所有首先需要安装准备好hadoop和zookeeper集群，可以参看前面的文章:hadoop安装 https://blog.csdn.net/sjhuangx/article/details/79783051zookeeper安装:ht...
【hadoop】
| 2018-12-11 17:50:04 | 阅读(2090) | 评论(0)
在信息技术界，kerberos是一种被广泛采用的网络认证协议，通过对称加密的技术，保护网络系统的安全。
【hadoop】
| 2018-01-02 08:48:15 | 阅读(1870) | 评论(0)
hadoop mr
【hadoop】
| 2018-01-02 08:47:11 | 阅读(2190) | 评论(0)
hadoop简介 hadoop是apache软件基金会旗下的一个开源分布式计算平台。以hadoop分布式文件系统（hdfs，hadoop distributed filesystem）和mapreduce（google mapreduce的开源实现）为核心的hadoop为用户提供了系统底层细节透明的分布式基础架构。对于hadoop的集群来讲，...
【hadoop】
hxl | 2017-12-07 14:46:24 | 阅读(0) | 评论(0)
1.创建目录:[hadoop@master exter_data]$ hadoop fs -mkdir /user/hive/provcode/2.上传文本文件hadoop fs -put /opt/hadoop/exter_data/provcode.txt.utf8 /user/hive/provcode/3.压缩[hadoop@master exter_data]$ hadoop jar /opt/hadoop/hadoop-2.8.2/share/hadoop/tools/lib/hadoop-streaming-2.8.2.jar -dmapr...
【hadoop】
hxl | 2017-11-07 14:33:05 | 阅读(0) | 评论(0)
linux环境:kafka: 192.168.56.102 server2linux安装kafka1.4 下载安装介质下载地址为: https://www.apache.org/dyn/closer.cgi?path=/kafka/1.0.0/kafka_2.11-1.0.0.tgz我这里下载的版本是kafka_2.11-1.0.0.tgz1.5 解...
【hadoop】
hxl | 2017-10-27 17:42:40 | 阅读(0) | 评论(0)
1.停掉服务[root@master opt]# /opt/cm-5.13.0/etc/init.d/cloudera-scm-server stopstopping cloudera-scm-server: [ ok ][root@master opt]# /opt/cm-5.13.0/etc/init.d/cloudera-scm-agent stopstopping cloudera-scm-agent: [ ok ]2.agent节点的uuidrm -rf /opt/cm-5.13.0/lib/clouder...
【hadoop】
aquester | 2017-04-30 14:25:07 | 阅读(3810) | 评论(0)
目录目录11. 前言32. 特性介绍43. 部署53.1. 机器列表63.2. 主机名63.2.1. 临时修改主机名73.2.2. 永久修改主机名73.3. 免密码登录范围73.4. 修改最大可打开文件数83.5. oom相关：vm.overcommit_memory 84...
【hadoop】
| 2017-04-05 11:45:23 | 阅读(1610) | 评论(0)
把需要注意的事项写前面吧，后面碰到坑可以翻到前面看看。安装cdh的时候这个提示 requires libpython2.4.so.1.0()(64bit)系统缺包，yum 装不上，yum安装了python-devel 也不行，系统是2.6.6的，后来网上下了个 rpm的，装的时候加上 --nodeps 强制安装。下载地址：http://rpmfind.net/linux/rpm2html/sea...
【hadoop】
| 2017-02-09 13:30:47 | 阅读(650) | 评论(0)
hadoop 简单介绍和安装过程介绍
【hadoop】
aquester | 2016-10-28 18:15:53 | 阅读(4230) | 评论(0)
1) 配置hdfs httpfs和webhdfs如果hdfs是ha方式部署的，则只能使用httpfs，而不能用webhdfs。2) 安装依赖：apr-iconv-1.2.1confuse-3.0apr-util-1.5.4libpng-1.6.26apr-1.5.2 expat-2.2.0pcre-8.38libxml2-devellibxslt-develsqlite-devel。。。。。。3) 编译安装hue解压hue安装包，然后执行make i...
【hadoop】
| 2016-09-07 21:49:14 | 阅读(9850) | 评论(0)
目录目录11. 前言22. 部署32.1. 机器列表32.2. 主机名32.2.1. 临时修改主机名42.2.2. 永久修改主机名42.3. 免密码登录范围43. 约定53.1. 安装目录约定53.2. 服务端口约定64. 工作详单75. ...
【hadoop】
| 2016-07-21 16:28:09 | 阅读(1930) | 评论(0)
hadoop简介 hadoop是apache软件基金会旗下的一个开源分布式计算平台。以hadoop分布式文件系统（hdfs，hadoop distributed filesystem）和mapreduce（google mapreduce的开源实现）为核心的hadoop为用户提供了系统底层细节透明的分布式基础架构。对于hadoop的集群来讲，...
【hadoop】
| 2016-04-24 16:40:38 | 阅读(1810) | 评论(0)
hive安装环境：ubuntu14.04 hadoop-2.6.0 hive-2.0.0
?1.下载安装
?下载链接：http://mirror.bit.edu.cn/apache/hive/
?解压安装：
2.参数配置
?2.1设置环境变量
2.2设置配置文件
3错误信息：
exception in thread "main" java.lang.runtimeexception: hive metastore database is not initialized.
exception in thread "main" java.lang.illegalargumentexception: java.net.urisyntaxexception:
【hadoop】
jelon521 | 2016-03-15 15:58:04 | 阅读(1980) | 评论(0)
hadoop简介 hadoop是apache软件基金会旗下的一个开源分布式计算平台。以hadoop分布式文件系统（hdfs，hadoop distributed filesystem）和mapreduce（google mapreduce的开源实现）为核心的hadoop为用户提供了系统底层细节透明的分布式基础架构。对于hadoop的集群来讲，...
【hadoop】
aquester | 2016-02-16 15:42:51 | 阅读(8070) | 评论(0)
hive 1.2.1安装指南.pdf目录目录11. 前言12. 约定23. 服务端口24. 安装mysql 24.1. 安装mysql 24.2. 创建hive元数据库 45. 安装步骤45.1. 下载hive 1.2.1二进制安装包 45.2. 安装hive 55.3. 安装mysql-connec...
【hadoop】
| 2016-02-11 16:26:22 | 阅读(1470) | 评论(0)
在使用hadoop namenode -format进行namenode的格式化时候，出现错误format aborted in path出现错误的原因是：在对namenode格式化之前，要确保dfs.name.dir参数指定的目录不存在（hdfs-site.xml文件）。hadoop这样做的目的是防止错误的将已存在的集群格式化了。解决方法：关闭hadoop服务将上面参数指定的文件夹删除，...
【hadoop】
| 2016-01-18 20:14:30 | 阅读(670) | 评论(0)
hadoop简介 hadoop是apache软件基金会旗下的一个开源分布式计算平台。以hadoop分布式文件系统（hdfs，hadoop distributed filesystem）和mapreduce（google mapreduce的开源实现）为核心的hadoop为用户提供了系统底层细节透明的分布式基础架构。对于hadoop的集群来讲，...
【hadoop】
wizardzj | 2015-12-11 19:49:06 | 阅读(3750) | 评论(1)
ganglia包括如下程序，他们之间通过xml格式传递监控数据，达到监控效果。 gmetad 这个程序负责收集各个cluster的数据，并更新到rrd数据库中。 gmond 收集本机的监控数据，发送到其他机器上。收集其他机器的监控数据，供gmetad读取。默认监听端口8649 web front-end 一个基于web的监控界面，需...
【hadoop】
| 2015-12-01 17:11:48 | 阅读(8530) | 评论(0)
ambari 常用的 rest api 介绍ambari 借鉴了很多成熟分布式软件的 api 设计。rest api 就是一个很好地体现。通过 ambari 的 rest api，可以在脚本中通过 curl 维护整个集群。并且，我们可以用 rest api 实现一些无法在 ambari gui 上面做的操作。下面是一些实例。实例 1，通过 api 卸载已安装的 service目前 ambari 不...