博客
关于我
大数据集群运维(24)kylin 系列(一)安装部署
阅读量:566 次
发布时间:2019-03-11

本文共 1571 字,大约阅读时间需要 5 分钟。

kylin 系列(一)安装部署

一、环境说明

1.1 版本选择

cdh 版本下载地址:

软件名称 版本
JDK 1.8
HADOOP Hadoop2.6.0-cdh5.10
ZOOKEERER 3.4.5
HBASE Hbase1.2.0-cdh5.10
HIVE Hive1.2.0-cdh5.10
KAFKA Kafka0.10
KYLIN Kylin2.3.2

1.2 节点准备

节点 说明
CDH-01  
CDH-02  
CDH-03  

二、Kylin 安装与配置

2.1 软件下载

Kylin 下载地址:

2.2 解压

tar -zxvf apache-kylin-2.3.2ln -sv /opt/bigdata/software/apache-kylin-2.3.2 /opt/bigdata/kylin

2.3 配置环境变量

export HADOOP_HOME=/opt/bigdata/hadoopexport HBASE_HOME=/opt/bigdata/hbaseexport HIVE_HOME=/opt/bigdata/hiveexport HIVE_CONF_HOME=$HIVE_HOME/confexport HCAT_HOME=$HIVE_HOME/hcatalogexport KAFKA_HOME=/opt/bigdata/kafkaexport KYLIN_HOME=/opt/bigdata/kylinexport PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbinexport PATH=$PATH:$HBASE_HOME/bin:$HIVE_HOME/bin:$HCAT_HOME/bin:$KAFKA_HOME:bin:$KYLIN_HOME/bin

2.4 kylin 配置文件

vi kylin.properties# 配置节点类型(kylin 主节点模式为 all,从节点的模式为 query)# 注意主从节点类型不一致kylin.server.mode=all# kylin 集群节点配置kylin.server.cluster-servers=CHD-01:7070,CHD-02:7070,CHD-03:7070# 定义 kylin 用于 MRjobs 的 job.jar 和 hbase 的协处理 jar,用于提升性能(添加项)kylin.job.jar=/opt/bigdata/kylin/lib/kylin-job-2.3.2.jarkylin.coprocessor.local.jar=/opt/bigdata/kylin/lib/kylin-coprocessor-2.3.2.jar

三、Kylin 启动

启动 Kylin 前需要启动 Hadoop、Zookeeper、Hbase、Hive 等服务。

3.1 依赖检查

# 执行下面的检查命令会在 hdfs 上创建 kylin 目录./check-env.sh# 检查数据源 hive 和数据存储 hbase./find-hive-dependency.sh./find-hbase-dependency.sh

3.2 启动 kylin 服务

# 每个节点都需要单独启动bin/kylin.sh start

每个节点都可以查看对应的 WEB UI:,默认的用户名和密码: admin/kylin

四、Kylin 测试

  1. 启动 kylin 之后运行 sample.sh 脚本(任意集群节点运行都可以)

    ./sample.sh

导入 sample 数据,模型,cube 成功之后系统会提示重启 kylin 或重新加载元数据让数据生效


每天用心记录一点点。内容也许不重要,但习惯很重要!

转载地址:http://nmivz.baihongyu.com/

你可能感兴趣的文章
比特币(BSV)知识库:网络-比特币测试用区块链(Bitcoin Test Blockchains)
查看>>
设计模式 - 2) 策略模式
查看>>
SpringBoot使用RedisTemplate简单操作Redis的五种数据类型
查看>>
国标流媒体服务器以ROOT身份运行提示“permission denide”报错解决
查看>>
国标流媒体服务器在linux系统运行提示fork/exec ……/redis/redis-server错误解决方案
查看>>
国标GB28181协议视频推流平台EasyGBD在Linux下编译报“UINT64_C在此作用领域中尚未声明”错误
查看>>
安防摄像机网页无插件直播方案EasyNVR关于接口调用出现401 Unauthorized问题的解决方法
查看>>
【视频教程】EasyNVR如何将老版本的EasyNVR的数据迁移到4.0.0以上版本
查看>>
LeetCode 872 叶子相似的树[DFS 二叉树] HERODING的LeetCode之路
查看>>
qt中转到槽后如何取消信号与槽关联
查看>>
qt问题记录-spin box与double spin box
查看>>
移动端事件
查看>>
css 图片按比例缩放
查看>>
小程序form表单里面buton点击事件失效
查看>>
微信小程序placeholder设置自定义样式
查看>>
安装npm install --save vue-scroller失败
查看>>
es6 引用数组,数组发生改变 (es6 引用类型的数据引用的时候怎么不改变原始数据)
查看>>
后端返回图片地址,图片不显示的问题
查看>>
spring-day01
查看>>
spring的值注入与组件扫描
查看>>