Hadoop(CDH)之Hue、Hive操作_xun-ming的博客-CSDN博客
Hadoop(CDH)之Hue、Hive操作
xun-ming
于 2018-08-27 19:03:25 发布
4988
收藏
分类专栏：
Hadoop
文章标签：
cdh
hive
hue
hadoop
sql
本文为博主（xunming）原创文章，转载请注明出处。
本文链接：https://blog.csdn.net/diyangxia/article/details/81697692
版权
Hadoop
专栏收录该内容
13 篇文章
1 订阅
订阅专栏
文章目录
Scheduler定时器创建数据表Sql化操作界面化操作
cdh全称为Cloudera’s Distribution Including Apache Hadoop
Scheduler定时器
看图说话 然后点击保存
创建数据表
Sql化操作
create external table if not exists catch_plan (
user string,
date string,
name string
row format delimited fields terminated by '|'
location '/user/liuxunming/plan'
inner join(等值连接) 只返回两个表中联结字段相等的行
left join(左联接) 返回包括左表中的所有记录和右表中联结字段相等的记录
right join(右联接) 返回包括右表中的所有记录和左表中联结字段相等的记录
界面化操作
在数据库列表上，点击这个加号按钮就是新建数据库，要是进入数据库的表的列表界面，点击加号就是新建数据表
这个地方选择manually，意为手动的
这里主要是选择文件路径和分隔符，目前只成功用过竖线pipe和tab
添加所需字段后，点击提交即可看到成功创建一张表
关于导入的文件中编码的问题：要确保源文件的编码是正确的，比如是utf-8 vim模式下查看文件编码：
:set fileencoding
关于导入文件的格式问题：目前用的最多的是text，其次是csv和json
xun-ming
关注
关注
点赞
收藏
打赏
评论
Hadoop(CDH)之Hue、Hive操作
cdh全称为Cloudera’s Distribution Including Apache Hadoop
复制链接
扫一扫
专栏目录
第一章：Hadoop 高级客户端工具 Hue
09-18
1.Hue原理与架构
2.Hue安装部署
3.Hue实现操作HDFS
4.Hue实现操作Hive
5.Hue实现操作HBase
6.Hue实现WorkFlow
7.Azkaban 技术原理与架构
8.Azkaban 部署实施
9.Azkaban 实现调度Hadoop job，Spark job
Apache Hue: Hue集成Hive
12-09
3844
Hue集成Hive
如果需要配置hue与hive的集成，我们需要启动hive的metastore服务以及hiveserver2服务（impala需要hive的metastore服务，hue需要hvie的hiveserver2服务）。
修改Hue.ini
[beeswax]
hive_server_host=node-1
hive_server_port=10000
hive_conf...
参与评论
您还未登录，请先
登录
后发表或查看评论
Hue 集成Hive
王傲旗的大数据之路
12-07
4843
如果需要配置hue与hive的集成，我们需要启动hive的metastore服务以及hiveserver2服务（impala需要hive的metastore服务，hue需要hvie的hiveserver2服务）。
修改hue的配置文件
进入配置文件目录 编辑文件
cd /export/servers/hue-3.9.0-cdh5.14.0/desktop/conf/
vim hue.in...
基于CDH环境下的Hive数仓配置及优化
最新发布
小叮当的博客
10-12
346
Hive数仓及优化
hadoop、hive、hbase的区别
weixin_50683590的博客
11-07
2070
hadoop、hive、hbase的区别
最近开始自学大数据，肯定免不了hadoop、hive、hbase这些东西。
此处把自己对这3个的理解记录一下：
1、hadoop：它是一个分布式计算+分布式文件系统，前者其实就是MapReduce，后者是HDFS。后者可以独立运行，前者可以选择性使用，也可以不使用
2、hive：通俗的说是一个数据仓库，仓库中的数据是被hdfs管理的数据文件，它支持类似sql语句的功能，你可以通过该语句完成分布式环境下的计算功能，hive会把语句转换成MapReduce，然后交给ha
HUE--hive函数大全
huobumingbai1234的博客
06-05
1万+
日常工作常用的hive函数总结
CDH之Hue的安装并使用hive
大曹的博客
11-04
3358
CDH之Hue的安装并使用hive
介绍：
一， 要想安装Hue，必须先安装oozie
0，下载ext-2.2.zip
mv ext-2.2.zip /var/lib/oozie/
cd /var/lib/oozie
unzip ext-2.2.zip
chown -R oozie:oozie ext-2.2
1，首先点击服务，继续
2，选择一个平台安装，我这块和hive 安装在一块
...
Hive 的SQL基本操作
半吊子Kyle的博客
06-17
1512
Hive 的基本操作Hive 数据库操作Hive 数据库表操作
Hive 数据库操作
切换数据库
-- 切换为 myhive 数据库
use myhive;
查看所有的数据库
-- 切换为 myhive 数据库
show databases;
查看数据库的详细信息
-- 查看数据库 myhive 的详细信息
desc database myhive;
创建数据库
-- 创建一个名称为 myhive 的数据库
create database if not exists myhive;
数据库表
Hue、Hive、Sentry、Airflow、Oozie
ChainingBlocks
01-04
8451
本篇博文主要讲解的是Hue这个开源软件。通过阅读本博客，可以从宏观的角度了解Hue这个应用。本文介绍了什么是Hue，Hue的架构，Hue的特点，在Hue上面使用Hive的优点，在Hue上浏览文件和数据，使用Hue可以对HDFS做哪些操作， 大数据授权管理的背景，Hue使用的授权管理的组件Sentry，介绍了Sentry的组件和架构，Sentry的特点，工作流的概念，开源工具Oozie和开源工具air
CDH 中使用 hive-shell
半吊子Kyle的博客
11-08
770
在 CDH 中使用 hive
问题描述
Cannot find hadoop installation: $HADOOP_HOME or $HADOOP_PREFIX must be set or hadoop must be in the path
解决方案
编辑 hadoop-env.sh
# 1. 进入 hive 安装目录(可能不同，以自己的目录为准)
cd /opt/cloudera/parcels/CDH/lib/hive/conf
vim hadoop-env.sh
# 2. 在末尾增加如下
hue和hive
warrah 南极狼
01-18
1607
Could not connect to localhost:8038 (code THRIFTTRANSPORT): TTransportException('Could not connect to localhost:8038',)
CDH集群hive使用以及性能测试
Rio.的博客
05-08
2152
1.CDH集群里面的Hive角色分配及作用
如图所示，Hive主要有三个角色：HiveServer2、Metastore Server、以及代理角色Gateway
主要两个服务端守护进程：
1、Hiveserver2：支撑JDBC访问，Thrift服务，部署在masternode3节点。
2、MetaStore Server：支撑访问元数据库的服务，部署在toolnode1节点。
2.Hive内...
hue 添加jar_在hue下配置jdbc驱动
weixin_30140707的博客
12-29
466
cloudera的cdh是一个方便的工具，其中的hue号称是hadoop UI，提供了强大的图形操作界面，是一个非常好用的工具。下面介绍如何配置jdbc来进行数据的采集。Installing the JDBC DriversSqoop 2 does not ship with third party JDBC drivers. You must download them separately a...
大数据学习第四篇之Hue集成Hive
qq_37348649的博客
03-20
420
接上篇文章继续share，我把名字更改成了大数据篇，不说了直接干活。
一、配置Hue访问Hive
1. 修改/opt/hue/hue-4.3.0/desktop/conf/hue.ini，找到[beeswax]位置，填写配置信息，如下
[beeswax]
# Host where HiveServer2 is running.
# If Kerberos security is enabl...
CDH6.3.1监控界面Hive修改参数
象在舞的技术专栏
04-25
2153
草稿
在hue中操作hive
qy20115549的博客
11-08
1万+
创建新表建表语句如下：CREATE TABLE IF NOT EXISTS user_collection_9(
user_id string ,
seller_id string ,
product_id string ,
time string
ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' ; hue中向hive导入数据首先，
大数据交互平台Hue的优势
热门推荐
ChainingBlocks
01-06
6万+
本文系统地讲解了Hue作为大数据分析交互平台的优势！欢迎批评指正！Hue Web应用的架构Hue 是一个Web应用，用来简化用户和Hadoop集群的交互。Hue技术架构，如下图所示，从总体上来讲，Hue应用采用的是B/S架构，该web应用的后台采用python编程语言别写的。大体上可以分为三层，分别是前端view层、Web服务层和Backend服务层。Web服务层和Backend服务层之间使用RPC
hue与hive集成
强者的博客
11-15
1699
hue与hive集成
1、启动hiveserver2服务
$ bin/hiveserver2 &
2、配置metastore并启动metastore服务
当mysql数据库配置在远程端时，本地集群需要启动一个hive的metastore服务进程与远程端的mysql进行通信获取mysql的元数据信息
$ vi hive-site.xml
hive left join入门
鸭梨的博客
02-24
2480
准备数据
u1文件中的数据如下：
1,a
2,b
3,c
4,d
7,y
8,u
u2文件中的数据如下：
2,bb
3,cc
7,yy
9,pp
create table if not exists u1(
id int,
name string
row format delimited
fields terminated by ','
create table if not exists u2(
id int,
name string
row format delimited fiel
hive之left join详解
我的祖传代码
05-21
2万+
目录
一 表结构
1.1 医生主表
1.2 医生服务次数表
二 left join查询
1.1 on后面加and条件
1.1.1 sql语句
1.1.2 查询结果
1.1.3 执行计划
1.2 把条件放在where后面
1.2.1 sql语句
1.2.2 查询结果
1.2.3 执行计划
1.3 子查询
1.3.1 sql语句
1.3.2 查询结果
1.3.3 执行计...
“相关推荐”对你有帮助么？
非常没帮助
没帮助
一般
有帮助
非常有帮助
提交
©️2022 CSDN
皮肤主题：撸撸猫
设计师：马嘣嘣
返回首页
xun-ming
CSDN认证博客专家
CSDN认证企业博客
码龄12年
暂无认证
143
原创
2万+
周排名
8378
总排名
60万+
访问
等级
7033
积分
219
粉丝
236
获赞
153
评论
818
收藏
私信
关注
热门文章
Java后台接口开发实战演练
61793
Android基于环信SDK开发IM即时聊天（一）
25129
Android中通过Exifinterface读取图片地理位置信息
21560
Eclipse使用心得与技巧
19737
【微信小程序】用户授权及getUserProfile接口使用
18331
分类专栏
Android Java
51篇
Hadoop
13篇
Java
17篇
Study
12篇
Weixin
12篇
Spring Boot
7篇
Android Kotlin
4篇
Linux
6篇
Tools
12篇
Database
11篇
Flutter
1篇
Data Analyse
2篇
IDE
3篇
Other
7篇
Python
3篇
最新评论
App软著申请过程全记录
qq_43232513:
邮寄3周了没有反应
【微信小程序】用户授权及getUserProfile接口使用
procstu:
官方提供的方法是哪些?能给一下链接吗
【微信小程序】用户授权及getUserProfile接口使用
T-S-F:
需要自己写一个页面,设置昵称和头像,官方提供了方法,不过有点坑
【微信小程序】用户授权及getUserProfile接口使用
风清云淡_A:
我今天也遇到了，返回的默认灰色头像和微信用户的昵称，不知道该怎么处理
【微信小程序】用户授权及getUserProfile接口使用
T-S-F:
这个接口是不是不返回用户头像和昵称了?2022.11.9
您愿意向朋友推荐“博客详情页”吗？
强烈不推荐
不推荐
一般般
推荐
强烈推荐
提交
最新文章
代码实现根据某个字段对数据分组合并
Python学习心得记录
【微信小程序】用文件读写实现数据库的增删改查
2022年10篇
2021年17篇
2020年23篇
2019年23篇
2018年18篇
2017年16篇
2016年12篇
2015年13篇
2014年13篇
2013年2篇
2011年1篇
目录
目录
分类专栏
Android Java
51篇
Hadoop
13篇
Java
17篇
Study
12篇
Weixin
12篇
Spring Boot
7篇
Android Kotlin
4篇
Linux
6篇
Tools
12篇
Database
11篇
Flutter
1篇
Data Analyse
2篇
IDE
3篇
Other
7篇
Python
3篇
目录
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
打赏作者
xun-ming
你的鼓励将是我创作的最大动力
¥2
¥4
¥6
¥10
¥20
输入1-500的整数
余额支付
(余额：-- )
扫码支付
扫码支付：¥2
获取中
扫码支付
您的余额不足，请更换扫码支付或充值
打赏作者
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额
抵扣说明：
1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。 2.余额无法直接购买下载，可以购买VIP、C币套餐、付费专栏及课程。
余额充值