spark学习记录|Bigdata-Spark==作者：cybsky==
[toc]
知识点 用spark-submit命令提交任务运行，具体使用查看：spark-submit –help
1234567891011121314151617181920212223242526272829303132333 ...
阅读更多
Java操作Spark学习|Code-Java-Bigdata-Spark==作者：cybsky==
[toc]
配置文件core-site.xml1234567891011121314151617181920212223242526272829<?xml version="1.0" encoding=&q ...
阅读更多
Hbase数据迁移|Bigdata,Hbase==作者：cybsky==
[toc]
旧CDH
新CDH
CDH-5.16.1
CDH-5.16.1
Hadoop 2.6.0
Hadoop 2.6.0
HBase 1.2.0
HBase 1.2.0
Hive 1.1.0
Hive ...
阅读更多
centos7安装hbase1.1.4|Bigdata-Hbase==作者：cybsky==
[TOC]
准备软件hbase-1.1.4-bin.tar.gz
安装步奏#解压
tar zxvf hbase-1.1.4-bin.tar.gz
#修改环境变量
vi /etc/profile
# Hbase Envir ...
阅读更多
centos7安装hive1.2.1|Bigdata-Hive==作者：cybsky==
[toc]
准备软件apache-hive-1.2.1-bin.tar.gz
安装步奏将文件解压在/usr/local/下并改名hive_1.2.1
#配置系统环境变量/etc/profile
# Hive Environme ...
阅读更多
Hive自定义UDF函数|Code-Java-Hive-Hadoop==作者：cybsky==
idea新建个maven项目，引入依赖
12345678910111213<dependencies> <dependency> <groupId>org.ap ...
阅读更多
centos7安装hbase2.10.0|Bigdata-Hbase==作者：cybsky==
HBase简介 HBase是Apache Hadoop中的一个子项目，是一个HBase是一个开源的、分布式的、多版本的、面向列的、非关系(NoSQL)的、可伸缩性分布式数据存储模型，Hbase依托于Hadoop的HDFS作为最基本 ...
阅读更多
hbase常用操作|Bigdata,Hbase==作者：cybsky==
修改hbase表为snappy压缩表12345678alter 'geo_cells',{NAME => 'cell_parameter', COMPRESSION => ...
阅读更多
hive3.1 op&dev|hive版本：hadoop-3.3.0.tar.gzapache-hive-3.1.2-bin.tar.gzzookeeper-3.4.9.tar.gzspark-2.3.2-bin-without-hadoop.gz
配置环境变量
1234567891011export MYSQL_HOME=/usr/l ...
阅读更多
