虚拟化容器,大数据,DBA,中间件,监控。
06 11月
Sqoop

SQOOP安装及使用 SQOOP安装 1、上传并解压 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/soft/ 2、修改文件...

作者:admin|分类:大数据|浏览:488
06 11月
Flume的安装及使用

Flume的安装及使用 Flume的安装 1、上传至虚拟机,并解压 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/local/soft/ 在环境变量中...

作者:admin|分类:大数据|浏览:639
06 11月
Hadoop3分布式高可用集群部署

文章目录Hadoop集群部署4.1 解压安装包并配置环境变量4.2 修改核心配置文件4.2.1 配置 hadoop-env.sh4.2.2 配置 core-site.xml4.2.3 配置 hdfs-site.xml4.2.4 配置mapred-site....

作者:admin|分类:大数据|浏览:645
06 11月
Hadoop集群版 高可用

所需脚本网址 jqop https://blog.csdn.net/qq_51903852/article/details/121120429 xsync https://blog.csdn.net/qq_51903852/article/details...

作者:admin|分类:大数据|浏览:549
06 11月
技术整理sqoop

Sqoop的安装与部署 1/ 将sqoop解压 到usr下 2/ 配置sqoop下的conf目录下的env环境文件 先切换目录:cd /usr/sqoop/conf 编辑文件命令:gedit sqoop-env-template.sh 找到被注释的有关HA...

作者:admin|分类:大数据|浏览:563
06 11月
ElasticSearch7.10 生命周期配置 冷热分离 windows10版本测试

ElasticSearch7.10 生命周期配置 冷热分离 windows10版本测试下载官方ElasticSearch7.10 与对应版本的kibana 便于操作更多详细内容参考 https://www.elastic.co前提 安装jdk 并配置环境变...

作者:admin|分类:大数据|浏览:498
06 11月
ElasticSearch——倒排索引和正向索引

ElasticSearch——倒排索引和正向索引1、正向索引正向索引 (forward index 以文档的ID为关键字,表中记录文档中每个字的位置信息,查找时扫描表中每个文档中字的信息直到找出所有包含查询关键字的文档这种组织方法在建立索引的时候结构比较...

作者:admin|分类:大数据|浏览:484
06 11月
kafka rebalance 总结说明图

用kafka的第一件事儿就得了解kafka的重平衡,即kafka的rebalance,这个很重要,不然这个kafka就会使不好的,出问题了,就理解不了,得了解一下什么是rebalance,能干啥,为啥要rebalance,rebalance的缺点和影响。...

作者:admin|分类:大数据|浏览:544
06 11月
centos7安装hadoop集群(亲测可用)

环境准备1、hadoop集群hosthostname192.168.46.22master192.168.46.23slave1192.168.46.24slave22、软件版本 centos7:CentOS-7-x86_64-DVD-1708.iso 下...

作者:admin|分类:大数据|浏览:593
06 11月
Spark2.4.8集成并读写hive表数据

Spark2.4.8集成并读写hive表数据1. 本地模式配置2. **远程模式**一、Hive简介二、Hive安装三、Hive的本地模式和远程模式配置四、创建Hive表五、SparkSQL集成Hive一、Hive简介Apache Hive™数据仓库软件通...

作者:admin|分类:大数据|浏览:409