虚拟化容器,大数据,DBA,中间件,监控。
12 11月
升级到 CDP 私有云基础 - 分步指南

我们最近的博客讨论了从传统平台到 CDP 私有云基础的四种途径。在本博客和随附的视频中,我们将深入探讨运行从 CDH5 或 CDH6 到 CDP 私有云基础的就......

作者:admin|分类:大数据|浏览:606
11 11月
基于Kubernetes集群部署Elasticsearch集群

在k8s中部署elasticsearch集群文章目录在k8s中部署elasticsearch集群1.部署分析2.准备镜像并推送至Harbor仓库3.创建StorageClass动态PV资源4.编写es集群configmap资源5.编写es集群statful...

作者:admin|分类:大数据|浏览:524
11 11月
部署ELK+Kafka+Filebeat日志收集分析系统

ELK+Kafka+Filebeat日志系统文章目录ELK+Kafka+Filebeat日志系统1.环境规划2.部署elasticsearch集群2.1.配置es-1节点2.2.配置es-2节点2.3.配置es-3节点2.4.使用es-head插件查看集群...

作者:admin|分类:大数据|浏览:382
10 11月
Logstash同步MySql数据到Elasticsearch

目录 1 MySql数据到Elasticsearch 1.1 下载logstash 1.2 解压logstash 1.3 在logstash 目录创建 mysql 文件夹 1.4...

作者:admin|分类:大数据|浏览:573
09 11月
ELK+Kafka+Filebeat企业内部日志分析系统

文章目录ELK:日志收集平台概念图组件介绍1、Elasticsearch:2、Logstash:3、Kibana:2、环境介绍3、版本说明实施部署1、安装配置jdk8,依赖包3、系统优化(1)增加最大文件打开数启动ES启动如果报下列错误ELK:日志收集平台...

作者:admin|分类:大数据|浏览:483
09 11月
k8s 控制器:Daemonset 和 Job

k8s Job...

作者:admin|分类:大数据|浏览:422
09 11月
Spark的安装及其配置

1.Spark下载 https://archive.apache.org/dist/spark/ 2.上传解压,配置环境变量 配置bin目录 解压:tar -zxvf spark-2.4.5-bin-...

作者:admin|分类:大数据|浏览:460
08 11月
分布式中间件之Kafka

安装kafka下载地址https://kafka.apache.org/documentation解压tar -zxvf kafka_2.12-2.4.1 -C /usr/local/进入到config目录,编辑 server.properties 配置文...

作者:admin|分类:大数据|浏览:525
08 11月
kafka 安装和启动

kafka中文教程 学习记录首先准备好linux机器环境,参考此篇文章:快速搭建Linux服务器环境单机版1. 下载代码https://kafka.apache.org/downloads.html官方的下载链接比较慢,这里可以使用第三方下载转发的链接地址...

作者:admin|分类:大数据|浏览:742
08 11月
sqoop 导出hive数据到MySQL数据库当中

常用命令:查看hive中表的结构: desc table_name;查看hive中表的详细结构:desc formatted table_name;我们想要将hive表中的数据导出到MySQL当中,MySQL中必须要有一个表来接收,并且该表的结构...

作者:admin|分类:大数据|浏览:510