虚拟化容器,大数据,DBA,中间件,监控。
15 11月
HBase学习之路 (八)HBase大牛博客

主要是记录一下链接http://hbasefly.com...

作者:admin|分类:大数据|浏览:436
15 11月
HBase学习之路 (九)HBase phoenix的使用

目录HBase phoenix的下载 正文回到顶部HBase phoenix的下载下载地址http://mirror.bit.edu.cn/apache/phoenix/选择对应的hbase版本进行下载,测试使用的是hbase-1.2.6版本 ......

作者:admin|分类:大数据|浏览:325
15 11月
HBase学习之路 (十)HBase表的设计原则

目录建表高级属性 1、 BLOOMFILTER 2、 VERSIONS 3、 COMPRESSION 4、 TTL 5、 alter 6、 describe/desc 7、 disable_all/enable_all 8、 drop_all...

作者:admin|分类:大数据|浏览:294
15 11月
HBase学习之路 (十一)HBase的协过滤器

目录协处理器—Coprocessor 1、 起源 2、介绍 3、总结 协处理加载方式 1、 静态加载 2、 动态加载 3、 协处理器卸载 案例(二级索引) 正文回到顶部协处理器—Coprocessor1、 起源 Hbase 作为列族数据库最经...

作者:admin|分类:大数据|浏览:287
15 11月
Kafka学习之路 (一)Kafka的简介

目录一、简介 1.1 概述 1.2 消息系统介绍 1.3 点对点消息传递模式 1.4 发布-订阅消息传递模式 二、Kafka的优点 2.1 解耦 2.2 冗余(副本) 2.3 扩展性 2.4 灵活性&峰值处理能力 2.5 可...

作者:admin|分类:大数据|浏览:418
15 11月
Kafka学习之路 (二)Kafka的架构

目录一、Kafka的架构 二、Topics和Partition 三、Producer消息路由 四、Consumer Group 五、Push vs. Pull 六、Kafka delivery guarantee 正文回到顶部一、Kafka的架构如上图所示...

作者:admin|分类:大数据|浏览:282
15 11月
kafka 配置优化

因此Kafka提供两种策略删除旧数据。一是基于时间,二是基于Partition文件大小。例如可以通过配置$KAFKA_HOME/config/server.properties,让Kafka删除一周前的数据,也可在Partition文件超过1GB时删除旧数...

作者:admin|分类:大数据|浏览:471
15 11月
Kafka学习之路 (三)Kafka的高可用

目录一、高可用的由来 1.1 为何需要Replication 1.2 Leader Election 二、Kafka HA设计解析 2.1 如何将所有Replica均匀分布到整个集群 2.2 Data Replication(副本策略) 三、HA相...

作者:admin|分类:大数据|浏览:335
15 11月
Kafka学习之路 (四)Kafka的安装

目录一、下载 二、安装前提(zookeeper安装) 三、安装 2.1 上传解压缩 2.2 修改配置文件 2.3 将kafka的安装包分发到其他节点 2.4 创建软连接 2.5 修改环境变量 三、启动 3.1 首先启动zookeeper集群 3...

作者:admin|分类:大数据|浏览:390
15 11月
Kafka学习之路 (五)Kafka在zookeeper中的存储

目录一、Kafka在zookeeper中存储结构图 二、分析 2.1 topic注册信息 2.2 partition状态信息 2.3 Broker注册信息 2.4 Controller epoch 2.5 Controller注册信息 2.6 补...

作者:admin|分类:大数据|浏览:438