MrChang Blog

这家伙总以为自己是个天才，实际并不比别人聪明多少！

hbase API

"nosql 数据库"

pom添加依赖 <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-client-project</artifactId> <version>1.4.3</version> </dependenc...

Posted by Mr Chang on April 9, 2018

hbase的介绍与安装

"nosql 数据库"

介绍 HBASE是一个数据库—-可以提供数据的实时随机读写 HBASE与mysql、oralce、db2、sqlserver等关系型数据库不同，它是一个NoSQL数据库（非关系型数据库） Hbase的表模型与关系型数据库的表模型不同： Hbase的表没有固定的字段定义； Hbase的表中每行存储的都是一些key-value对 Hbase的表中有列族的划分，用户可以指定...

Posted by Mr Chang on April 8, 2018

zookeeper

"分布式应用程序协调服务"

介绍 ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。 ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。 ZooKeeper...

Posted by Mr Chang on April 7, 2018

spring-cloud-config-client-refresh-bus-rabbitmq

"Spring Cloud Config为分布式系统中的外部配置提供服务器和客户端支持"

创建 Spring Cloud Config客户端 创建springboot工程，引入依赖 <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artif...

Posted by Mr Chang on April 6, 2018

spring-cloud-config-server-git

"Spring Cloud Config为分布式系统中的外部配置提供服务器和客户端支持"

Spring Cloud Config Spring Cloud Config为分布式系统中的外部配置提供服务器和客户端支持。 使用Config Server，您可以在所有环境中管理应用程序的外部属性。 客户端和服务器上的概念映射与Spring Environment和PropertySource抽象相同，因此它们与Spring应用程序非常契合，但可以与任何以任何语言运行的应用程序一起使用...

Posted by Mr Chang on April 5, 2018

spring-cloud-turbine

"Turbine是聚合服务器发送事件流数据的一个工具，用来监控集群下hystrix的metrics情况。"

Turbine 从个人实例看，Hystrix数据在系统整体健康方面不是非常有用。Turbine是将所有相关/hystrix.stream端点聚合到Hystrix仪表板中使用的/turbine.stream的应用程序。个人实例位于Eureka。运行Turbine就像使用@EnableTurbine注释（例如使用spring-cloud-starter-turbine设置类路径）注释主类一样简...

Posted by Mr Chang on April 4, 2018

hadoop Hive

"就是一个利用HDFS存储数据，利用mapreduce运算数据的数据仓库工具"

HIVE 基本概念 在真实生产中，数据处理的需求量非常多，如果对每个需求都需要开发一个mapreduce程序来实现，则开发的成本代价太高，开发的周期很长； 所以，急需要一种工具，能够快速生成mapreduce程序，则可以极大地降低开发成本，降低对开发人员的技术难度要求，极大缩减项目开发周期； HIVE就是这么一个神器！！！ 它可以让你把你的数据文件 “映射”成一个表，然后还可以让你输入...

Posted by Mr Chang on April 4, 2018

hadoop hdfs java代码

"分布式文件系统，可以存储海量文件"

hdfs的特性 hdfs是一个分布式系统，用户存储的文件被切块后存储在N台DATANODE服务器上； 每一个文件的块信息及具体存储位置由NAMENODE记录 文件的切块默认大小是：128M 文件的默认副本数量：3 参数可以配置在客户端的什么地方？ 可以配置在客户端的hadoop安装目录的配置文件hdfs-site.xml中； 可以在客户端的程序中设置； Java API ...

Posted by Mr Chang on April 4, 2018

hadoop MAP REDUCE

"分布式运算编程模型"

MAP REDUCE 一个分布式运算程序，往往需要分成多个阶段，最基本应该分2个阶段： 阶段1：读数据，拆分数据 阶段2：聚合数据 什么是MAP REDUCE 两个角度： 角度1：MAP REDUCE是一种分布式运算编程模型 它将整个运算逻辑分成两个阶段： 阶段1：将数据映射成key:value形式 阶段2：将key:value按相同key分组，对每组聚合运算 之所以这么设计，...

Posted by Mr Chang on April 4, 2018

spring-cloud-hystrix-dashboard

"Hystrix指标数据的可视化面板"

断路器：Hystrix仪表板 Hystrix的主要优点之一是它收集关于每个HystrixCommand的一套指标。Hystrix仪表板以有效的方式显示每个断路器的运行状况。 创建 Hystrix Dashboard 创建springboot工程，引入依赖 <parent> <groupId>org.springfram...

Posted by Mr Chang on April 3, 2018

ABOUT ME

这家伙总以为自己是个天才，实际并不比别人聪明多少！

✉️ mrchang@jetbrains.org.cn

FRIENDS