必需要提前说明下：不建议使用自定义的Filter。所有的Filter都是在服务端生效：就是说需要将自定义的Filter封装为jar，上传到HBase的类路径下，并重启HBase使之生效。对于生产环境的
[阅读更多...]-
HBase自定义Filter
-
通过HA访问Hdfs获取ActiveNode
通过HA访问Hdfs的时候如何获取到活跃节点是一个稍稍有些麻烦的事情。 目前使用过两种方案：一是通过webhdfs接口逐一访问测试，找到状态为可用的节点；一是在zookeeper上直接获取当前活跃的节
[阅读更多...] -
HBase RowKey设计
热点现象 HBase中的记录行按行键的字典顺序进行排序。这种设计有利于扫描（scan）记录。因此我们可以合理的设计行键，将相关的行或者需要一起读取的行放得靠近一些。不过设计得不好的行键也是热点现象的常
[阅读更多...] -
魔术师or建筑师
前段时间（额，至少是六个月前）接手了一个应用。看了一圈代码心里满是郁闷。应用要处理的事情很简单，但是代码一点儿也不简单。给人的感觉就是为了要使用java8的一个特性而生生将程序扭曲成了一个奇怪的东西。
[阅读更多...] -
使用sbt-assembly提示unresolved dependency
在使用sbt-assembly打包的时候遇到失败。报的错误信息如下： 疑惑了好久。 后来在StackOverflow找到了说明。这个问题是scalaVersion导致的。sbt在build应用的时候会
[阅读更多...] -
HBase Shell整理
简单整理了下HBase Shell的常见命令。 version 查看HBase版本。 status 查看HBase集群的状态。 create 创建表。建表时需要指定表名及列族的名称。 list 列出H
[阅读更多...] -
解决Gson 处理Map将整型处理为浮点型的问题
gson一直是我用着非常得心应手的json处理工具。但是最近遇到了一个坑，就是在处理java.util.Map型json字符串的时候会把整型转为浮点型。 示例程序如下： 执行结果如下： 原因在于jso
[阅读更多...] -
Hello Akka
Akka是一个工具，用来在JVM上构建高并发、分布式、容错的事件驱动的应用。Akka支持java和scala两种语言。Akka最强大的一个特性是使用了并发Actor模型。 这一次本文会同时使用java
[阅读更多...] -
需要class,interface或enum
引入github上的一个项目后在编译时收到了“需要class,interface或enum”这样的错误。就像下图： 图片是我随便找的，不过错误是一样的。 这样的错误通常是由编码问题导致的，只需要修改文
[阅读更多...] -
URI has an authority component
在sbt的repositories中添加了本地的maven仓库，像这样子： 不过在执行时收到了如下的错误提示： 修改起来也比较简单，只需要这样设置即可： 在file://后面多添了一个斜杠。
[阅读更多...]