发表于 | | 阅读次数:
Storm UI对于排查storm使用过程中遇到的问题会很有帮助，但是有些属性的含义不是很明确，虽然都是很简单的概念，如果不知道的话也会很难受。 先说一点，鼠标只到UI上的标题栏时，是可以看到这一属性的具体属性的，几篇google rank很高的文章，其实就是把这个信息整理了下来。 其实大部分属性都是很直白的，看到名字就知道是什么意思，我在这儿之把一些可能造成困扰的属性列一下，方便大家查问题。 & ...
阅读全文 »

发表于 | | 阅读次数:
最近在使用activemq 的连接池时，发现它存在很严重的内存泄露问题。 通过jmap监控，可以看到java.util.concurrent.locks.ReentrantLock, org.apache.activemq.pool.PooledConnection这两个类占用的空间非常大，而且增长速度也很快。 网上查了一下，正好找到activemq的bug 报告.:https://is ...
阅读全文 »

发表于 | | 阅读次数:
公司使用activemq和camel做消息的分发，之前数据量不是很大，所以一直没怎么考虑效率问题，对camel的工作原理研究也不深。单是最近随着业务量的增加，camel的效率逐渐成了瓶颈，所以根据日志大概了解了camel的工作原理。虽然camel是被嵌入到activemq中，但在工作过程中，camel和activemq其实还是相对独立的。我们在camel中会配置一个到activemq的连接. ht ...
阅读全文 »

发表于 | | 阅读次数:
转自http://leyew.blog.51cto.com/5043877/860255#559183-tsina-1-46862-ed0973a0c870156ed15f06a6573c8bf0 前几天开始学习lda,走了不少弯路，对lda仍然是一头雾水。看了这篇文档以后总算明白lda是干啥的了   LDA（Latent Dirichlet Allocation）学习笔记最近在看LDA ...
阅读全文 »

发表于 | | 阅读次数:
参考http://www.cnblogs.com/xia520pi/archive/2012/05/16/2504205.html   package org.apache.hadoop.examples; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.conf ...
阅读全文 »

发表于 | | 阅读次数:
http://www.cnblogs.com/xia520pi/archive/2012/05/16/2504205.html wordcount运行过程详解 http://www.cnblogs.com/gpcuster/archive/2010/06/04/1751538.html hdfs命令介绍 http://hi.baidu.com/gkf8605/item/d6b8 ...
阅读全文 »