ITeye博客

求贤若渴, 礼贤下士

ahuaxuan · 共 88 篇文章

过滤字符的性能调优?挤一挤还是有的

/* *author: ahuaxuan(张荣华) *date: 2010-05-28 */ 起因 前一段时间和其他系统集成, 另外一个系统对某个参数有一个限制,需要将字符串中的特殊字符过滤掉, 由于需要过滤的字符是对方定义的, 所以对方直接把他们系统中的过滤的代码给我了, 代码如下: private String escape(String s) { if (s == null) { return null; } StringBuilder sb = new StringBuilder(s.length()); for (int i = 0; i < s.length(); i++) { …

2010-05-29 05:54 · java随想 · 评论(4)

内存充裕下的OOM (二), StringBuilder和均摊分析

/* *author: ahuaxuan *date: 2010-05-14 */ 介绍: 在前面的一篇文章中 http://ahuaxuan.iteye.com/blog/662629 , ahuaxuan遇到了一个在内存相对充裕的情况下发生OOM的场景,具体的文章见: 然后时隔不久,该问题再次出现,但是出现在不同的场景下,现象有非常雷同之处.但是这次更离谱: 在某个他人的项目中, eden区还有300m空间的时候发生了OOM. 而在前面一篇文章中,ahuaxuan揭示了在jackrabbit原有的搜索模块中出现的问题,其中主要的问题是大的char[]对象需要扩容的时候,虽然在这个项目中和…

2010-05-19 01:37 · 算法和数据结构 · 评论(21)

内存充裕下的OOM (一) 令人惊叹的rootcause

/* @author: ahuaxuan @date: 2010-4-30 / 在内存充裕的情况下的OOM 理解本文的前提是理解JVM的内存模型:包括 perm, old, young(eden, from(s0), to(s1)), 然后理解young中的垃圾搜集算法(拷贝算法,尤其是eden, from(s0), to(s1)它们分别扮演什么样的角色,为什么任意时间中from和to中必须要有一个是空的), old里的垃圾搜索算法(常见的有:标记压缩算法). 正文: 最近一台测试服务器抛出了OOM的错误,本着不放过一切问题的原则,ahuaxuan把这个OOM研究了一番,最后得出了令人意想不…

2010-05-10 04:05 · 算法和数据结构 · 评论(12)

从问题看本质: 研究TCP close_wait的内幕

/* * @author: ahuaxuan * @date: 2010-4-30 */ 最近遇到的一个关于socket.close的问题,在某个应用服务器出现的状况(执行netstat -np | grep tcp): tcp 0 0 10.224.122.16:50158 10.224.112.58:8788 CLOSE_WAIT tcp 0 0 10.224.122.16:37655 10.224.112.58:8788 CLOSE_WAIT tcp 1 0 127.0.0.1:32713 127.0.0.1:8080 CLOSE_WAIT tcp 38 0 10.224.122.16…

2010-05-01 14:11 · 其他技术 · 评论(7)

RPC or noRPC,这是个问题

/** * author:ahuaxuan * date:2010-04-21 */ 修改,避免引起混淆,特别说明本文中的非RPC方式其本质也是RPC,只是非RPC由服务器端定义好序列化规则和协议,然后让调用者自己去实现,而本文中的RPC指服务提供者提供Jar,客户端可以直接调用接口.不需要考虑到网络,协议,序列化算法. 很多公司都会遇到应用集成的一些问题,其中一项就是RPC的问题. 企业内部应用集成(请求应答模式)的通信一般有方式,一种是RPC方式,另外一个是非RPC方式. 先说说非RPC方式的实现:比如说A-Y这25个应用依赖于Z这个应用,那么Z应用将丢一个开发文档给A-Y个应用的开发人…

2010-04-01 08:31 · 其他技术 · 评论(80)

深入浅出cassandra 4 数据一致性问题概述

/** *author:ahuaxuan(张荣华) *date: 2010-2-28 */ 在上一篇文章,ahuaxuan和大家简单的熟悉了cassandra的集群环境的部署,接下来要做的就是搞清除这种部署模型的的理论依据. 理论依据一,数据一致性和W R N 首先简单解释一下数据一致性(这个问题是老生常谈的问题,任何一本应用开发的书上都有它的描述) 所谓的一致性其实就是事物ACID中的C: 事务在完成时,必须使所有的数据都保持一致状态。在相关数据库中,所有规则都必须应用于事务的修改,以保持所有数据的完整性。事务结束时,所有的内部数据结构(如 B 树索引或双向链表)都必须是正确的。 (但是一…

2010-03-20 10:00 · cassandra · 评论(5)

深入浅出cassandra 3 例子背后的模型

/** * author: ahuaxuan(张荣华) * date 2010-2-25 */ 深入浅出cassandra 3 例子背后的模型 在上一篇文章中,ahuaxuan和大家一起写了一个cassandra的insert和get的例子。从这个例子中我们也得知了操作cassandra的最基本流程, 除此之外我们也初步了解了cassandra中的数据模型,但是只是肤浅的了解了一下,那么我们接着上一篇的话题,继续阐述这个问题。 在我们操作数据的代码中: String table = "Keyspace1"; String row = "row007"; ColumnPath col = ne…

2010-02-25 19:51 · cassandra · 评论(4)

深入浅出cassandra 2 第一个可以运行的例子

/** * author: ahuaxuan(张荣华) * date 2010-2-25 */ 深入浅出cassandra 2 第一个可以运行的例子 在上一篇文章中,我们成功的建立了一个可以cassandra的实例,同时也让它成功的运行起来,下面的工作就是让我们来简单的操作一下这个 号称分布式的号称第二代的数据库系统。 本文主要关注两个部分, 1. 怎么写一个最简单cassandra的sample 2. 怎么去分析这个最简单的sample背后隐含的含义 步骤一: 首先我们创建一个工程,然后将cassandra/lib目录下的包,导入到我们的工程中。 步骤二: 创建一个类,内容如下: /** …

2010-02-25 19:49 · cassandra · 评论(8)

深入浅出cassandra 1 安装

/** * author: ahuaxuan(张荣华) * date 2010-2-25 */ 深入浅出cassandra 1 安装 cassandra是什么,套用官方介绍,cassandra是高可扩展性的第二代分布式数据库。背后的理论依据是amazon的dynamo和google的bigtable. 所以要完全的,深入的理解cassandra,那我们就必须深入的理解dynamo和bigtable这两个理论基础。当然在后续的文章中,ahuaxuan会和大家一起来深入并研究这两个理论。 学习一个陌生的技术,最重要的第一步就是先让它给运行起来,这个和ahuaxuan写深入浅出jackrabbit…

2010-02-25 19:47 · cassandra · 评论(4)

深入浅出jcr之16 该死的RMI,我们需要HTTP+简单RPC协议

从这篇文章开始,ahuaxuan不再详细描述jackrabbit中的实现原理,而是把注意力放在jackrabbit中做的不好的地方,不敢说是批判,但是有些技术上的决策错误还是值得拿出来讨论讨论的。其中一个就是jackrabbit的客户端和jackrabbit server的通信方式--RMI。围绕这个问题我们可以展开一系列的讨论。 本文分为几个部分 1 为什么要抛弃RMI 2 为什么要选择基于HTTP的RPC协议 3 展望未来 RMI这个东西原理之前很多人搞不清楚,因为sun的RMI实现源码虽说开源了,但是却很难找到,很久之前,ahuaxuan经过一番折腾之后终于找到了它的源代码,翻了一下源…

2009-12-12 13:22 · jcr-jsr170 · 评论(3)

工作流引擎在视频网站架构中的应用

如果对工作流引擎没有了解过的同学可以先看前一篇文章: 土制状态机在工作流引擎中的应用 http://ahuaxuan.iteye.com/blog/505124 /** @author: ahuaxuan(张荣华) @date: 2009-11-23 */ 在一个视频网站中,用户从上传一个视频,一直到视频能够正确的被其他用户下载观看,其中经历了一个很长的流程。 下面ahuaxuan来画一张图来表示这个简要的流程,但是实际上不同视频网站由于其架构的不同,可能也会导致流程图中有些环节的增加或者减少。 从上面这张图上,我们可以看到的是一个简要的视频处理流程,而这个流程理论上来将并不是一成不变的,它…

2009-11-23 22:35 · 算法和数据结构 · 评论(2)

土制状态机在工作流引擎中的应用

/** @author : ahuaxuan @date 2009-10-27 */ 很早之前(应该是一年以前),ahuaxuan在用dfa实现文字过滤一文中使用确定有限自动机实现了词典的高速查询。其实在当时那段时间里,由于对状态机有了一定的研究,ahuaxuan也触类旁通的理解了工作流引擎的核心体制。于是当时就用python写了一个小巧的工作流引擎的示例,在这之前ahuaxuan没有看过任何工作流引擎的实现,该实现纯属思维的自我延伸。 现在我来说说我的实现。 状态机的本质是状态的迁移,即从A状态+某个动作===》B状态。到这里我们还要来看看这张图。 从这张图中我们可以看到,状态(大写字母)…

2009-10-27 19:20 · 算法和数据结构 · 评论(2)

诫子书+朱子家训

诫子书: 夫君子之行,静以修身,俭以养德。 非淡泊无以明志,非宁静无以致远。 夫学须静也,才须学也。 非学无以广才,非志无以成学。 韬慢则不能励精,险躁则不能治性。 年与时驰,意与岁去,遂成枯落,多不接世。 悲守穷庐,将复何及? 朱子家训: 黎明即起,洒扫庭除,要内外整洁。 既昏便息,关锁门户,必亲自检点。 一粥一饭,当思来处不易;半丝半缕,恒念物力维艰。 宜未雨而绸缪,毋临渴而掘井。 自奉必须俭约,宴客切勿流连。 器具质而洁,瓦缶胜金玉;饭食约而精,园蔬愈珍馐。 勿营华屋,勿谋良田。 三姑六婆,实淫盗之媒;婢美妾娇,非闺房之福。 童仆勿用俊美,妻妾切忌艳妆。 祖宗虽远,祭祀不可不诚;子孙虽…

2009-10-23 14:04 · 生活感悟 · 评论(0)

深入浅出jackrabbit之十五 文档提取优化2.docx

/** *author:ahuaxuan *2009-10-22 */ 在上一篇文章中,我们讲到为什么要优化jackrabbit中的文档提取,同时也分析了进程模型和线程模型在分布式文档提取中的优劣。 在本文中,ahuaxuan将会介绍分布式文档提取的架构模型,以及它在整个非结构化数据库中的地位。 第二部分ahuaxuan将介绍几个用来提取文本的工具,然后将这些工具用在分布式文档提取中,以减轻jackrabbit的负担, 从这个角度看,本文是对上文的补充,这样从原因,到解决方案,以及所用到的技术工具基本上都涉及到了。 一, 分布式文档提取系统的结构模型。 首先来看一张文档提取系统部署的结构模型…

2009-10-22 18:38 · jcr-jsr170 · 评论(12)

深入浅出jackrabbit之十四 分布式文档提取

/** *author:ahuaxuan *2009-09-24 */ 前言: 本来针对jackrabbit这一系列的文章其实都是有顺序的,比如先讲索引的创建,然后讲索引的查询,等等,但是无奈总是有些横生的枝节,这些横生的枝节又让ahuaxuan有了一些新的想法。所以只能将这篇文章写到后面来了。 切入正题,今天这篇文章其实是对前面文本提取的一个补充。前面讲到文本提取的逻辑,逻辑有点小复杂,但是复杂的逻辑并不是这篇文章的关键,今天的话题是进程模型和线程模型,也许童鞋们会感到非常的奇怪,一个jackrabbit居然扯到了线程模型进程模型,还真能扯啊,但是你别说,ahuaxuan确实有这样的想法,…

2009-09-24 12:20 · jcr-jsr170 · 评论(0)