分类: J2EE | IT宅-帅旋的专业知识分享

专栏推荐

架构解码：模式与实践

JVM速成手册

网络协议

并发编程

数据结构与算法

重构速查表

MySQL

Redis

洞悉Redis技术内幕：缓存，数据结构，并发，集群与算法

J2EE

Eclipse的Javascript校验卡住的问题

使用的eclipse版本：eclipse-jee-kepler-SR1-win32

Eclipse

作者：arthinking

发表于 2014-07-15

分类于 J2EE

【TODO】几个海量查找和去重的问题

// TODO 一个文本中存了10亿条数据，有顺序，怎样最快取出指定的数据？（利用B+树，类似数据库索引）一个文本中存了100亿行数字，无序的，取出前100个数字。（hash分成小文件，然后分别构造大小为100的最小堆，对文件进行处理。文件映射内存技术，快速排序，不考虑稳定性，归并排序，考虑稳定性，堆排序）有1亿条文本，去重。（布隆过滤器，hash分成小文件）

去重大数据

作者：arthinking

发表于 2014-06-15

分类于 J2EE

IKAnalyzer词典占用内存大小分析

这里还是使用搜狗的扩展词库

Java IKAnalyzer Instrumentation 内存

作者：arthinking

发表于 2014-06-09

分类于 J2EE

Java对象内存计算的几种方法

使用system.gc()和java.lang.Runtime类中的freeMemory(),totalMemory(),maxMemory()这几个方法测量Java对象的大小。这种方法通常使用在需要对很多资源进行精确确定对象的大小。这种方法几乎无用等生产系统缓存的实现。这种方法的优点是数据类型大小无关的，不同的操作系统，都可以得到占用的内存。

Java Instrumentation 内存

作者：arthinking

发表于 2014-06-08

分类于 J2EE

IKAnalyzer结合Lucene使用和单独使用例子简单性能测试

IKAnalyzer是一个开源基于JAVA语言的轻量级的中文分词第三方工具包，采用了特有的“正向迭代最细粒度切分算法“，支持细粒度和智能分词两种切分模式。刚开始使用的时候，发现不能支持中文和字母混合的分词，例如：iPhone5s土豪金。后来发现在2012版本，词典支持中文，英文，数字混合词语，并且优化了词典存储，内存更小的占用。支持用户词典扩展定义。为了更好的测试，这里就使用了IKAnalyzer2012_u6这个版本。

IKAnalyzer Lucene 分词

作者：arthinking

发表于 2014-06-02

分类于 J2EE