2014年10月Reading Notes

Why does my Java process consume more memory than Xmx?

java进程内存消耗会大于我们在-Xmx中指定的值.-Xmx仅仅限制了应用程序使用的heap大小.java进的内存消耗主要包括下面的东东:

Max memory = [-Xmx] + [-XX:MaxPermSize] + number_of_threads * [-Xss]+Other

Other:

java.lang.OutOfMemoryError: Java heap space

heap空间不足.一般加大-Xmx.如果还不足就有可能是内存泄漏了.
java.lang.OutOfMemoryError: PermGen space

permgen空间不足,默认的jvm配置得比较小,需要通过-XX:MaxPermSize加大.动态代码生成技术和容器redeploy资源泄漏也会导致permgen不足
java.lang.OutOfMemoryError: GC overhead limit exceeded

jvm gc行为中超过98%以上的时间去释放小于2%的堆空间时会报这个错误
java.lang.OutOfMemoryError: unable to create new native thread

java没创建一个线程,会占用-Xss大小空间.这个异常有可能是系统内存不足导致.如果系统内存充足,往往是ulimit -u限制了一个用户创建最大线程数造成的.
java.lang.OutOfMemoryError: Requested array size exceeds VM limit

申请的数组大小超过jvm定义的阀值.
java.lang.OutOfMemoryError: request bytes for . Out of swap space?
java.lang.OutOfMemoryError: (Native method)

本文罗列了20个影响伸缩性的瓶颈

Two-Phase Commit

两阶段提交需要等待参与方确认,延时太大.所以我们基本上使用best-effort 1pc+业务上的重试.
Insufficient Caching

各个层次都需要引入缓存机制,现在我们对browser cache/page cache还做得比较少.
Slow Disk I/O, RAID 5, Multitenant Storage

数据库服务起I/O很关键.如果只做raid建议做raid10.当然加上fushion io之类的加速卡更好.
Serial Processing

服务并行处理我们也还思考得比较少.比如对远程服务进行合理并行处理(可以考虑下java8中的CompletableFuture).对于缓存数据的获取,可以考虑批量获取.
Missing Feature Flags

特性开关,说大点就是服务降级,我们需要却分不同服务的重要等级,适当时候关闭某些服务,保证核心业务正常运行.
Single Copy of the Database
Using Your Database for Queuing
Using a Database for Full-Text Searching
Object Relational Models(orm很好用,但是缺少能hold住他的人)
Missing Instrumentation(需要监控/profile工具)