大家好,今天小编为大家分享关于gg修改器一定要用root么_gg修改器需要root的内容,赶快来一起来看看吧。
上游系统通过公司rpc框架调用我们系统接口超时(默认超时时间为100ms)数量从50次/分突然上涨到2000次/分,在发生变化时间段里我们的系统也没有做过代码变更,但上游系统的调用确发生了变化。由于处于主要链路上,sre同学找过来询问原因,所以开始了问题排查。
排查rpc超时的基本思路是这样的:
1) 服务端处理确实超时
2) 服务端或者客户端由于某种原因卡住
a) 磁盘清理
b) tr线程池
c) gc
d) 网络
因为在发生问题时上游调用其他系统的服务并发生类似的情况,所以可以认为是服务端出现了问题而不是客户端。
rpc框架在有一个traceId,用于标识请求。同一个traceId在请求端的耗时是一百多毫秒,但是在接收端的耗时只有2-3ms,抽查了几天里的多个请求都是这样的情况请求端的耗时远大于接收端的耗时。这样就排除了超时是由服务端处理引起的。
线上系统通常会打印一些日志,用于记录系统的运行情况,方便问题排查和进行监控,当这些日志的数量累计到一定量时,会进行磁盘清理。在磁盘清理期间,会对IO有较大的影响。通过查看磁盘清理日志,发现磁盘清理时间和调用超时时间并不匹配;另外磁盘清理是偶发性的,但是上游系统调用超时是持续性的,因而磁盘清理导致超时也可以排除。
rpc框架采用的是NIO方式进行客户端和服务端进行通讯,在服务端会有一个线程池处理到达的请求,查看了对应的线程池日志,发现线程池的队列中出现堆积的次数一天只有几次而已,但请求端调用服务出现的超时问题会连续几个小时出现的。因而超时问题由线程池的配置引起也可以排除。
我们的服务是多地多机房部署模式,从调用方最远的机房到我们这边机房网络耗时大概为25ms,来回就是50ms,加上服务端的处理时间,客户端的请求总时间应该在60ms左右,但是现在的总耗时在100ms以上,说明网络也不是该问题的主要原因。
对上游系统调用我们系统超时的机器进行汇总,发现超时的请求主要集中在内存为4g的机器上,而10g的机器出现超时的情况很少,因而对4g和10g机器的gc进行了分析,发现二者有很大的不同:
从上面的表格可以看到,10g机器的新生代清理效率是4g机器的新生代清理效率20多倍,4g机器新生代的清理耗时过长。初步判断,请求方访问超时应该和4g机器的young gc执行时间过长可能有关。
jvm中的young gc过程大致分为如下几个步骤:
1) 存活对象标注
2) 存活对象从Edge区拷贝到Survivor 1,重置指针
3) 清理Edge区和Survivor 2
4g和10g机器都是4核,二者的cpu的主频和一级二级缓存是相同的,从理论上讲二者的清理效率应该是相等的,但现在4g机器清理的内存的性能却比10g清理却相差如此多,说明问题可能发生在存活对象标注上。同时young gc过程中的存活对象标注是要STW,这个阶段jvm会对外停止响应,很有可能是因为这个STW导致响应超时。
Jvm中的young gc是从GC roots开始的,GC root作为tracing GC的“根集合”,主要包含:
1) Class – 由系统类加载器(system class loader)加载的对象,这些类是不能够被回收的,他们可以以静态字段的方式保存持有其它对象。我们需要注意的一点就是,通过用户自定义的类加载器加载的类,除非相应的java.lang.Class实例以其它的某种(或多种)方式成为roots,否则它们并不是roots,.
2) Thread – 活着的线程
3) Stack Local – Java方法的local变量或参数
4) JNI Local – JNI方法的local变量或参数
5) JNI Global – 全局JNI引用
6) Monitor Used – 用于同步的监控对象
7) Held by JVM – 用于JVM特殊目的由GC保留的对象,但实际上这个与JVM的实现是有关的。可能已知的一些类型是:系统类加载器、一些JVM知道的重要的异常类、一些用于处理异常的预分配对象以及一些自定义的类加载器等。然而,JVM并没有为这些对象提供其它的信息,因此就只有留给分析分员去确定哪些是属于”JVM持有”的了。
4g机器和10g机器运行的代码都是相同,因而能够导致gc root不同个地方应该是第二和第六项。
对4g机器的线程进行了dump,在zprofile中进行了下分析,分析结果显示存在线程阻塞的情况,而后定位到所有的线程阻塞都是在一个发送消息的方法上,而这个方法是synchronized的,由于synchronized导致了调用线程获取不到锁的时候发生了阻塞。
这个方法的作用是发送消息,但是为了减少消息发送的次数,在内部进行了消息的合并,当消息内容达到一定量时才发送(现在设定的是3k),整体流程如下
这其实是一个简单的流程,但由于会存在多个线程对存储消息的list和存储消息体大小的size进行写操作,特别是对list的操作时,会存在有些线程在向list中添加数据,而有些线程间接触发了arraylist的clear操作,这样就会报ConcurrentModificationException
。同时为避免在计算消息体大小时多线程操作引起的计算值比实际值小的问题就给这个方法用了synchronized 关键字加锁让其顺序操作。
主要的修改有3个
1) 把用arraylist存储消息体采用ConcurrentHashMap,map中的key是一个uudi,value是消息体本身。从arraylist改为ConcurrentHashMap,可以大大增加并发性能。
2) 采用AtomicInteger来保存当前map中消息内容的大小。
3) 当map中的消息体总大小到达阈值后,先将当前map中的所有的key取出,然后将map中的数据封装到一条消息中发送出去,将当前map中消息体的大小置为0,而后for循环删除已成功发送的key。
优化后线程阻塞情况不存在。
报错从之前的近2000/分回到了50/分。
问题虽然得到了解决,但是线程阻塞和young gc耗时的确切关系还是没有不太清楚,需要后续继续了解,也看哪位大神给解释下。
以上就是关于gg修改器一定要用root么_gg修改器需要root的全部内容,感谢大家的浏览观看,如果你喜欢本站的文章可以CTRL+D收藏哦。
手动挡停车场GG修改器中文版,手动挡停车场GG修改器中文版:让你停车无忧 大小:18.19MB1,172人安装 停车是驾驶员经常要面对的难题之一,特别是对于初学者,更是令人头疼。想象一下,在……
下载gg修改器中文下载官网,我们有幸拥有的神器gg修改器中文下载官网 大小:5.84MB1,034人安装 对于广大游戏爱好者来说,随着游戏玩法和游戏内设备的不断升级,越来越多的游戏玩家……
下载gg修改器中文官网2019_gg修改器中文官网下载 大小:10.39MB2,080人安装 大家好,今天小编为大家分享关于gg修改器中文官网2019_gg修改器中文官网下载的内容……
下载gg修改器是否要root_gg修改器可以 大小:7.21MB2,078人安装 大家好,今天小编为大家分享关于gg修改器是否要root_gg修改器可以的内容,赶快来一……
下载gg修改器无需root权, gg修改器无需root权:让游戏更加精彩 大小:5.63MB795人安装 现在的手机游戏越来越火,但是玩游戏也面临着很大的挑战。游戏中的金币、钻石、经验……
下载gg修改器root最新下载,为什么GG修改器root是最好的选择? 大小:11.82MB1,027人安装 为什么GG修改器root是最好的选择? 在这个数字化时代,手机已成为人们日常生活中不可……
下载gg修改器 游戏修改器,GG修改器让你的游戏更加轻松 大小:11.71MB749人安装 随着网络游戏的普及,各种游戏修改器也变得越来越多。其中GG修改器就是一个非常强大……
下载gg修改器最新教学,gg修改器最新教学:让游戏变得更加有趣 大小:13.74MB1,096人安装 GG修改器是一款广为人知的修改游戏工具,近期又发布了最新的教学,无疑是吸引了许多……
下载gg修改器怎么没有代码中文_gg修改器怎么调成中文 大小:7.68MB2,034人安装 大家好,今天小编为大家分享关于gg修改器怎么没有代码中文_gg修改器怎么调成中文的……
下载手机gg修改器中文官网,手机gg修改器中文官网:为你打造绝佳游戏体验 大小:6.51MB1,008人安装 你是否曾经因为游戏中的某些bug或者限制而感到困扰?你是否曾经为了游戏中的某些弱……
下载