=begin关于Rails中的ActiveJob和ActionMailer==> 创建一个rails后台异步任务# bin/rails generate job ClassName- ClassNameJob < ApplicationJob < ActiveJob::Base==> 重写任务类的实例方法perform(执行)# ClassNameJob#perform(*
原创
2022-02-02 02:53:01
1595阅读
做了一年延云YDB的开发，这一年在使用spark上真心踩了不少坑，总结一下，希望对大家有所帮助。
spark 内存泄露
1.高并发情况下的内存泄露的具体表现很遗憾，Spark的设计架构并不是为了高并发请求而设计的，我们尝试在网络条件不好的集群下，进行100并发的查询，在压测3天后发现了内存泄露。a)在进行大量小SQL的压测过程中发现，有大量的activejob在spark u
做了一年延云YDB的开发，这一年在使用spark上真心踩了不少坑，总结一下，希望对大家有所帮助。spark 内存泄露1.高并发情况下的内存泄露的具体表现很遗憾，Spark的设计架构并不是为了高并发请求而设计的，我们尝试在网络条件不好的集群下，进行100并发的查询，在压测3天后发现了内存泄露。a)在进行大量小SQL的压测过程中发现，有大量的activejob在spark ui上一直处于pending
