网站首页 > 经典故事 正文
StarRocks比较吃内存,引起内存飙升的原因主要有两个方面:
一是大SQL查询,扫描数据较多;
二是大数据量的导入,导致数据版本比较多,做数据整理合并的时候消耗内存。
数据导入是否正常
查看StarRocks监控报表(StarRocks可以接入PromeTheus),compaction score分数如果低于100,说明合并压力不大;如果分数过高,说明导入任务比较多,数据版本比较多。
锁定大SQL
可以分别通过be和fe的日志来查找大sql。
1、搜索BE日志
以关键字PeakMemoryUsage搜索be日志,然后排序,找到内存使用最大的的那一行,然后再回去找对应的fragment。
grep PeakMemoryUsage be.INFO.log | grep GB | sort -t: -k 2 -n -r
grep "PeakMemoryUsage: XX GB" -C 10 be.INFO.log
2、搜索FE日志
State=EOF|Time=84|ScanBytes=93976216|ScanRows=287875|ReturnRows=15|StmtId=6356953|QueryId=00176834-f469-11ec-834b-3c9d56e02d9e|IsQuery=true
这是一段fe的日志,其中State有两个状态,一是EOF,一是ERR。
如果是ERR,查找Time耗时大于5分钟的(跟配置的最大查询时间有关);如果是EOF,查找ScanBytes比较大的。
猜你喜欢
- 2025-07-28 世界上只有七辆,有史以来最漂亮的阿尔法·罗密欧
- 2025-07-28 Chuck Taylor All Star II全新配色 Converse 2016 春季系列
- 2025-07-28 情人节数码礼物重在“情”(情人节送什么礼物给情人最好)
- 2025-07-28 Doris Vs. Starrocks(六):SSB-100宽表压测对比,还是打不过?
- 2025-07-28 欧阳娜娜上脚示范!Converse 全新樱花系列刚刚发售
- 2025-07-28 16双超好看的新款运动鞋,国货也很香
- 2025-07-28 双十一怎么购丨Reebok,Jordan服饰纷纷低至3折,冲就完事了
- 2025-07-28 共探浩瀚星际,Crocs卡骆驰携手迪士尼发布全新星球大战联名系列鞋款
- 最近发表
- 标签列表
-
- 和狗狗卡了一晚上 (27)
- 绯闻33天 (27)
- 一见倾心什么时候播出 (31)
- 孟美岐聊天记录 (28)
- 天龙八部之四号男主角 (21)
- 李小璐生子 (30)
- 坏女人有人爱 (29)
- 小栗旬主演的电视剧 (21)
- 陈奕迅与徐濠萦 (20)
- 渡边麻友黑历史 (30)
- 欧美性爱大片 (27)
- 芮甜甜 (23)
- 笔记本cpu报价 (25)
- 说女生黑莲花什么意思 (20)
- 斗罗大陆柳二龙衣服消失图片 (34)
- 李现辟谣与王紫璇恋情 (23)
- 游戏笔记本电脑排名 (20)
- 男人喜欢怎样接吻 (20)
- 黄瓜断在里面了 (20)
- 白冰冰之女白晓燕 (21)
- 鸵鸟女孩恐怖 (21)
- 九九歌 (20)
- 刺青爱人 (25)
- 爱德华八世 (33)
- 午夜成人剧场 (26)
