当前位置：首页 > news >正文

StarRocks Community Monthly Newsletter (Apr)

news 2025/5/19 5:38:51

版本动态

3.4.3 版本更新

核心功能升级

Routine Load和Stream Load新增Lambda表达式支持，支持复杂的列数据提取
增强JSON数据处理能力，支持将JSON Array/Object转为ARRAY/MAP类型
优化information_schema.task_runs视图查询，新增LIMIT支持

性能与稳定性提升

修复查询ORC格式Hive表时的读取错误
修复查询含Equality Delete文件的Iceberg表时RuntimeFilter无法下推的问题
修复查询队列功能未启用时的超时误触发问题

🔎Release Note： https://docs.mirrorship.cn/zh/releasenotes/release-3.4/

3.4.2 版本更新

功能优化

FE支持优雅退出机制，通过./stop_fe.sh -g命令退出时会：
- 向Load Balancer返回500状态码
- 继续执行当前查询直至完成或超时（默认60秒）

性能与稳定性提升

修复分区列为生成列时分区裁剪可能失效的问题
修复concat函数参数处理导致的BE崩溃问题
修复Broker Load导入时ssl_enable属性不生效的问题

3.3.13 版本更新

功能优化

审计日志和QueryDetail接口新增FE内存消耗指标
优化并发创建表达式分区的策略
新增存活FE节点数的监控指标
information_schema.task_runs视图支持LIMIT下推
修复多个CVE安全问题
主键表PUBLISH阶段支持Retry机制
降低Flat JSON的内存占用
information_schema.routine_load_jobs视图新增timestamp_progress列
增强LDAP授权验证机制
AVRO文件与Hive表Schema不一致时明确报错
物化视图新增excluded_refresh_tables属性

性能与稳定性提升

修复Flat JSON不支持get_json_bool函数的问题
修复SHOW AUTHENTICATION语句返回密码的安全问题
修复percentile_count函数返回错误
修复大算子落盘策略导致的问题
修复BE黑名单后Stream Load仍分发任务的问题

🔎Release Note：https://docs.mirrorship.cn/zh/releasenotes/release-3.3/

3.3.12 版本更新

新增功能

新增percentile_approx_weighted函数支持
支持修改Hive Catalog和Hudi Catalog的Property配置
Paimon Catalog新增Manifest Cache功能
Paimon Catalog支持SHOW PARTITIONS操作
Paimon Catalog支持统计信息收集

功能优化

统计信息收集功能多项优化与问题修复
优化建表失败的错误提示信息
增强Broker Load的重试机制
提升array_generate函数执行效率

性能与稳定性提升

修复INSERT INTO FILES不支持CSV分隔符转换的问题
修复Iceberg REST Catalog的若干问题
修复基于视图的物化视图改写丢失谓词的问题
修复Paimon Catalog读取变更表失败的问题

StarRocks 应用

1.StarRocks 集群运维工具

贡献者：夏天

项目亮点：
- 全局监控：一键查看集群核心指标、运行/排队任务及资源隔离状态
- 深度洞察：细粒度监控节点资源（CPU/内存/存储）及查询负载
- 精准定位：快速追踪特定SQL或连接，高效排查问题
项目介绍：https://forum.mirrorship.cn/t/topic/18550
项目地址：https://github.com/chengkenli/StarRocksDevops

2.StarRocks 权限可视化工具

贡献者：夏天

项目亮点：
- 批量权限管理：支持3000+用户权限的集中查看与管理，告别繁琐的逐条SQL查询
- 快速权限定位：一键检索特定用户/角色的权限明细，提升权限稽核效率
- 多Catalog支持：适配复杂多Catalog环境，实现跨数据源的统一权限视图
项目介绍：https://forum.mirrorship.cn/t/topic/18299/2
项目地址：https://github.com/chengkenli/getu 11

文档动态

【文档体验】：新增功能成熟度标签【试验性】以及【Beta】。
【数据湖】：新增文档为 AWS S3 表创建 Iceberg REST Catalog。
【管理手册】

更新文档存算分离集群 Compaction。

新增/优化部分 FE/BE 配置项描述。
【参考手册】：优化部分 SQL 及函数参考文档的示例。

本月精选内容

文章精选

迈向云原生：理想汽车 OLAP 引擎变革之路

StarRocks 查询优化器深度解析

从被动救火到主动预防，StarRocks 监控与告警全攻略

RAG 实战｜用 StarRocks + DeepSeek 构建智能问答与企业知识库

千万级数据秒级响应！碧桂园服务技术引擎重构智慧社区新标杆

StarRocks 助力首汽约车精细化运营

StarRocks Compaction&内存异常问题深度剖析

如何实现 SQL Server 全库 2000+ 表高效同步至 StarRocks

StarRocks 存算一体集群迁移至存算分离，BE减少25%！

StarRocks问题复盘 Clone RUNTIME_ERROR 及修复

StarRocks Zonemap Index

Flink高性能读写StarRocks内表剖析

Apache Paimon数据湖查询引擎StarRocks

视频精选

【中字教程】数据入湖到可视化：Hudi+MinIO+StarRocks + HiveMetaStore + Apache SuperSet

本月精选活动

StarRocks 社区 2025 布道师计划正式开启

StarRocks 社区 2025 布道师计划正式开启！我们诚邀开发者围绕技术内容创作、演讲分享、社区答疑三大方向参与共建：可以分享你在 AI、湖仓一体、性能优化等场景中的实践，也可以登上 Meetup 或技术峰会的舞台，更可以在论坛和微信群中积极答疑、助力他人。

每月将评选「社区答疑之星」，优秀作品和积分奖励将于 6 月底公布，并收录于社区月报。

参与方式、积分规则及积分商城详情，敬请查阅正文。来领奖啦！StarRocks 社区 2025 布道师计划正式开启

StarRocks 小课堂 | 监控告警全覆盖，别等服务挂了才处理！

4 月 16 日，StarRocks 小课堂邀请镜舟科技 DBA 团队负责人景丹，深入解读监控告警前的核心要点，涵盖：

服务监控 & 故障处理：FE/BE 服务挂起、Schema Change 失败、Compaction 异常等场景的应对方案；

服务可用性监控：Checkpoint 异常、Routine Load 延迟、物化视图刷新失败等问题的排查技巧；

资源 & 查询监控：CPU/内存过载、连接数异常、查询耗时升高等性能瓶颈的优化建议。

告别被动救火，掌握监控主动权

⏬演讲文档：从被动救火到主动预防，StarRocks 监控与告警全攻略

📺视频回放：StarRocks 小课堂| 监控告警全覆盖，别等服务挂了才处理！