写点什么

StarRocks Community Monthly Newsletter (Apr)

作者:StarRocks
  • 2025-05-18
    北京
  • 本文字数:2363 字

    阅读完需:约 8 分钟

StarRocks Community Monthly Newsletter (Apr)

版本动态

3.4.3 版本更新

核心功能升级

  • Routine Load 和 Stream Load 新增 Lambda 表达式支持,支持复杂的列数据提取

  • 增强 JSON 数据处理能力,支持将 JSON Array/Object 转为 ARRAY/MAP 类型

  • 优化 information_schema.task_runs 视图查询,新增 LIMIT 支持

性能与稳定性提升

  • 修复查询 ORC 格式 Hive 表时的读取错误

  • 修复查询含 Equality Delete 文件的 Iceberg 表时 RuntimeFilter 无法下推的问题

  • 修复查询队列功能未启用时的超时误触发问题

🔎Release Note: https://docs.mirrorship.cn/zh/releasenotes/release-3.4/

3.4.2 版本更新

功能优化

  • FE 支持优雅退出机制,通过./stop_fe.sh -g命令退出时会:

    向 Load Balancer 返回 500 状态码

    继续执行当前查询直至完成或超时(默认 60 秒)

性能与稳定性提升

  • 修复分区列为生成列时分区裁剪可能失效的问题

  • 修复 concat 函数参数处理导致的 BE 崩溃问题

  • 修复 Broker Load 导入时 ssl_enable 属性不生效的问题

3.3.13 版本更新

功能优化

  1. 审计日志和 QueryDetail 接口新增 FE 内存消耗指标

  2. 优化并发创建表达式分区的策略

  3. 新增存活 FE 节点数的监控指标

  4. information_schema.task_runs 视图支持 LIMIT 下推

  5. 修复多个 CVE 安全问题

  6. 主键表 PUBLISH 阶段支持 Retry 机制

  7. 降低 Flat JSON 的内存占用

  8. information_schema.routine_load_jobs 视图新增 timestamp_progress 列

  9. 增强 LDAP 授权验证机制

  10. AVRO 文件与 Hive 表 Schema 不一致时明确报错

  11. 物化视图新增 excluded_refresh_tables 属性

性能与稳定性提升

  1. 修复 Flat JSON 不支持 get_json_bool 函数的问题

  2. 修复 SHOW AUTHENTICATION 语句返回密码的安全问题

  3. 修复 percentile_count 函数返回错误

  4. 修复大算子落盘策略导致的问题

  5. 修复 BE 黑名单后 Stream Load 仍分发任务的问题

🔎Release Note:https://docs.mirrorship.cn/zh/releasenotes/release-3.3/

3.3.12 版本更新

新增功能

  • 新增 percentile_approx_weighted 函数支持

  • 支持修改 Hive Catalog 和 Hudi Catalog 的 Property 配置

  • Paimon Catalog 新增 Manifest Cache 功能

  • Paimon Catalog 支持 SHOW PARTITIONS 操作

  • Paimon Catalog 支持统计信息收集

功能优化

  • 统计信息收集功能多项优化与问题修复

  • 优化建表失败的错误提示信息

  • 增强 Broker Load 的重试机制

  • 提升 array_generate 函数执行效率

性能与稳定性提升

  1. 修复 INSERT INTO FILES 不支持 CSV 分隔符转换的问题

  2. 修复 Iceberg REST Catalog 的若干问题

  3. 修复基于视图的物化视图改写丢失谓词的问题

  4. 修复 Paimon Catalog 读取变更表失败的问题

StarRocks 应用

  1. StarRocks 集群运维工具

贡献者:夏天

项目亮点:

  • 全局监控:一键查看集群核心指标、运行/排队任务及资源隔离状态

    深度洞察:细粒度监控节点资源(CPU/内存/存储)及查询负载

    精准定位:快速追踪特定 SQL 或连接,高效排查问题

项目介绍:https://forum.mirrorship.cn/t/topic/18550

项目地址:https://github.com/chengkenli/StarRocksDevops

  1. StarRocks 权限可视化工具

贡献者:夏天

项目亮点:

  • 批量权限管理:支持 3000+用户权限的集中查看与管理,告别繁琐的逐条 SQL 查询

    快速权限定位:一键检索特定用户/角色的权限明细,提升权限稽核效率

    多 Catalog 支持:适配复杂多 Catalog 环境,实现跨数据源的统一权限视图

项目介绍:https://forum.mirrorship.cn/t/topic/18299/2

项目地址:https://github.com/chengkenli/getu 11

文档动态

本月精选内容

文章精选

迈向云原生:理想汽车 OLAP 引擎变革之路

StarRocks 查询优化器深度解析

从被动救火到主动预防,StarRocks 监控与告警全攻略

RAG 实战|用 StarRocks + DeepSeek 构建智能问答与企业知识库

千万级数据秒级响应!碧桂园服务技术引擎重构智慧社区新标杆

StarRocks 助力首汽约车精细化运营

StarRocks Compaction&内存异常问题深度剖析

如何实现 SQL Server 全库 2000+ 表高效同步至 StarRocks

StarRocks 存算一体集群迁移至存算分离,BE减少25%!

StarRocks问题复盘 Clone RUNTIME_ERROR 及修复

StarRocks Zonemap Index

Flink高性能读写StarRocks内表剖析

Apache Paimon数据湖查询引擎StarRocks

视频精选

【中字教程】数据入湖到可视化:Hudi+MinIO+StarRocks + HiveMetaStore + Apache SuperSet

本月精选活动

  1. StarRocks 社区 2025 布道师计划正式开启

StarRocks 社区 2025 布道师计划正式开启!我们诚邀开发者围绕技术内容创作、演讲分享、社区答疑三大方向参与共建:可以分享你在 AI、湖仓一体、性能优化等场景中的实践,也可以登上 Meetup 或技术峰会的舞台,更可以在论坛和微信群中积极答疑、助力他人。

每月将评选「社区答疑之星」,优秀作品和积分奖励将于 6 月底公布,并收录于社区月报。

参与方式、积分规则及积分商城详情,敬请查阅正文。来领奖啦!StarRocks 社区 2025 布道师计划正式开启


  1. StarRocks 小课堂 | 监控告警全覆盖,别等服务挂了才处理!

4 月 16 日,StarRocks 小课堂邀请镜舟科技 DBA 团队负责人景丹,深入解读监控告警前的核心要点,涵盖:

  • 服务监控 & 故障处理:FE/BE 服务挂起、Schema Change 失败、Compaction 异常等场景的应对方案;

  • 服务可用性监控:Checkpoint 异常、Routine Load 延迟、物化视图刷新失败等问题的排查技巧;

  • 资源 & 查询监控:CPU/内存过载、连接数异常、查询耗时升高等性能瓶颈的优化建议。

告别被动救火,掌握监控主动权

⏬演讲文档:从被动救火到主动预防,StarRocks 监控与告警全攻略

📺视频回放:StarRocks 小课堂| 监控告警全覆盖,别等服务挂了才处理!


本月新晋 Contributor

感谢新朋友们为 StarRocks 社区注入活力!期待你们继续闪耀光芒,与社区共同成长,创造更多精彩!✨🚀


GitHub:https://github.com/StarRocks/starrocks

中文社区官网:https://www.mirrorship.cn/zh-CN/community


用户头像

StarRocks

关注

新一代极速全场景MPP数据库 2020-08-08 加入

StarRocks一直致力于打造世界顶级的新一代极速全场景MPP数据库,帮助企业建立“极速统一”的数据分析新范式,助力企业数字化经营。当前已帮助腾讯、携程、顺丰、Airbnb等超过110家大型用户构建全新的数据分析能力。

评论

发布
暂无评论
StarRocks Community Monthly Newsletter (Apr)_数据库_StarRocks_InfoQ写作社区