暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

Vertica 24.3.x版本新功能

simonchiang 2024-08-29
237

0. 总结

  1. 数据加载增强
    • 改进了从 SQS 自动加载的功能,允许多个数据加载器从同一个 SQS 队列读取数据,并且提供了更多控制加载时间和频率的选项。
  2. 数据库管理
    • 引入了 VCluster CLI,这是一种现代化的数据库管理工具,取代了 admintools 实用程序。它通过 REST API 与 Vertica 节点通信,使其更适合容器化环境。
  3. Eon 模式
    • 支持多个公共存储位置,允许将数据库对象分配到特定的存储位置。
  4. OpenText 核心分析数据库 (OTCAD)
    • 在 AWS 上运行的托管数据库服务,旨在简化数据管理并提供强大的分析和报告工具。支持第三方应用程序和 VerticaPy 进行机器学习。
  5. 大规模集群
    • 管理控制台现在支持在 AWS 上创建最多 120 个节点的集群,并且可以配置资源设置以改善集群管理性能。

1. 数据加载

1.1 改进了从 SQS 自动加载的功能

当将数据加载器与 SQS 结合使用时,Vertica 会持续轮询所有具有至少一个活动数据加载器的 SQS 队列,并将 SQS 消息收集到内部队列中。
数据加载器依次从此内部队列读取。
这种分离允许 Vertica 在控制加载器执行频率的同时以 SQS 生成消息的速度接收消息。

现在可以从同一个 SQS 队列读取多个数据加载器。

定义自动数据加载的 SQS 触发器时,您可以设置参数来控制加载的时间和频率。请参阅CREATE DATA LOADER

您现在可以使用ALTER DATA LOADER来更改或删除触发器。

有关详细信息,请参阅自动加载SQS 集成

2. 数据库管理

2.1 集群

您现在可以使用现代化的 VCluster CLI(或vcluster),即现有admintools实用程序的后继者来管理您的数据库。

VCluster CLI 与 Vertica 安装捆绑在一起,并通过利用节点管理代理HTTPS 服务提供的 REST API 与 Vertica 节点通信,这使其与容器化环境兼容并且通常更加用户友好。

有关所有命令的详细信息和示例,请参阅使用 VCluster 进行数据库管理

vcluster有关用于常见管理任务的扩展示例,请参阅常见管理任务

3. Eon 模式

3.1 多个公共存储地点

Eon Mode 数据库现在支持多个公共存储位置。您可以使用CREATE LOCATION函数将公共存储位置添加到数据库,然后使用SET_OBJECT_STORAGE_POLICY函数将数据库对象分配给其中一个存储位置。

4. OpenText 核心分析数据库

4.1 关于 OpenText 核心分析数据库 (OTCAD)

OpenText Core Analytics Database (OTCAD) 在 AWS 上运行,并为您的数据管理需求提供托管数据库服务。OTCAD:

  • 管理您的数据并帮助您避免数据仓库或数据湖环境的日常维护。
  • 为数据分析师和商业智能专业人士提供强大的分析和报告工具,帮助从大型数据集中获取有效的洞察。
  • 使用在 Kubernetes 上运行的 Vertica 作为数据仓库或数据湖的主引擎。

OTCAD 是一种云解决方案,可提高 Vertica 分析数据库的速度和可扩展性,而无需管理硬件。使用 OTCAD 可以安全地构建数据库,并将其扩展到云中的大量数据。

OTCAD 支持使用 VerticaPy 进行机器学习,用于数据科学和 AI 驱动的数据科学应用。它还支持以下第三方应用程序:

  • IBM Cognos BI
  • Grafana
  • Informatica PowerCenter
  • DbVisualizer
  • DBeaver
  • Domino Data Lab

要访问 OTCAD,请联系您的销售代表或联系我们

5. 提供大规模集群

5.1 提供大规模集群

管理控制台默认可以创建最多 60 个节点的集群。仅在 AWS 云上,您可以将最大节点限制增加到 120。
要将最大节点限制增加到 120,请修改文件中的这 2 个属性/opt/vconsole/config/console.properties并重新启动 MC:

1. cloud.large.cluster.mode = true
2. cloud.large.cluster.mode.max.limit = 120

如果 MC 集群管理速度变慢,您可以在 MC DB 设置页面中增加默认资源池配置:

  • JVM(2->4 GB)
  • 系统查询(1GB -> 2GB)

二维码.png

最后修改时间:2024-09-02 09:51:55
「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

文章被以下合辑收录

评论