鸿蒙开发者社区
- 登录/注册
默认
发布时间
热度
原创
精华
当谈起Greenplum 7时，我们在谈什么？之内核篇
Greenplum7在上篇文章中，我们为大家介绍了Greenplum商业版组件的最新近况，下面来具体介绍一下Greenplum7中内核方面都将带来哪些惊喜。由于7版本中的新特性较多，本文将就一些重点特性进行简单介绍，具体细节可以关注《Greenplum7新版本大剧透》的后续直播，原厂工程师将为大家详细讲解内核新特性和原理实现。相关PPT可以前往Greenplum中文社区cn.greenplum.org获取。1基于PostgreSQL12Greenplum一直紧密拥抱PostgreSQL社区，...Greenplum终于把分布式事务讲明白了！
事务处理是数据库系统的核心能力之一，在Greenplum等分布式数据库上实现更为复杂。本文将从四大块内容来为大家讲解Greenplum分布式事务：事务实现原理和WriteAheadLogging（WAL）分布式事务和两阶段提交的原理Greenplum两阶段提交协议的实现Greenplum两阶段提交协议的优化一、事务实现原理和WriteAheadLogging（WAL）事务处理是数据库管理系统的核心功能。数据库管理系统自诞生到现在已经发展了几十年，它能够在各行各业得到如...Greenplum巧用复合索引，优化查询性能
复合索引，也称作多字段索引，是指建立在表的多个字段上的索引，它是数据库系统中广泛支持的索引使用方式，Greenplum也不例外。在之前的文章中，我们已经介绍了Greenplum的默认索引——B树索引。本文将对Greenplum中的复合索引以及相关的最佳实践进行简要介绍。《深入浅出Greenplum内核》系列直播正在进行中，本周五Greenplum原厂内核研发张桓将为大家介绍Greenplum排序算法，欢迎关注。建立测试数据首先我们建立一张测试表：st...Greenplum万字长文，助你掌握数据库排序算法
在《深入浅出Greenplum内核》系列直播的第六场中，Greenplum内核研发张桓为大家详细介绍了Greenplum排序算法，相关视频已上传Greenplum中文社区B站频道。相关PPT请点击文章底部“阅读原文”前往Greenplum中文社区网站（cn.greenplum.org)的下载页面获取。现在让我们通过这篇“万字长文”回顾一下活动精华吧！排序在数据库执行器中扮演了重要的角色，除了显示的ORDERBY语句，数据库的聚集、窗口函数中都存在排序算法的身影。今天...Greenplum听说它是层级数据的处理“神器”！
递归CTE是Greenplum中一个非常强大的功能，它使得Greenplum具有了处理层级数据和图数据的能力。那么，什么是递归CTE呢？递归CTE的名字中虽然包含CTE，但它们的功能，用法和实现都有很大的不同。什么是递归CTECTE的全称是CommonTableExpression，也被称为With语句。CTE更加侧重于SQL的易读性，可以将其看作是一种生命周期更短的临时表，在父查询中可以像引用临时表一样，引用CTE。递归CTE则使SQL增加了递归的语义，可以基于一个...GreenplumGreenplum恢复系统知多少
今天我们将给大家详细解析Greenplum恢复系统。恢复系统对于一个数据库系统是必不可少的一部分。本文将围绕4个部分进行讲述，本文内容如非特殊声明，均基于Greenplum6。恢复系统概述预写式日志简介单节点系统恢复分布式系统恢复首先我们会对恢复系统相关概念和预写式日志进行介绍，接着会介绍单点式的恢复系统，Greenplum在这一点上与PostgreSQL很接近，但由于Greenplum是个分布式数据库系统，因此在例如两阶段恢复等地方和Postg...GreenplumBrin Index在Greenplum 7中的理论与实践 之 堆表上的Brin
引言2022年初，Greenplum7版本将正式GA（具体时间和功能请以最终发布为准）。今年，Greenplum中文社区将和墨天轮社区合作，邀请原厂专家，开展《Greenplum7新版本大剧透》系列直播。第一讲（内核篇，组件篇）中，Greenplum原厂研发总监杨瑜介绍了Greenplum7引入的多个激动人心的新特性和最新开发进展。第二讲中，Greenplum内核研发工程师陈金豹为大家详细解说了BrinIndex在Greenplum7中的理论与实现。本文涵盖了演讲所有精华内...Greenplum不惧宕机，数据库高可用理论与实践
数据库是现代很多与数据相关的程序正常运行的必要组件，数据库的正常运行会直接或间接地影响到程序的可用性，高可用是分布式系统架构设计中必须考虑的因素之一，它通常指，通过设计减少系统不能提供服务的时间。本文将深入了解数据库系统的高可用，并窥探Greenplum是怎样实现高可用的，如何为企业的数据保驾护航。一、高可用简介首先我们介绍一下高可用的环境，下图是一个简单的网络应用结构。用户通过互联网访问网络服务器，网...Greenplum学习分布式事务一致性？这几个重点别忘划
在之前的文章《不惧宕机，数据库高可用理论与实践》中，为大家介绍了数据库系统的高可用理论知识，以及Greenplum是如何实现高可用，为企业的数据保驾护航的。今天我们将在上篇文章的基础上，补充介绍Greenplum事务一致性的几个重点，它们也是Greenplum可以高可用的重要前提和保证。本文将就分布式事务日志在时间线上的顺序，以及事务的提交和可见在代码层面的细节逐一分析讲解。分布式事务日志我们以CREATETABLEt1(iint);为例介...GreenplumBrin Index在Greenplum 7中的理论与实践 之AO表上的Brin
在上篇文章中，我们介绍了堆表上的BrinIndex，包括Brin的优缺点、适用场景、BrinScan、BrinVacuum、BrinStorage等内容。本篇文章将为大家概述Brin在AppendOnlyTable上的实现，并结合一些性能测试帮助的大家更好的理解BrinIndex。1Brin在AppendOnlyTable上的实现对于包括Greenplum在内的擅长于OLAP场景的数据库，Update和Delete的应用场景较少，而sequentialscan的场景非常多。堆表会存在两个问题，第一，由于堆表更擅长于update...Greenplum揭秘！Greenplum并行执行引擎到底是如何工作的？
《深入浅出Greenplum内核》系列直播以每月一场的速度持续推出中。在第一场《架构解读》直播里，我们了解了Greenplum的整体架构、存储管理、索引、查询执行、事务与日志等内容。今天（5月22日），第二场《Greenplum内核揭秘之执行引擎》也顺利播出啦！现在，我们来回顾一下直播演讲内容吧！看完别忘了前往askGP做一下小测试（ask.greenplum.cnexam）巩固一下所学的知识点哦！感谢大家参加Greenplum的直播活动！在《深入浅出Green...Greenplum万字长文，帮你梳理存储引擎之Heap表关键知识点
存储引擎的知识体系非常庞杂，拥有很多分支内容。而其中，Heap表是最为关键的模块之一，包含了众多重要的知识点，本文将为大家介绍其中的一些关键内容，来帮助大家进一步学习和理解Heap表。MVCC机制之前在《GreenplumMVCC并发控制：严格的一致性与极致的性能》中，大家学习了并发控制相关的内容。由于MVCC是存储引擎中非常重要的内容，今天我们再来回顾一下相关要点。MVCC，全称是Multiversionconcurrencycontrol，翻译成中文是...Greenplum要懂Greenplum索引，心里得有B树！
索引是数据库中的重要组件，而B树则是最常见的索引数据结构，同时它也是Greenplum中的默认索引类型。今天我将给大家详细介绍B树索引。本文将涵盖B树的基础知识、B树的存储结构、操作算法、并发控制，相关系统表等知识。B树的基本知识首先和大家介绍一下B树的基础知识。大家一般在大学的数据结构课程中都学过B树，如今回忆起来，很多人都会问，为什么数据库索引经常会选用b树来实现数据库索引呢？Greenplum的B树索引和我们大学课...GreenplumGreenplum MVCC并发控制：严格的一致性与极致的性能
2020的夏天已经接近尾声，《深入浅出Greenplum内核》系列直播也已经成功举办了五场活动，内容覆盖了Greenplum架构、执行引擎、查询优化、B树索引（cn.greenplum.org获取课件），相关视频可前往B站的Greenplum中文社区频道或点击“阅读原文”进行回顾观看。上周五（8月28日)，Greenplum原厂内核研发陈金豹从优缺点、实现细节、和空间重用三个角度深度揭秘了Greenplum的MVCC并发控制。本文将带领我们回顾精华内容。MVCC，全称是Mu...GreenplumGreenplum查询优化解析
本文将主要包括两大部分，第一部分是查询优化器的介绍，第二部分是查询优化的具体处理过程，整个过程将被分为四个阶段：查询树的预处理，扫描连接优化，扫描连接之外的优化，计划树的后处理，我们将在本文中一一展开。首先我们来介绍一下查询优化器是做什么的。对于给定的查询语句，查询优化器会找到“代价”最小的查询计划。这里的“代价”在不同的应用场景会有不同的维度或者是定义，比如可能是找到一个执行时间最短，或者找...Greenplum带你了解Greenplum的锁管理机制
引言数据库系统有多种实现并发控制的机制，而锁作为其中一种实现方式，具有非常重要的作用。在这篇文章中，我们将介绍Greenplum中的锁管理机制是如何实现的。01锁管理概述在Greenplum实现中，针对不同的场景和目的定义了三种锁，分别是自旋锁（Spinlocks）、轻量级锁（LWLocks）和普通锁（Regularlocks，也叫重量级锁）。自旋锁是一种短期持有的锁。如果加锁之后程序指令很多，或者涉及到系统调用，则不适合使用自旋锁。自旋锁...Greenplum新鲜出炉的PGCon2020演讲回顾 ①——全局死锁检测器
5月26日，一年一度的PG开发者大会PGCon2020如约而至。与往年不同的是，受疫情的影响，今年的PGCon采取了线上会议的方式，虽然没有了面对面的交流，但在组织者DanLangille等的精心安排下，会议有了更广泛的受众，干货满满。来自Greenplum原厂的Greenplum内核工程师HubertZhang（张桓）与AsimPraveen合作发表了演讲《DistributedSnapshotandGlobalDeadlockDetector》。在演讲中Hubert通过理论结合实例的方式讲解了Postgres单节点...GreenplumGreenplum查询优化器如何消除外连接揭秘
Greenplum经过多年打磨，以性能卓越，速度快胜任不同类型的查询场景。Greenplum之所以查询跑得块，不仅是因为拥有极致优化的执行引擎和节点间网际传输，更依赖于查询处理的大脑中枢：查询优化器。Greenplum查询优化器功能丰富，结构庞杂，优化的点和用到的技术非常多。本章限于篇幅，只对查询优化器其中一小块消除外连接进行简单介绍，本周五的直播活动《Greenplum内核揭秘之查询优化》将对查询优化器进行更为详细的解说，欢迎...Greenplum带你认识PostgreSQL检索神器——Brin Index
引言Greenplum是一款强大而稳定的企业级分布式数据库。虽然基于PostgreSQL，但Greenplum针对大数据的场景和用户对性能的极致追求开发了大量的特性和做了极致甚至苛刻的优化。此外，Greenplum紧密拥抱Postgres社区，以敏捷的方式快速升级Postgres内核。在Postgres9.5的内核中，Postgres引入了一种全新的索引类型，名为BrinIndex，本文将详细介绍BrinIndex的内部实现以及性能表现。7月24日，《Greenplum内核揭秘之B树索引》直播在...GreenplumGreenplum执行器位图——让查询更有效
为了让查询更加有效，Greenplum引入了索引，但是索引在一些应用场景上也会有访问性能、过滤条件限制等问题，而位图和基于位图的访问很好的解决了这一问题。为什么需要位图扫描首先来看一个普通的查询SELECTsidFROMstudentWHEREenrollyear2017ORenrollyear2018ORenrollyear2019;执行上面查询时，Greenplum最简单的方式可以采用对表student顺序扫描（SequenceScan）。如果表student很大，并且查询只需要读取少量元组时，顺序扫描...Greenplum
