鸿蒙开发者社区

一、问题：MySQL5.7.38主从架构，主节点唯一索引上（唯一索引不是主键）有重复值，全部从节点报1062，SQL线程状态异常，根据SQL线程报的binlog位置点，insert数据时有重复值，插入失败二、原因：uniquechecks0时导致，在bug(106121)列表中官方解释的原因：该参数关闭，维护唯一索引时，不会进行物理读，只会进行内存读，来确保唯一索引的唯一性，即如果内存中有冲突数据就报1062，如果内存中没有冲突数据插入成功，不会进行io来...

Part10叶子节点分裂我们BTree只有一个节点，这看起来不太像一棵标准的tree。为了解决这个问题，需要一些代码来实现分裂叶子节点。在那之后，需要创建一个内部节点，使其成为两个新的叶子节点的父节点。基本上，我们这个系列的文章的目标是从这里开始的：onenodebtree到这样：twolevelbtree首先中的首先，先把处理节点写满错误移除掉：voidleafnodeinsert(Cursorcursor,uint32tkey,Rowvalue){voidnodegetpage(cursor>table>pager...

UOS二进制安装数据库和其他Linux基本一样，网上命令行安装的教程很多。考虑到UOS自带图形化界面，为了降低一点安装门槛，本文尽量使用图形化界面安装。纯命令行安装可以参考：​​https:greatsql.cndocsusermanual3quickstart32quickstartwithtarball.html​​本文直接把GreatSQL安装在了用户目录（非root），用普通用户的权限运行，没有新创建专门给数据库用的用户和组。系统环境系统版本：统信UOS家庭版22.0下载地址：​​htt...

1.异常崩溃GreatSQL合并PerconaServer8.0.30的Beta版测试中，QA报了一个crash的bug：buglistbenchmarksql加载1000仓数据时，数据库实例发生coredump。core堆栈信息如下：00x00007f51315a39d1inpthreadkill()fromlib64libpthread.so.010x00000000013258cdinhandlefatalsignal()atsrcsqlsignalhandler.cc:2282<signalhandlercalled>30x0000000001339244inmemrootdeque<Item>::pushback()atsrcincludememrootdeque.h:18240x0000000...

《MySQL的内存分配与管理》​​上篇​​​和​​中篇​​，介绍了MySQL的内存分配、使用和管理。在实际使用的过程中，控制好内存的用量、降低OOM风险十分重要。本篇为下篇，主要对MySQL内存限制特性进行解读，代码基于8.0.28。在MySQL8.0.28中，官方引入了内存限制的新特性WL13458Globalandsessionmemoryallocationlimits，从内核层面对服务运行期间的内存使用进行限制，降低OOM的风险。本文将围绕该项工作的改动、设计实现等方...

MySQL内存分配与管理总体上分为上中下三篇介绍，上篇中主要介绍了InnoDB层和SQL层内存分配管理器，其中InnoDB的内存分配主要依靠utallocator和memheapallocator完成。本篇为中篇，主要介绍InnoDB的内存构成和使用，代码版本主要基于8.0.25。InnoDB是MySQL默认的存储引擎，而提到InnoDB的内存，就绕不开BufferPool，该结构对性能的影响重大。但事实上InnoDB的内存消耗并不只有BP而已，其内部还有许多重要的结构（如AHI、ChangeBu...

MySQL的内存分配、使用、管理的模块较多，总体上分为上中下三篇介绍：上篇文章主要介绍InnoDB层和SQL层内存分配管理器；中篇介绍InnoDB的内存结构和使用特点；下篇介绍内存使用限制。本篇为上篇，代码版本主要基于8.0.25。1.InnoDB层内存分配管理器1.1utallocator在非UNIVPFSMEMORY模式下，UTNEW等都是调用原始的new、delete、malloc、free等接口进行内存的申请和释放，在UNIVPFSMEMORY编译模式下，采用内部封装的utallocator分...

1.起源1979年，第一款基于SQL的商业关系型数据库管理系统OracleV2问世，也标志着第一款商用的SQL优化器诞生。理论上，成熟的优化器原型，更早可以追溯到IBM的SystemR项目。现今，很多开源数据库和大数据优化器还是沿用SystemR原型。2.从一条SQL开始SQL（StructuredQueryLanguage）是一种结构化的查询语言。它只描述了用户需要什么样的数据，而没有告诉数据库该如何执行。这使得有很多优化空间蕴含在SQL改写中，我们来看一个简单...

ChatGPT来势汹汹，大佬们也坐不住了。原美团创始人称要打造中国版OpenAl在聊天机器人ChatGPT爆火后，互联网大佬们纷纷表态要入局人工智能（AI），这其中数前美团联合创始人王慧文最引人注目。​近日，原美团联合创始人王慧文发布招聘信息，称设立北京光年之外科技有限公司，“要打造中国OpenAl，其个人出资5千万美元，估值2亿美元。个人肉身不占股份，资金占股25%，75%的股份用于邀请顶级研发人才。”​他对招聘对象的期待是：...

1.背景​业务系统中普遍存在这样一种场景：根据给定条件筛选一批记录，这些记录按用户指定的条件排序，以分页的方式展示。例如，筛选出某个商家在售的商品，按商品销量排序，以分页的方式展示。上述场景，反映在数据库上，往往以ORDERBYcolumnLIMITn,m这样的TopK查询实现。例如，假设业务系统中每页展示100条记录，可以通过ORDERBYcolumnLIMIT0,100来展示第1页，通过ORDERBYcolumnLIMIT1000000,100来展示第10001页。在没有索引...

1.RuntimeFilter1.1什么是RuntimeFilterRuntimeFilter是通过等价关系传递动态生成的filtercondition以减少参与Join计算数据量的方法，在业界有广泛应用。图1RuntimeFilter优化生效的流程如下：1.根据查询的JoinCondition，生成一条动态过滤条件传递规则：决定生产者（生成过滤条件的子查询）和消费者（应用过滤条件进行过滤的子查询）。2.先执行生产者，用实时结果集动态构建一个RuntimeFilterObject。3.将这个RuntimeFilterObj...

Mobileye的创始人为何要投资极氪？今天，吉利汽车在港交所发布公告，旗下的极氪完成7.5亿美元A轮融资（约51亿元人民币），投后估值130亿美元（约887亿元人民币）。本轮融资的投资者包括Mobileye创始人AmnonShashua教授、宁德时代、越秀产业基金、通商基金、衢州信安智造基金。​在去年12月7日，极氪已按保密基准向美国证交会递交了“可能进行IPO”的注册声明草拟本。预计在今年2季度，极氪就会成为吉利集团旗下的第十家上市公司...

近日，上海登临科技有限公司（以下简称“登临科技”）签署了CLA（ContributorLicenseAgreement，贡献者许可协议），正式加入龙蜥社区（OpenAnolis）。作为国内通用GPU领先企业，登临科技坚持核心技术完全原生研发，其创新的GPU+（基于GPGPU的软件定义的片内异构计算架构）兼容CUDA在内的编程模型和软件生态的基础上，通过架构创新，完美解决了通用性和高效率的双重难题。目前，登临科技首款基于GPU+的系列产品Goldwasser™（高...

文云原生SIG01背景随着云原生的蓬勃发展，越来越多的企业在自己的生产或者测试环境使用云原生技术，而容器镜像正是云原生技术中应用的实际运行环境。一个好的容器运行环境即容器镜像会真正关系到应用的体验、演进和维护。那么选择一个好的容器镜像需要考虑哪些方面呢？具体如下：1.长期的支持与维护：容器镜像提供的环境是分层的，企业容器应用往往是在一些基础镜像(baseimage)之上构建自己的应用镜像，而基础镜像提供了应用中...

点亮⭐️Star·照亮开源之路GitHub:https:github.comapachedolphinscheduler​精彩回顾近期，BIGO的大数据研发工程师许名勇在社区线上Meetup上给大家分享了主题为《DS及SPARK在BIGO的应用和改进》的演讲。主要介绍了BIGO如何使用DophinScheduler来调度以SPARK为主的多种类型的离线任务，以及为了满足业务需求、提升用户使用体验，在DS和Spark上所做的各种改进。讲师介绍​许名勇Bigo大数据研发工程师文章整理：白鲸开源曾辉今天...

什么是通用查询日志通用查询日志（GeneralQueryLog）用来记录用户的所有操作，包括启动和关闭MySQL服务、所有用户的连接开始时间和截止时间、发给MySQL数据库服务器的所有SQL指令等。当我们的数据发生异常时，查看通用查询日志，还原操作时的具体场景，可以帮助我们准确定位问题。查看当前状态mysql>SHOWVARIABLESLIKE'%general%';+++VariablenameValue+++generallogOFFgenerallogfilevarlibmysqlzhyno1.log+++2rowsinset(0.00s...

文KeenTuneSIG01阿里云ECS上售卖页新增“应用加速”功能2023年1月12日阿里云ECS的售卖页有了一些新的变化，在用户选择倚天+Alinux3新建实例时，多了一个新的选项“应用加速”。这个功能是阿里云ECS基于KeenTune提供典型云场景的开机即用的全栈调优解决方案，业务平均性能提升达到20%+，为客户提供远高于x86实例的性价比。目前已经上线MySQL、Nginx、Redis、PostgreSQL，之后Spark、Kafka、Memcached、Onnx等也会陆续上线，力争...

什么是ChatGPT？ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型，它能够通过学习和理解人类的语言来进行对话，还能根据聊天的上下文进行互动，并协助人类完成一系列任务，因此有望成为提高办公、学习效率的工具。以前的人工智能AlphaGo打败了柯洁，但只是在围棋领域，而ChatGPT则已经进入了日常工作领域和生活世界。不少和ChatGPT“聊过天”的网友纷纷感叹，“只有你想不到，没有ChatGPT办不成的”。上线...

译注：cstack在github维护了一个简单的、类似sqlite的数据库实现，通过这个简单的项目，可以很好的理解数据库是如何运行的。本文是第九篇，主要是实现Btree的二叉搜索并解决主键重复问题Part9二叉搜索与主键重复上次注意到我们的B树存储key时仍然是非排序的。现在我们来解决这个问题，并检测和拒绝主键的重复（插入）。现在我们的executeinsert()函数在插入时，选择的位置是在表的结尾处。作为替换，我们需要搜索表（树）中正确...

一、MySQL的sp运行SQL语句两个步骤介绍二、代码跟踪三、知识应用四、总结一、MySQL的sp运行sql语句两个步骤介绍MySQL的sp运行SQL语句需要执行2个步骤：prepare和execute。第一次执行的时候先执行prepare，进行相关语句parse、itemize、fixfields等操作，然后才开始进行execute操作。等第二次再执行该sp的时候就直接运行execute而不需要再次进行重复的prepare操作，这样可以节省sp运行时候重复prepare的开销。但是，对于表操作就...