这个用户很懒,还没有个人简介
私信
主帖 40
回帖
视频
提问
回答
资源
专栏
5月18日,腾讯云首款分布式分析型数据库TDSQLA正式发布公有云版本。TDSQLA作为领先的分析型数据库,是腾讯首款分布式分析型数据库,采用全并行无共享架构,具有自研列式存储引擎,支持行列混合存储,适应于海量OLAP关联分析查询场景。它能够支持2000台物理服务器以上的集群规模,存储容量能达到单数据库实例百P级。TDSQLA具备强大的海量数据实时分析能力,并全面兼容PostgreSQL语法、高度兼容Oracle语法,同时具备高安全、高可...
2022-05-01 18:29:37 157浏览 0点赞 0回复 0收藏
TDSQLPG版分布式关系型数据库,是一款同时面向在线事务交易和MPP实时数据分析的高性能HTAP数据库系统。面对应用业务产生的不定性数据爆炸需求,不管是高并发交易还是海量实时数据分析,TDSQLPG版都能够轻松处理。目前TDSQLPG版已经在金融、保险、通信、税务、政务等多个行业的核心交易系统上线运行。TDSQLPG版介绍1.TDSQLPG版介绍自2008年诞生,TDSQLPG版已有13年的发展历史,产品全面兼容PostgreSQL,高度兼容Oracle语法,采用...
2022-05-01 18:15:33 184浏览 0点赞 0回复 0收藏
LSMTree(LogStructuredMergeTree)是数据库领域内较高效的keyvalue存储结构,被广泛应用于工业界数据库系统,如经典的单机kv数据库LevelDB、RocksDB,以及被诸多分布式NewSQL作为底层存储引擎。本期将由腾讯云数据库高级工程师韩硕来为大家分享基于LSMTree存储的数据库性能改进,重点介绍近年来学术界对LSMTree的性能改进工作,并探讨这些改进措施在工业界数据库产品中的应用情况以及落地的可能性。以下是分享实录:LSMTree基...
2022-05-01 17:36:41 229浏览 0点赞 0回复 0收藏
导语TDSQLC原(CynosDB)是腾讯云数据库团队自研的新一代云原生数据库,融合了传统数据库、云计算与新硬件技术的优势,采用计算和存储分离的架构,100%兼容PostgreSQL,提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。本文旨在从数据库内核的角度揭秘TDSQLCPostgreSQL的核心架构与关键技术。本文适合读者:腾讯云售后服务、TDSQLC用户、TDSQLC开发者,需要有基本的数据库与存储知识。TDSQLC概述TDSQLC采用计算和存储...
2022-05-01 16:33:48 200浏览 0点赞 0回复 0收藏
6月5日,“国产数据库硬核技术沙龙TDSQLA技术揭秘”如约而至。5位腾讯云技术大咖分别从整体技术架构、列式存储及相关执行优化、集群数据交互总线、Fragment执行框架查询分片策略子查询框架以及向量化执行引擎等多个方面对TDSQLA进行了深入解读。以下带来腾讯云数据库技术总监李跃森老师的在线分享。TDSQLA产品定位TDSQLA是腾讯基于PostgreSQL自主研发的分布式超大规模在线关系型数据仓库,业务场景针对于在线高性能数据分析。TD...
2022-05-01 16:18:02 135浏览 0点赞 0回复 0收藏
在“国产数据库硬核技术沙龙TDSQLA技术揭秘”系列分享中,5位腾讯云技术大咖分别从整体技术架构、列式存储及相关执行优化、集群数据交互总线、Fragment执行框架查询分片策略子查询框架以及向量化执行引擎等多个方面对TDSQLA进行了深入解读。错过直播的小伙伴有福啦,今天带来本次系列分享中腾讯云数据库高级工程师伍鑫老师主题为“TDSQLA列存储设计原理及执行优化详解”的文字版。TDSQLA是腾讯首款分布式分析型数据库,采用全并...
2022-05-01 16:04:49 142浏览 0点赞 0回复 0收藏
6月5日在“国产数据库硬核技术沙龙TDSQLA技术揭秘”系列分享中,5位腾讯云技术大咖分别从整体技术架构、列式存储及相关执行优化、集群数据交互总线、Fragment执行框架查询分片策略子查询框架以及向量化执行引擎等多个方面对TDSQLA进行了深入解读。其中腾讯云数据库高级工程师陈再妮,对于“TDSQLA海量数据交互之道及企业级数据库能力”,进行议题分享。没有观看直播的小伙伴,可不要错过本次分享内容的文字实录。以下内容为现场...
2022-05-01 15:49:33 152浏览 0点赞 0回复 0收藏
在“国产数据库硬核技术沙龙TDSQLA技术揭秘”系列分享中,5位腾讯云技术大咖分别从整体技术架构、列式存储及相关执行优化、集群数据交互总线、Fragment执行框架查询分片策略子查询框架以及向量化执行引擎等多方面对TDSQLA进行了深入解读。没有观看直播的小伙伴,可要认真做笔记啦!今天带来本系列分享中最后一篇腾讯云数据库高级工程师胡翔老师主题为“TDSQLA向量化执行引擎技术揭秘”的分享的文字版。作为领先的分析型数据库,...
2022-04-29 15:24:07 228浏览 0点赞 0回复 0收藏
在“国产数据库硬核技术沙龙TDSQLA技术揭秘”系列分享中,5位腾讯云技术大咖分别从整体技术架构、列式存储及相关执行优化、集群数据交互总线、分布式执行框架设计及优化策略、以及向量化执行引擎等多方面对TDSQLA进行了深入解读。本期带来了系列分享中腾讯云数据库高级工程师张倩老师主题为“TDSQLA分布式执行框架设计及优化策略”的分享的文字版。没有听直播的小伙伴,可要认真做笔记啦!作为领先的分析型数据库,TDSQLA是腾讯...
2022-04-29 15:13:53 131浏览 0点赞 0回复 0收藏
写在前面,感谢腾讯云数据库架构师团队祝海强、杜川、刘志祥在排障思路、源码分析上面提供的帮助,让我学习到了很多,不敢居功,特此鸣谢!本文将以数据库实际使用中的某典型案例来分析造成主从延迟的原因。主从延迟的原因1、某用户在使用数据库过程中,出现主从延迟很大的情况,showslavestatus\G,已经差了60多个binlog了。2、观察发现,应该是卡在一个大事物上面(RetrievedGtidSet一直在上升,但是ExecutedGtidSet卡在一个...
2022-04-29 14:41:34 119浏览 0点赞 0回复 0收藏
默认情况下,云开发的函数部署在公共网络中,只可以访问公网。如果开发者需要访问腾讯云的Redis、TencentDB、CVM、Kafka等资源,需要建立私有网络来确保数据安全及连接安全。本文会演示如何在云开发的函数中使用Redis,如需访问其他数据库资源,也可以参考本文的思路。▌Redis介绍及应用场景Redis是一个开源的InMemory的NoSQL数据库,可以用作数据库、缓存和消息中间件。支持多种类型的数据结构,如字符串(strings)、散列(ha...
2022-04-28 16:00:46 139浏览 0点赞 0回复 0收藏
本文介绍目前业界非常火热的“云原生(CloudNative)”相关知识结构,包括微服务、DevOps、持续交付、服务网格、Serverless等相关知识点。“云原生”通过提供一套完整的技术体系和方法论来指导我们在云环境下,在系统功能越来越复杂的情况下,还能够做到敏捷开发并保证系统可用性。云原生产生背景随着云计算平台的成熟和分布式框架的普及,应用上云已经是不可逆转的趋势,未来应用会分成两种,一种是“构建云”的,另一种是“基...
2022-04-28 15:47:44 164浏览 0点赞 0回复 0收藏
故事从一个MongoDB数据库连接超时案例说起。该异常导致2次合服失败,前面已在服务器上抓包并dump下来,下方是客户端超时现场截图:从截图不难看出,这是一个Nodejs服务出错信息,推测DBA应该是用的nodejsmongodb来实现连接数据库并进行操作,找到这个driver的官网https:github.commongodbnodemongodbnative,clone了一份代码下来。简单看了下,再结合上图,初步分析出错连接是在第38个连接超时的。1.分析抓包内容由于前面已经在...
2022-04-26 20:05:31 105浏览 0点赞 0回复 0收藏
七夕节到了,在这个浪漫美好的日子里,各位小伙伴今晚打算怎么办?是陪自己的另一半,还是好好加班呢没有另一半,又不想加班的数据君看着周围的人成双成对,流下了不争气的泪水,思前想后,决定用知识来充实自己,好好学习,因为我知道,技术不够牛逼的菜鸡是很难找到女朋友的,而如果看懂这篇文章,说明离找到女朋友也不远了Part1概述LogStructuredMergetrees(LSM树)被广泛应用在现代NoSQL系统存储层中,比如:BigTable、Dynam...
2022-04-26 19:21:58 176浏览 0点赞 0回复 0收藏
背景介绍本人在工作中接触到一个业务,由于需要创建一个非常大的表,字段比较多——超过了500个字段,但是在创建表的时候报了很多错误,让我折腾了很久才解决,于是为了防止问题复现,我决定一探究竟。注:mysql版本为5.7.18。CREATETABLEprocessxxxx(idint(11)NOTNULLAUTOINCREMENT,instanceidvarchar(255)NOTNULL,.........F202001081110400959text,F202001081110400965text,F202001081110400991text,F202001081110410397text...
2022-04-26 19:11:00 59浏览 0点赞 0回复 0收藏
火影忍者手游已经上线4年多,活动是火影重要的运营手段,火影的活动除了签到、礼包、任务等商业化运营,最大的特色是有很多“玩法”级别的活动,包括了游戏战斗、sns等元素。如何持续稳定的输出高品质活动成了火影当前最大的挑战之一。火影当前活动已经400+,而且还将持续稳定扩展,按理说,活动本身逻辑与核心数据逻辑是弱耦的,但是现状却是与gamesvr(火影对应的是zonesvr)耦合在一起,不但影响了核心服务的可用性,也极大...
2022-04-25 14:56:27 68浏览 0点赞 0回复 0收藏
在MySQL中,数据字典信息内容包括表结构、数据库名或表名、字段的数据类型、视图、索引、表字段信息、存储过程、触发器等内容。可是包含这些元数据的数据字典不仅仅存在于数据库系统表中(informationschema,mysql,sys),还存在于server层和InnoDB存储引擎中的部分文件里,比如每个表都有一个对应的.frm文件来保存表结构的信息,.opt文件用来用来记录每个库的字符等信息,.TRN和.TRG文件用来存放触发器的信息。使用文件来存储和...
2022-04-25 14:40:01 217浏览 0点赞 0回复 0收藏
在做业务的时候用到了一些redis的特性,发现它的持久化特性特别好用,这个特性也是Redis高可用的重要原因,因此在用过之后,笔者对一些原理进行了简单的梳理。总的来说,Redis为持久化提供了两种方式:1.RDB:在指定的时间间隔能对你的数据进行快照存储。2.AOF:记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据。接下来我们对RDB和AOF的原理和内容进行解读一、RDB的原理在Redis中RDB持久化的触...
2022-04-25 14:24:16 87浏览 0点赞 0回复 0收藏
PartⅠ引言线上数据库的运维,往往避不开对语句执行时间的监控,实际业务运行中若出现明显、频繁的慢查询或慢写入,则我们需要格外地注意,及时定位问题出现的原因。这时候,如果数据库自身能够提供实例上语句执行时间的统计,做到可宏观(能够观察整体执行时间分布情况)、可微观(能够定位执行慢的语句),自然能起到事半功倍的效用。早在MySQL8.0以前的版本中,performanceschema表就已经有多个StatementSummary表,用于记录...
2022-04-24 14:52:35 101浏览 0点赞 0回复 0收藏
MySQL作为互联网中非常热门的数据库,其底层的存储引擎和数据检索引擎的设计非常重要,尤其是MySQL数据的存储形式以及索引的设计,决定了MySQL整体的数据检索性能。我们知道,索引的作用是做数据的快速检索,而快速检索的实现的本质是数据结构。通过不同数据结构的选择,实现各种数据快速检索。在数据库中,高效的查找算法是非常重要的,因为数据库中存储了大量数据,一个高效的索引能节省巨大的时间。比如下面这个数据表,如果...
2022-04-24 14:34:33 87浏览 0点赞 0回复 0收藏