鸿蒙开发者社区

背景随着业务的快速发展，数据的不断膨胀，流量负载的增加，业务系统遇到了强烈的挑战，对数据库系统可扩展性提出了强烈的诉求。Oracle、MySQL、SQLServer、PostgreSQL传统单机数据库在线扩展上的问题日益凸显。为了解决扩展问题，出现了可水平扩展的分布式数据库，于是分布式事务问题成为了必须面对的问题。在这种背景下，ShardingSphere提供了一套分布式数据库增强计算引擎，通过可插拔架构构建基于数据库之上的生态系统，提...

回顾自己过去的5年，从一名后端开发工程师，自我摸索、学习、探究，成为一名搜索开发工程师。复盘总结自己经历过的搜索的三个阶段，可简要概括为：（1）关键词搜索、（2）相关性搜索、（3）探索式搜索。具体如下图：•关键词搜索：主要借助关系型数据库如Mysql实现，搜索效率低下、性能差、效果差强人意。•相关性搜索：借助Solr和Elasticsearch实现，基于规则文本分词实现千人一面，对词典和现有知识依赖较高。•...

1、为什么要搞这么一套教程？我自己学习和实践Elastic相关技术有近6年+时间了，在这期间，走了不少弯路，但也得到过N多人的帮助。2019年年中的时候，我组建了“死磕Elastic认证考试特训营”，当时想法也很简单，和一帮志同道合的兄弟，一起论道、拿下Elastic认证。截止：2022年01月26日，已带领88人通过认证考试（中国已通过人数200人左右）。88人正好等于中国2018年+2019年已通过认证人数之和的4倍+。之前的知识点很分散、碎片...

1、引言本系列文章介绍如何修复Elasticsearch集群的常见错误和问题。这是系列文章的第一篇，主要探讨：Elasticsearch磁盘使用率超过警戒水位线，怎么办？2、从磁盘常见错误说开去当客户端向Elasticsearch写入文档时候报错：在elasticsearch的日志文件中报错如下：出现如上问题多半是：磁盘使用量超过警戒水位线，索引存在readonlyallowdelete索引块数据。3、报错释义基础认知：磁盘三个警戒水位线:推荐阅读：你不得不关注的Elas...

1、引言本系列文章介绍如何修复Elasticsearch集群的常见错误和问题。这是系列文章的第二篇，主要探讨：ElasitcsearchCPU使用率突然飙升，怎么办？2、Elasticsearch高CPU使用率的内涵线上环境ElasticsearchCPU使用率飙升常见问题如下：——来自《死磕Elasticsearch知识星球》Elasticsearch使用线程池来管理并发操作的CPU资源。关于线程池和队列，推荐阅读：Elasticsearch线程池和队列问题，请先看这一篇。Elasticsearch高CPU使用...

1、Elasticsearch监控指标可视化概述之前的推文Elasticsearch磁盘使用率超过警戒水位线，怎么办？有读者留言：“配合监控系统”。是的，监控系统就像我们的车载监控，平时可能用不到，一用到的时候就是“大事、要紧的事”。监控提前做起来，便于我们以可视化的方式直观的看到集群的各项监控指标，能真正做到“防范于未然”。监控的免费组件之前文章也有介绍，包含但不限于：cerebro本篇文章，我们介绍一下原生的、强大的Kibana...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)前言国庆期间看了数据库的很多资料和书籍，这点我在总结的数据库文章里面也提过了，然后我发现我对索引的介绍不全，所以整理了一下自己的笔记，决定来个索引完整版，老规矩可能还是没我正常文章风格那么跳，但是干货一定也能让你有所收获。索引介绍索引是什么官方介绍索引是帮助MySQL高效获取数据的数据结构。更通俗的说，数据库索引好比是一本书前面的目...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)前言其实数据库章节基本上的知识点我都写过一遍了，包括这篇事务和MVCC的，但是国庆期间我翻阅资料的时候我发现之前写的还差点意思，例子举得也差点意思，那我就根据我自己最新的理解，加上之前的总结相当于重写了，希望你也有新的收获。数据库事务介绍事务的四大特性(ACID)原子性(atomicity)：事务的最小工作单元，要么全成功，要么全失败。一致性(consi...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)背景我相信大家在数据库优化的时候都会说到索引，我也不例外，大家也基本上能对数据结构的优化回答个一二三，以及页缓存之类的都能扯上几句，但是有一次阿里P9的一个面试问我：你能从计算机层面开始说一下一个索引数据加载的流程么(就是想让我聊IO)我当场就去世了....因为计算机网络和操作系统的基础知识真的是我的盲区，不过后面我恶补了，废话不多说，...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)面试场景面试官：Redis有哪些数据类型我：String，List，set，zset，hash面试官：没了我：哦哦哦，还有HyperLogLog，bitMap，GeoHash，BloomFilter面试官：就这回家等通知吧。前言我敢肯定，第一个回答，100%的人都能说上来，但是第二个回答能回答上来的人可能就不多了，但是这也不是我今天探讨的话题。我就从我自己的去面试的回答思路，以及作为一个面试...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)前言上一章节我提到了基于zk分布式锁的实现，这章节就来说一下基于Redis的分布式锁实现吧。zk实现分布式锁的传送门：zk分布式锁在开始提到Redis分布式锁之前，我想跟大家聊点Redis的基础知识。说一下Redis的两个命令：SETNXkeyvaluesetnx是SETifNoteXists(如果不存在，则SET)的简写。用法如图，如果不存在set成功返回int的1，这个key存在了返回0。SETEXke...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)前言Redis在互联网技术存储方面使用如此广泛，几乎所有的后端技术面试官都要在Redis的使用和原理方面对小伙伴们进行360°的刁难。作为一个在互联网公司面一次拿一次Offer的面霸，打败了无数竞争对手，每次都只能看到无数落寞的身影失望的离开，略感愧疚(请允许我使用一下夸张的修辞手法)。于是在一个寂寞难耐的夜晚，我痛定思痛，决定开始写《吊打面试...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)前言Redis在互联网技术存储方面使用如此广泛，几乎所有的后端技术面试官都要在Redis的使用和原理方面对小伙伴们进行360°的刁难。作为一个在互联网公司面一次拿一次offer的面霸(请允许我使用一下夸张的修辞手法)，打败了无数竞争对手，每次都只能看到无数落寞的身影失望的离开，略感愧疚，在一个寂寞难耐的夜晚，我痛定思痛，决定开始写《吊打面试官》...

作者敖丙来源敖丙(ID：JavaAudition)转载请联系授权(微信ID：Aobingcool)前言Redis在互联网技术存储方面使用如此广泛，几乎所有的后端技术面试官都要在Redis的使用和原理方面对小伙伴们进行360°的刁难。作为一个在互联网公司面一次拿一次offer的面霸(请允许我使用一下夸张的修辞手法)，打败了无数竞争对手，每次都只能看到无数落寞的身影失望的离开，略感愧疚，在一个寂寞难耐的夜晚，我痛定思痛，决定开始写《吊打面试官》...

拔掉网线接口这个平时一秒钟就搞定的事，我愣是搞了半分钟才拔出来。这是我昨晚11点半最后一次直播后的最直接感受：嗓子嘶哑、身心俱疲。从2021年8月16日接到李猛老师邀约和咕泡教育合作做一期直播课到昨晚，跨度：176天。从第一次直播课2021年12月14日到昨晚，跨度2个月+。每次直播3个小时，共8次累计24小时（1440分钟）的直播课全部完成。对我来讲，这是一次全新的尝试和全新的挑战，看似“疲惫不堪”实则收获满满。非常有必...

1、Elastic8.0正式发布2022年2月11日，Elastic8.0正式发布。Elastic官方宣告：从此Elastic进入速度、规模、相关性和简单性的新时代！这是距离7.0版本发布（2019年4月10日）超过1038天（近3年）后的第一个大版本;这是7.X版本更新了17个版本（7.0——7.17）后的第一个大版本；这是Elastic创始人ShayBanon从CEO回归CTO发布的第一个大版本;这是基于Lucene9.0的第一个版本；.......所以，Elastic8.0版本万众瞩目、非常期待！2、宏观...

作者JavaStorm来源码哥字节（ID：MageByte）转载请联系授权（微信ID：MageByte1024）mysql>selectfromTwhereID10;开门见山，当我们输入一条SQL语句的时候，MySQL内部究竟执行了什么直接上架构图，我们才能对其有一个概念，而不要陷入细节之中。架构架构概况大体上来说，MySQL可以分为Server层与存储引擎两个部分。Server层包括连接器、查询缓存、分析器、优化器、执行器。存储引擎负责数据的存储和读取，其架构模式是插件式的，...

作者MageByte技术团队来源码哥字节（ID：MageByte）转载请联系授权（微信ID：MageByte1024）背景这两年互联网行业掀着一股新风，总是听着各种高大上的新名词。大数据、人工智能、物联网、机器学习、商业智能、智能预警啊等等。以前的系统，做数据可视化，信息管理，流程控制。现在业务已经不仅仅满足于这种简单的管理和控制了。数据可视化分析，大数据信息挖掘，统计预测，建模仿真，智能控制成了各种业务的追求。“所有一切如...

作者MageByte技术团队来源码哥字节（ID：MageByte）转载请联系授权（微信ID：MageByte1024）摘要：了解Btree之外的存储引擎。LSM一个流行的高性能写的数据库实现方式。LogStructuredMergeTree，简称LSM。以Mysql、postgresql为代表的传统RDBMS都是基于btree的pageorented存储引擎。现代计算机的最大处理瓶颈在磁盘的读写上，数据存储无法绕开磁盘的读写，纯内存型数据库除外，但由于内存存储的不稳定性，我们一般只将内存型的存...

作者MageByte技术团队来源码哥字节（ID：MageByte）转载请联系授权（微信ID：MageByte1024）Mysql单表适合的最大数据量是多少我们说Mysql单表适合存储的最大数据量，自然不是说能够存储的最大数据量，如果是说能够存储的最大量，那么，如果你使用自增ID，最大就可以存储2^32或2^64条记录了，这是按自增ID的数据类型int或bigint来计算的;如果你不使用自增id，且没有id最大值的限制，如使用足够长度的随机字符串，那么能够限制单...