鸿蒙开发者社区

[toc]前言在如今的情况下，各大厂商为了能够保证业务能够正常进行，都在宣传自家的数据库产品，像是阿里云的OceanBase、腾讯的TDSQL、华为的openGauss等国产数据库都在蓬勃发展着，可以看到都排在墨天轮中国数据库流行度排行的前列。因为最近有在了解华为开源的数据库openGauss，便来写篇文章来带大家入门一下openGauss以及华为云GaussDB产品。一、介绍openGauss是一款高性能、高安全、高可靠的企业级开源关系型数据库，是华为...

Hello大家好，我是阿粉，Redis作为工作中不可缺少的缓存组件，相信很多小伙伴都会使用到，我们日常使用的时候都是通过代码或者客户端去链接Redis服务器来操作数据的。那么一条简单的​​setnameziyou​​​命令是如何执行的，中间都经历了哪些过程想必很少会有人去了解。今天阿粉就带大家看一下一条简单的​​setnameziyou​​命令是如何执行的。我们可以看到在执行​​setnameziyou​​​这个命令过后，先显示一个​​OK​​在...

在大家开发的时候，很多时候不是说，有人告诉你已经完全的设计好数据库了，也没有专门的人去管理数据库表设计这块的内容，而阿粉的朋友就是这么悲催，接手了公司一个同事的一个比较重要的功能，而阿粉的朋友也没有重新进行设计，于是就出现了这样的一幕。你设计的这是啥？领导：你数据库设计的软删除呢？Delete就直接给我删了？万一到时候用户反悔了，想查询某项数据怎么办？我：........(内心OS：这特么不是我设计的好不)领导...

阿粉最近迷上了Redis，为什么呢？感觉Redis确实功能很强大呀，一个基于内存的KeyValue存储的数据库，竟然有这么多的功能，而阿粉也要实实在在的把Redis来弄一下，毕竟面试的时候，Redis可以说是一个非常不错的加分项。分布式锁为什么需要分布式锁？目前很多的大型项目全部都是基于分布式的，而分布式场景中的数据一致性问题一直是一个不可忽视的问题，大家知道关于分布式的CAP理论么？CAP理论就是说任何一个分布式系统都无法同...

前段时间阿粉想着如何去优化我们公司中已经存在的分布式中的唯一ID，而提起唯一的ID，相信如果不是从事传统行业的人，肯定都有所了解，分布式架构下，唯一ID生成方案，是我们在设计一个系统，尤其是数据库使用分库分表的时候常常会遇见的问题，尤其是当我们进行了分库分表之后，对这个唯一ID的要求也就越来越高。那么唯一ID方案都有哪些呢？分布式全局唯一ID往往一谈分布式，总是会色变,因为在很多面试的时候，都会问你，会不会...

看完本文，你一定会有所收获一、摘要在日常开发中，数据库中主键id的生成方案，主要有三种数据库自增ID采用随机数生成不重复的ID采用jdk提供的uuid对于这三种方案，我发现在数据量少的情况下，没有特别的差异，但是当单表的数据量达到百万级以上时候，他们的性能有着显著的区别，光说理论不行，还得看实际程序测试，今天小编就带着大家一探究竟！二、程序实例首先，我们在本地数据库中创建三张单表​​tbuuid1​​​、​​tbuui...

Mongodb备份常用命令一、备份1.库备份工具同mysql一样mongodb也有自带的备份工具mongodump、mongorestore、mongoexport、mongoimport其中mongodump可以用来导出整个库也可以单独导出整个表，而mongoexport只能导出表1.1mongodump备份用法身份认证方式备份库mongodumpurootp''authenticationDatabaseadmind[dbname]o[path]无身份认证的情况mongodumph127.0.0.1port27017d[dbname]o[path]mongodump默认备份全部库，因此如果要备份...

在Redis官网上有很多Go语言的客户端包，提供对Redis的访问和操作。GoRedis是能够支持Redis集群的Redis客户端，是基于Redigo的Redis客户端的Go语言执行。GoRedis旨在通过集群更改自动存储和更新槽位信息。Redis客户端旨在控制每个节点的连接池，从而提高效率并减少延迟。本教程将介绍如何将RedisGo客户端GoRedis与Golang一起使用。安装goredisredisgogogetgetgithub.comgoredisredis创建redis链接gofuncrClient()redis.Client{cl...

今天给大家介绍一款googleearthengineapp，VICAL:VEGETATIONINDICESCALCULATOR是一款可以在线计算Landsat和sentinel系列的植被指数app。这项应用是由INIFAPCENIDRASPA和CEVAF的研究人员开发的。在为VICAL计划的改进中，包括通过实验，利用植被指数（IV）实现对各种作物感兴趣的生物物理变量的校准；并且这些结果在VICAL中可用，对其他人有用，因此他们可以很容易地监测与灌溉工程有关的变量。web端的链接：​​Vegetationindice...

手把手带你入门API开发引言在本文中，您将学习如何使用[Flask](https:flask.palletsprojects.comen2.1.x)、[SQLite3](https:www.sqlite.orgindex.html)（轻易数据库）和JSON创建用于数据通信的RESTAPI。本文使用4个最常用的HTTP动词：GET、POST、PUT和DELETE，对应数据库的CRUD操作。比如管理的是一个游戏数据库games.db，其中包含名称（name）、价格（price)和等级（rate）。我们还将通过使用Flask创建的API公开几个操作：获取...

Thanos的Query组件实现了Prometheus的HTTPv1API，可以像Prometheus的Graph一样，通过PromQL查询Thanos集群中的数据。简而言之，它从底层的StoreAPI收集查询所需的数据，执行查询操作并返回结果。Query组件是可以无状态和水平扩展的。查询器是完全无状态和水平可伸缩的。ThanosQuery组件的启动非常简单，比如：thanosquery\httpaddress"0.0.0.0:9090"\store":"\store":"httpaddress：组件启动后对外提供服务的地址和端口store：T...

1、实战问题返回指定字段可以用："source":{"includes":[],"excludes":["a"]}那有没有什么办法在返回指定字段的基础上指定返回前50个字符呢？例如我现在有一个filedata字段，字段长度可能在一千以上并且需要对这个字段分词和检索，目前想指定返回filedata字段的前50字符，请问有没有什么好的方法？——问题来源：死磕Elasticsearch知识星球https:t.zsxq.com052rvJ6q72、解决方案探讨这个问题仅涉及到字符级别的提取，可以将上述...

1、背景由于种种原因，最近将核心业务生产使用的HBase迁移到了云上的弹性MapReduce（EMR)集群上，并使用了EMR的HBase组件默认参数配置。结果在流量高峰期出现了宿主机故障，挂掉了两个core节点（部署了regionserver和datanode)，大量regionrit，花了15分钟才自动恢复，硬生生吃了一个P0故障。复盘的时候发现，由于云上EMR对hdfs的socket超时参数默认设置了900000（15min),导致了region重新上线读取故障节点WAL日志的时候足足等...

经常有人问，架构师的学习路线是什么？我一般推荐架构师的基本功，是从「存储选型」开始的。本文整理了存储选型的思路和整体框架，主要包括几个部分内容：了解目前的存储技术趋势，以及对开发人员新的要求存储选型的原则，避免日常的经典误区结合典型数据库特点，说明如何进行存储选型，提高业务开发效率常见的场景和解决方案1、存储技术发展看存储选型1.1存储类型多元化DBEngines数据库排名并不代表数据库的安装数量，或者使用...

1、Elasticsearch性能测试工具包含但不限于：1、rallyElasticsearch​​官方压测工具​​。下载地址：​​https:github.comelasticrally​​文档地址：​​https:esrally.readthedocs.ioenstable​​2、LoadgenElasticsearch专属压测工具，Medcl大佬（原Elastic中国第一人，现​​极限科技​​CEO）出品。下载地址：​​http:release.infinilabs.comloadgen​​3、JMeter开源工具，纯Java编写，最初为JavaWeb应用程序而设计，后...

刚刚在群里看到消息说，时隔一年，canal1.1.6正式release了，赶紧上去看看有什么新特性。（居然才发布了6个小时，前排围观）1、什么是canalcanal[kə'næl]，译意为水道管道沟渠，主要用途是基于MySQL数据库增量日志解析，提供增量数据订阅和消费。应该是阿里云DTS（DataTransferService）的开源版本。如果想了解更多，可以上github上看官方文档，或者我之前写过的系列基于canal1.1.4版本的入门文档。2、重要新特性我们现在生产...

在企业环境中，Elasticsearch一般部署为多个节点的分布式集群，对Elasticsearch集群的读取或写入请求需要在多个节点之间进行协调。在单个服务器节点上没有数据的“全局视图”，这是认知前提。当出现可靠性问题时，如果Elasticsearch集群设置有问题或整个集群不稳定，那么“紧急救火”可能会很紧张。往小了说，可能影响客户体验，客户用着不爽；往大了说，处理不及时或处理不利，可能对企业带来负面影响。因此，提前掌握快速恢复...

1、背景由于种种原因，最近将核心业务生产使用的HBase迁移到了云上的弹性MapReduce（EMR)集群上，并使用了EMR的HBase组件默认参数配置。结果在流量高峰期出现了宿主机故障，挂掉了两个core节点（部署了regionserver和datanode)，大量regionrit，花了15分钟才自动恢复，硬生生吃了一个P0故障。复盘的时候发现，由于云上EMR对hdfs的socket超时参数默认设置了900000（15min),导致了region重新上线读取故障节点WAL日志的时候足足等...

书接上一回，​​MetricBeat+Elasticsearch+Kibana实现监控指标可视化​​。问题来了，Logstash如何监控起来呢？1、看一下官方文档​​https:www.elastic.coguideenlogstash8.3monitoringwithmetricbeat.html​​说一下大前提：logstash进程得启动且常在。logstash启动后得默认端口：9600，默认ip地址：localhost（注意不是其他）。查看Logstash进程和端口号：Logstash启动成功标志如下图所示：2、梳理出详尽步骤2.1步骤1：配置...

1、问题产生Kibana实现一个词云效果并不复杂，甚至可以说非常简单。大致可以分成如下几个步骤：步骤1：已有索引待做词云的text类型字段设置：fielddata为true，以便基于分词结果聚合操作。步骤2：在8.X的kibana的DataViews关联索引。步骤3：在dashboard控制面板选择AggregationBased下的Tagcloud，选择步骤1设定的字段，选择好时间范围，词云就可以生成。以构造微博数据（假数据）为例，词云效果如下所示：问题来了！怎么那么多...