鸿蒙开发者社区

1、背景由于种种原因，最近将核心业务生产使用的HBase迁移到了云上的弹性MapReduce（EMR)集群上，并使用了EMR的HBase组件默认参数配置。结果在流量高峰期出现了宿主机故障，挂掉了两个core节点（部署了regionserver和datanode)，大量regionrit，花了15分钟才自动恢复，硬生生吃了一个P0故障。复盘的时候发现，由于云上EMR对hdfs的socket超时参数默认设置了900000（15min),导致了region重新上线读取故障节点WAL日志的时候足足等...

1、8.X新版本官方文档升级了上图：熟悉官方文档的小伙伴都知道：早期的导航栏都在右边。8.X新版本统一换到了左边。2、小伙伴们使用过程反馈问题问题1：ES官网最近右侧的导航栏很乱，非常不舒服，难道只有我电脑这样么？问题2：我是感觉很不好用，而且有时候右侧导航栏无法下拉。从目录定位文章就不是很方便？3、我已向官方反馈该问题​​https:discuss.elastic.cotthenewversionoftheofficialdocumentationistoobadtouse313312...

在企业环境中，Elasticsearch一般部署为多个节点的分布式集群，对Elasticsearch集群的读取或写入请求需要在多个节点之间进行协调。在单个服务器节点上没有数据的“全局视图”，这是认知前提。当出现可靠性问题时，如果Elasticsearch集群设置有问题或整个集群不稳定，那么“紧急救火”可能会很紧张。往小了说，可能影响客户体验，客户用着不爽；往大了说，处理不及时或处理不利，可能对企业带来负面影响。因此，提前掌握快速恢复...

经常有人问，架构师的学习路线是什么？我一般推荐架构师的基本功，是从「存储选型」开始的。本文整理了存储选型的思路和整体框架，主要包括几个部分内容：了解目前的存储技术趋势，以及对开发人员新的要求存储选型的原则，避免日常的经典误区结合典型数据库特点，说明如何进行存储选型，提高业务开发效率常见的场景和解决方案1、存储技术发展看存储选型1.1存储类型多元化DBEngines数据库排名并不代表数据库的安装数量，或者使用...

题记几个月以来，我一直在记录自己开发Elasticsearch应用程序的最佳实践。本文梳理的内容试图传达Java的某些思想，我相信其同样适用于其他编程语言。我尝试尽量避免重复教程和Elasticsearch官方文档中已经介绍的内容。本文梳理的内容都是从线上实践问题和个人总结的经验汇总得来的。文章从以下几个维度展开讲解：映射（Mapping）设置（Setting）查询方式（Querying）实战技巧（Strategy）1、映射（Mapping）1.1避免使用nested类...

1、问题产生Kibana实现一个词云效果并不复杂，甚至可以说非常简单。大致可以分成如下几个步骤：步骤1：已有索引待做词云的text类型字段设置：fielddata为true，以便基于分词结果聚合操作。步骤2：在8.X的kibana的DataViews关联索引。步骤3：在dashboard控制面板选择AggregationBased下的Tagcloud，选择步骤1设定的字段，选择好时间范围，词云就可以生成。以构造微博数据（假数据）为例，词云效果如下所示：问题来了！怎么那么多...

1、背景由于种种原因，最近将核心业务生产使用的HBase迁移到了云上的弹性MapReduce（EMR)集群上，并使用了EMR的HBase组件默认参数配置。结果在流量高峰期出现了宿主机故障，挂掉了两个core节点（部署了regionserver和datanode)，大量regionrit，花了15分钟才自动恢复，硬生生吃了一个P0故障。复盘的时候发现，由于云上EMR对hdfs的socket超时参数默认设置了900000（15min),导致了region重新上线读取故障节点WAL日志的时候足足等...

1、企业级实战问题问题描述如下："path"："hdfs:xx.xx.xx:8200homelhtaaa.doc"。想检索到aaa文件。并且以doc为筛选条件。可行吗？就是我有文件数组。匹配到文件数组里的文件类型就检索出来？——问题来源：GPVIP微信群2、问题定义给定一个路径path，期待实现：输入扩展名，可以实现检索？扩展要求：有没有专门针对path路径的检索或者相关实现？问题描述清楚了，接下来我们先做分析和方案的探讨。3、解决方案的探讨思考几个问题...

1、真实面试问题死磕Elasticsearch技术群好友留言：2、面试官在问Elasticsearchrange过滤时，他内心在想什么？最基础的：看你了不了解range查询？其次：看你了不了解range查询支持哪些数据类型？再次：看你了不了解对应数据类型底层存储数据结构或算法？最后：看你了不了解对应数据结构的range查询原理？最根本的，想看你的底层原理扎不扎实？我们在被面试官面试的时候，实际上也是我们自己面试“面试官”。站在面试官的角度考...

本文是ServiceMesh系列第1篇随着云原生时代的来临，使用微服务架构的朋友们开始听到一个新的技术名词——ServiceMesh（现在来说已经不算新了）。对于一项新技术的学习，总归绕不过两个问题：它是什么？为什么需要它？本文将围绕这两个问题进行展开，期望对ServiceMesh有一个综述性的了解。最后，引发一个核心的思考：到底谁才需要ServiceMesh1、什么是ServiceMeshServiceMesh在国内被翻译「服务网格」。目前比较公认的是Buoyant...

最近新写了一个中间件「运行时动态日志等级开关」，其中使用JavaSPI机制实现了自定义配置中心，保证良好的扩展性。项目地址，走过路过可以点个star：）​​https:github.comsaiguLogLevelSwitch​​在使用过程中，突然发现SPI其实和日常写API接口，然后进行implements实现非常相似，那SPI到底和普通API实现有啥区别呢？带着这个问题，我们一起来梳理下SPI机制吧。本文预计阅读时间10分钟，将围绕以下几点展开：什么是SPI机制？S...

生产实践中，如果遇到业务流量变高导致服务负载升高甚至报警，我们的第一反应往往是「加机器」。俗话说，能用钱解决的问题都不是问题。俗话又说，充钱你就能变得更强。但是，作为一个有理想有抱负的架构师，除了「加机器」，其实你的微服务还能更优雅、更精细地进行优化。本文预计阅读时间10分钟，将从以下三个方面展开：从「AKF扩展立方」说起Y轴扩展的常用模式z轴扩展的思想与应用1、从「AKF扩展立方」说起在上一篇文章，我们...

使用开发工具，让Serverless开发变得更容易Serverless作为一个应用，云服务商给我们提供自己的开发工具，有了Serverless开发工具可以让我们对应用的管理、应用的调试和应用的部署变得更加方便，从应用的开发到服务的Serverless的上线给我们提供保障。由于国内的Serverless还处在刚刚起步阶段，所以开发工具并不多，典型的就是阿里云的函数计算Fun框架和ServerlessFramework框架了。函数计算Fun框架这个框架是使用nodejs进行开发...

一、背景随着云服务在各行各业的高速增长，传统IT服务正在逐步向云服务转变。在数据库方面，由于传统数据库管理的高复杂性、高成本以及低效率，导致越来越多的企业使用DBaaS作为其替代品。GreatRDS作为数据库服务的提供商，为用户提供了一套完整的DBaaS解决方案。DBaaS将数据库作为服务来交付，任何人都可以轻易地创建、使用、扩容和销毁数据库实例，由基础平台负责监控和运维，开发者可以做到只关心业务而屏蔽底层细节。DBaaS...

[本文正在参加星光计划3.0–夏日挑战赛](https:ost.51cto.composts13641)一、前言近年来随着国民经济的发展，交通拥堵和环境污染问题越来越突出，而自行车对改善交通与环境起到了重要作用。中国本身是一个自行车使用大国，随着自行车的发展，自行车的科技含量越来越高，然而自行车安防问题突出。目前市场上自行车锁大多是传统机械结构车锁，没有实现智能化，急需解决。本文提出一种基于STM32单片机的智能自行车锁（马蹄锁）的设...

创建容器并上传至dockerhub1.创建一个images首先进入一个目录，在目录中创建DockerfileshellmkdirdockerProject&&cddockerProjecttouchDockerfileDockerfile内容如下FROMubuntu:20.04拉取的镜像MAINTAINERtest作者RUNaptupdate执行语句EXPOSE80端口运行如下命令创建镜像sudodockerbuild.tname其中，name更换为镜像名，也可以是如下格式：testfirst:tag这个语句的意思是，镜像是属于test的，仓库名称是first，名称是tag。在命令...

振弦采集模块（振弦采集仪核心）运行状态指示器和信号质量指示运行状态指示在模块正常运行时RTS管脚输出逻辑1表示模块“正忙”，输出逻辑0表示模块“空闲”，详见“3.10振弦传感器测量流程”。模块“正忙”是指模块正在对振弦传感器进行读数操作，特别的，本模块具有传感器是否连接的检测功能，默认情况下仅当检测到有效的传感器接入时才会发起一次读数过程，而未检测到传感器连接时，模块会继续不断检测，此时RTS管脚持续输出1...

介绍一个分布式微服务RPC框架[英文说明文档](README.md)1.服务提供负载均衡策略序列化策略自动发现和注销服务注册中心2.安全策略心跳机制信息摘要3.设计模式单例模式动态代理静态工厂建造者策略模式Future(观察者）亮点1.信息摘要算法的应用对于信息摘要算法的使用，其实并不难，在数据包中添加String类型的成员变量checkCode用来防伪的就可以实现。原理发送端把原信息用HASH函数加密成摘要,然后把数字摘要和原信息一起发送到接...

Redis简介[Redis](https:redis.io)是一个主要由开发者SalvatoreSanfilippo（Antirez）开发的开源内存数据结构存储器，用于改进其网站的可伸缩性，可以用作数据库、缓存和消息代理等，可以在项目中结合着使用Redis。Redis有着丰富的数据结构、优秀的速度、齐全的功能，众多公司都在使用Redis，它有着如下的特点：快速NoSQL数据库支持众多环境Redis是一个内存数据库，这意味着所有的数据都保存在内存中，而不是硬盘上（当然也支持...

做不了5G手机，依旧是华为心口的痛、迈不过去的坎儿。虽然没有5G的​​华为Mate50系列上市不久就卖疯​​，意味着买华为手机的消费者似乎不那么在意华为手机有没有5G。不过显然对于华为自己来说，这似乎还是它心口的痛、迈不过去的坎儿。正因为此，10月18日，从工信部政务服务平台获悉，一款型号为NOHAN80的华为5G手机获得许可。新机型号神似Mate40Pro入网信息显示：华为这款新机支持NRNSANRSATDLTELTEFDDWCDMAcdma2000CDMA1XGS...