鸿蒙开发者社区

这几天瞎逛，不知道在哪里瞟到了缓存的双写，就突然想起来这块虽然简单，但是细节上还是有足够多我们可以去关注的点。这篇文章就来详细聊聊双写一致性。首先我们知道，现在将高速缓存应用于业务当中已经十分常见了，甚至可能跟数据库的频率不相上下。你的用户量如果上去了，直接将一个裸的MySQL去扛住所有压力明显是不合理的。这里的高速缓存，目前业界主流的就是Redis了，关于Redis相关的文章，之前也有聊过，在此就不赘述，感...

虽然说单机的Redis性能很好，也有完备的持久化机制，那如果你的业务体量真的很大，超过了单机能够承载的上限了怎么办不做任何处理的话Redis挂了怎么办带着这个问题开始我们今天的主题「Redis高可用」，由于篇幅原因，本章就只聊聊主从复制。为啥要先从主从复制开始聊，是因为「主从复制」可以说是整个Redis高可用实现的基石，你可以先有这么一个概念，至于具体为什么是基石，这个后面聊到Sentinel和Redis集群的时候会说到。首先...

前言上文我们聊了基于Sentinel的Redis高可用架构，了解了Redis基于读写分离的主从架构，同时也知道当Redis的master发生故障之后，Sentinel集群是如何执行failover的，以及其执行failover的原理是什么。这里大概再提一下，Sentinel集群会对Redis的主从架构中的Redis实例进行监控，一旦发现了master节点宕机了，就会选举出一个Sentinel节点来执行故障转移，从原来的slave节点中选举出一个，将其提升为master节点，然后让其他的节...

默认情况下，云开发的函数部署在公共网络中，只可以访问公网。如果开发者需要访问腾讯云的Redis、TencentDB、CVM、Kafka等资源，需要建立私有网络来确保数据安全及连接安全。本文会演示如何在云开发的函数中使用Redis，如需访问其他数据库资源，也可以参考本文的思路。▌Redis介绍及应用场景Redis是一个开源的InMemory的NoSQL数据库，可以用作数据库、缓存和消息中间件。支持多种类型的数据结构，如字符串（strings）、散列（ha...

本文介绍目前业界非常火热的“云原生（CloudNative）”相关知识结构，包括微服务、DevOps、持续交付、服务网格、Serverless等相关知识点。“云原生”通过提供一套完整的技术体系和方法论来指导我们在云环境下，在系统功能越来越复杂的情况下，还能够做到敏捷开发并保证系统可用性。云原生产生背景随着云计算平台的成熟和分布式框架的普及，应用上云已经是不可逆转的趋势，未来应用会分成两种，一种是“构建云”的，另一种是“基...

题记源自“死磕Elasticsearch”技术群里的讨论问题：我的思考如下：1、pdf、Office类的文档如何被ES索引？问题转嫁为：如何将Office类文档、PDF文档导入ES建立索引，并提供全文检索服务？2、Elasticsearch支持的最大待检索字段的长度是多大？ES5.X版本以后，keyword支持的最大长度为32766个UTF8字符，text对字符长度没有限制。设置ignoreabove后，超过给定长度后的数据将不被索引，无法通过term精确匹配检索返回结果。3、Office...

少废话，说正事。一、高级检索的功能点通过高级搜索配置搜索项，能更准确的过滤掉不相干信息，获取最想要的检索信息。以Google搜索为例（截取核心片段）：二、高级检索拆分1、包含以下全部的关键词：需要分词处理；若需要指定字段，则使用matchQuery实现；若无需指定字段的全文检索，则使用queryStringQuery实现；2、包含以下的完整关键词：需要完整匹配字符，使用wildcardQuery结合””实现；3、包含以下任意一个关键词：空格...

题记Elasticsearch当清理缓存（echo3>procsysvmdropcaches）的时候，出现如下集群健康值：red，红色预警状态，同时部分分片都成为灰色。查看Elasticsearch启动日志会发现如下：集群服务超时连接的情况。该问题排查耗时很长，问题已经解决。特将问题排查及解决方案详尽的整理出来。1、集群状态解读head插件会以不同的颜色显示。参考官网：http:t.cnRltLEpN（部分中文集群健康状态博文资料翻译的不够精确，以官网为准）如果集群状...

0、引言在关系型数据库如Mysql中，设计库表需要注意的是：表的设计遵守范式约束，考虑表的可扩展性，避免开发后期对表做大的改动。Mysql或者Oracle中，修改数据类型相对比较简单，通过命令行或者navicat、sqldeveloper等可视化工具直接修改。即便千万级别数据量，多等点时间，也能修改好。而在Elasticsearch非关系型数据存储的搜索引擎中，设计表对应的就是Mapping的设计。且ES中一旦字段设定后，不能修改。当然，这也不是绝对...

由于其他几种类型节点和用途都很好理解，无非主节点、数据节点、路由节点。Ingest的用途：1）Ingest节点和集群中的其他节点一样，但是它能够创建多个处理器管道，用以修改传入文档。类似最常用的Logstash过滤器已被实现为处理器。2）Ingest节点可用于执行常见的数据转换和丰富。处理器配置为管道。在写入时，IngestNode有20个内置处理器，例如grok，date，gsub，小写大写，删除和重命名等。3）在批量请求或索引操作之前，Ingest...

0、引言本文翻译自Elasticsearch20170918热乎的官方博客，原作者：ChristianDahlqvist。在构建Elasticsearch集群的初期如果集群分片设置不合理，可能在项目的中后期就会出现性能问题。Elasticsearch是一个非常通用的平台，支持各种各样的用例，并且为数据组织和复制策略提供了巨大灵活性。这种灵活性使得作为ELK新手的你将数据组织成索引和分片变得困难。虽然不一定会在首次启动时出现问题，但由于数据量随时间的推移，可能会导...

作者MicroStone来源今日头条本文我们来讲解一下如何使用gRPC构建微服务，gRPC是一个开源框架，可用于构建可扩展且高性能的微服务并创建服务之间的通信。背景随着企业越来越多地转向微服务，对构建这些微服务的低延迟和可扩展框架的需求也在增加。为了满足这一需求，各种工具和框架提供商正加快满足微服务需求。同时从构建大型微服务应用程序的经验中学习，技术专业人士分享他们对可重用组件的知识，以便其他人可以构建具有相同...

作者MicroStone来源今日头条开发团队越来越多地选择微服务架构而不是单体结构，以提高应用程序的敏捷性、可扩展性和可维护性。随着决定切换到模块化软件架构——其中每个服务都是一个独立的单元，具有自己的逻辑和数据库，通过API与其他单元通信——需要新的测试策略和新的测试工具。测试微服务是微服务应用程序过程的关键部分：您需要确保您的代码不会在单元内中断，微服务中的依赖项继续工作(并快速工作)，并且您的API符合定...

作者MicroStone来源今日头条当您选择将应用程序构建为一组微服务时，您需要决定应用程序的客户端将如何与微服务交互。对于单体应用程序，只有一组(通常是复制的、负载平衡的)端点。然而，在微服务架构中，每个微服务都暴露了一组通常是细粒度的端点。在本文中，我们研究了这如何影响客户端到应用程序的通信，并提出了一种使用API网关的方法。介绍假设您正在为购物应用程序开发本机移动客户端。您可能需要实现一个产品详细信息页...

作者MicroStone来源今日头条模式语言提供了讨论问题的交流术语，它明确了特定场景、特定问题的解决方案和延伸性思考。模式语言主要目的是帮助开发者解决在设计和编程中遇到的共同的问题，即清晰的问题陈述、体现问题的解决方案以及推动解决方案的力量(Force)的清晰表述。微服务架构作为一个现在流行的服务架构，也有一套属于自己的模式。这篇文章是微服务架构相关模式语言的一个提纲。ChrisRichardson从不同的角度，对相关的模...

作者MicroStone来源今日头条前提考虑一下一家外卖公司应用程序，它是一个在线食品配送应用程序。应用程序的客户端通过发出HTTPPOSTorders请求来创建订单，并期望在600毫秒内得到响应。由于该应用程序使用微服务架构，实现订单创建的职责分散在多个服务中。POST请求首先被路由到，然后OrderService它必须与以下服务协作：RestaurantService了解餐厅的菜单和价格ConsumerService知道下Consumer订单的状态KitchenService创建一个Ti...

作者MicroStone来源今日头条介绍好吧，标题似乎是一个大胆的陈述，所以让我们澄清一下我所说的微服务系统是什么意思。我不是指要在生产中使用的任何类型的框架，只是一个了解微服务架构的挑战以及它如何在幕后工作的项目。我不打算将这个系列作为分步指南，因为到最后它可能至少有100篇文章。相反，我将尝试写关于设计选择、如何编写一些机制并突出一些有趣的问题(从全栈开发人员的角度来看)我在此过程中偶然发现。我们在建造什...

作者MicroStone来源今日头条本文是“BankNext”的案例研究：它包括数字化转型、客户入职流程以及事件驱动和隐藏地雷。业务目标“BankNext”正处于雄心勃勃的数字化转型阶段，并希望使其客户入职流程无缝衔接。经过详细的功能流程分析，BankNext实现了一个编排架构，可以在各种微服务之间进行协作。业务流程启动：潜在客户在BankNext上启动加入流程预检查：BankNext首先调用筛选MSvc和重复数据删除Msvc来研究潜在客户并确保该实...

作者MicroStone来源今日头条在本文中，我们将着眼于代码生成工具JHipster生成和支持的微服务架构。JHipster是一个代码生成工具，可以为Kubernetes创建Web应用程序、微服务、部署文件、云集成和CICDJenkins文件。这个工具对于可以快速生成代码并避免创建样板代码的开发人员非常有帮助，可以节省30%的工作量。JHipster支持SpringBoot中的后端代码和AngularReactVue.js中的前端代码。在本文中，我们将研究JHipster生成和支持的微服...