鸿蒙开发者社区

温馨提示：整个Kafka专栏基于kafka2.2.1版本。1、KafkaConsumer概述根据KafkaConsumer类上的注释上来看KafkaConsumer具有如下特征：在Kafka中KafkaConsumer是线程不安全的。2.2.1版本的KafkaConsumer兼容kafka0.10.0和0.11.0等低版本。消息偏移量与消费偏移量(消息消费进度)Kafka为分区中的每一条消息维护一个偏移量，即消息偏移量。这个偏移量充当该分区内记录的唯一标识符。消费偏移量(消息消费进度)存储的是消费组当前的处理...

P60和MateX3新品发布不到一个月，华为又有2款新机即将发布。如此频繁的发布新机，我们熟悉的那个华为似乎又回来了！华为又有2款新机发布近日，华为官方宣布，将于4月17日14：30分举行华为nova11系列及全场景新品发布会。据悉发布会除了nova11新机，还有华为畅享60X、华为Watch4系列、华为手环8、AITO问界M5智驾版等一系列新品。从华为预热的海报来看，华为nova11的摄像头模组与华为P60系列极为相似。绿色的素皮版后壳还印有nova...

Netty是一款非常优秀的网络编程框架，是对NIO的二次封装，本文将重点剖析Netty客户端的启动流程，深入底层了解如何使用NIO编程客户端。本文是笔者基于问题的启发式源码阅读技巧的展示，请带着如下问题开始本文的阅读：Netty是如何将客户端的事件加入到事件链中？Netty客户端在启动时需要注册读事件？Netty客户端在启动时需要注册写事件？如果让你基于NIO写一个客户端需要实现的关键点是什么呢？上面的问题也可以这样问：在使用N...

笔者看来Netty的内核主要包括如下图三个部分：其各个核心模块主要的职责如下：内存管理主要提高高效的内存管理，包含内存分配，内存回收。网通通道复制网络通信，例如实现对NIO、OIO等底层JAVAAPI的封装，简化网络编程模型。线程模型提供高效的线程协作模型。大家不妨回想一下在以往的面试的过程中，面试官通常会问：Netty的线程模型是什么？主从多Reactor模型，相信大家都能脱口而出，然后呢？就没有然后了？线程模型在网络通...

本文主要介绍网络通信中与通信息息相关的重要部分：通信协议的底层实现原理：编码与解码。温馨提示：源码分析或许比较枯燥，在浏览的过程中建议重点关注黑色字体与流程图，是根据源码进行的提炼，突出源码背后的设计理念。1、Netty4编码解码概述Netty中定义的编码解码器核心类图如下：Decoder(解码器)继承自Inbound事件处理器，而Encoder(编码器)继承自Outbound事件处理器。其实不难理解，以服务端接收请求、返回响应结果的视角...

Dubbo在众多的微服务框架中脱颖而出，占据RPC服务框架的半壁江山，非常具有普适性，熟练掌握Dubbo的应用技巧后深刻理解其内部实现原理，让大家能更好的掌控工作，助力职场，特别能让大家在面试中脱颖而出。那Dubbo内部的设计理念，实现原理是什么呢？本文将结合官方提供的3张图，从如下三个方面介绍其内部的核心实现、以及如何指导实践。1、服务注册与发现机制Dubbo的服务注册与发现机制如下图所示：在Dubbo中存在4类角色：Regi...

编者说：本篇由读者投稿，融入开源社区、将自己的目开源将极大提升技术影响力，对职场具有无法比拟促进性。初衷：数据文件的处理，其中涉及到一些定时任务处理。当时刚进XXX公司参与第一个项目，但是意识到公司的产品业务基本上都是围绕数据做一些信息或线索的挖掘，尤其是离线数据，应该会有很多各种各样的任务式场景，编写一个通用的轻量级定时任务处理，能够提高工作中的开发效率和质量，以及运维的能力。目标：设计一个通用...

上一篇详细介绍了Netty的编解码的基本实现原理，本节将重点探讨网络编程中一种非常通用的协议设计方法论：协议头+消息体。所谓的通信协议就是通信双方共同遵循的一种“约定”，用于通信发送方将内容按照“通信协议”所规定的格式组装成“二进制流”，通信接收方按照“通信协议”所规定的格式正确的从二进制流中解码出一个个原始请求。那通信协议如何设计呢？温馨提示：本文遵循的目录结构:先提炼通信协议设计的通用方法论，然后...

一桩21亿元的收购案，引发了华为深夜紧急回应。21亿收购案遭华为反对近日，东方材料的跨界收购遭到了华为的“打脸”。​4月9日晚间，东方材料发布公告称，公司拟定增募资不超20亿元，以21.22亿元的总价收购诺基亚持有的TDTECH51%股权。东方材料表示，募投项目实施后，TDTECH将成为东方材料的控股子公司，上市公司的主营业务将新增行业无线产品、终端产品及物联网产品。​很显然，油墨行业的不景气，让东方材料产生了跨界的心，...

对华为来说，维护好当前的合作伙伴，以销量和口碑来吸引更多的新客户，是比为问界加上“HUAWEI”更加重要的工作。在上周，奇瑞汽车搞了个大动作，领先于苹果发布了“iCAR”品牌，还带来了一系列新能源战略以及新品牌、新车型。在令人目不暇接的新品当中，最值得关注的应该是两款新车型：星途星纪元STERRAES、STERRAET。除了它们本身够出彩之外，还因为这两款车剧透了华为与奇瑞合作的智选车新车型。问界的下一站：奇瑞在过去两...

什么是XA规范XA规范是XOpen组织定义的分布式事务处理（DTP，DistributedTransactionProcessing）标准。XA规范描述了全局的事务管理器与局部的资源管理器之间的接口。XA规范的目的是允许多个资源（如数据库，应用服务器，消息队列等）在同一事务中访问，这样可以使ACID属性跨越应用程序而保持有效。XA规范使用两阶段提交来保证所有资源同时提交或回滚任何特定的事务。关于两阶段提交事务模式不清楚的可以看之前的文章：​​七种...

本文主要讲述如何使用数据导入工具NebulaGraphExchange将数据从Neo4j导入到NebulaGraphDatabase。在讲述如何实操数据导入之前，我们先来了解下NebulaGraph内部是如何实现这个导入功能的。01Exchange数据处理原理我们这个导入工具名字是NebulaGraphExchange，采用Spark作为导入平台，来支持海量数据的导入和保障性能。Spark本身提供了不错的抽象——DataFrame，使得可以轻松支持多种数据源。在DataFrame的支持下，添加新的数据源...

本文作者系微信技术专家李本利图数据在社交推荐、多跳实时计算、风控和安全等领域有可期待的前景。如何用图数据库高效存储和查询大规模异构图数据，是一个重大挑战。本文描述了开源分布式图数据库NebulaGraph实践中遇到的问题，并通过深度定制，实现：大数据集存储、小时级全量导入、多版本控制、秒级回滚、毫秒级访问等特性。01背景为大众所熟知的图数据库大多在大数据集合上束手无策，如：Neo4j的社区版本，采用Cypher语言，...

这篇文章就来解答介绍一下权限系统的设计以及主流的五种权限模型。权限管控可以通俗的理解为权力限制，即不同的人由于拥有不同权力，他所看到的、能使用的可能不一样。对应到一个应用系统，其实就是一个用户可能拥有不同的数据权限（看到的）和操作权限（使用的）。主流的权限模型主要分为以下五种：ACL模型：访问控制列表DAC模型：自主访问控制MAC模型：强制访问控制ABAC模型：基于属性的访问控制RBAC模型：基于角色的权限访问...

今天这篇文章介绍一下RPC中如何使用时钟轮实现定时任务，比如调用端的超时处理、定时心跳....定时任务带来了什么问题？在讲解时钟轮之前，我们先来聊聊定时任务。相信你在开发的过程中，很多场景都会使用到定时任务，在RPC框架中也有很多地方会使用到它。就以调用端请求超时的处理逻辑为例，下面我们看一下RPC框架是如果处理超时请求的。在讲解Future的时候说过：无论是同步调用还是异步调用，调用端内部实行的都是异步，而调用...

上周知识星球中的球友问了一个关于websocket的问题，大致如下：简单的概括一下：如果我们的项目是分布式环境，登录的用户被Nginx的反向代理分配到多个不同服务器，那么在其中一个服务器建立了WebSocket连接的用户如何给在另外一个服务器上建立了WebSocket连接的用户发送消息呢？今天就来解答一下球友的问题：其实，要解决这个问题就需要实现分布式WebSocket，而分布式WebSocket一般可以通过以下两种方案来实现：将消息（<用户id...

上周知识星球中的球友问了一个关于websocket的问题，大致如下：简单的概括一下：如果我们的项目是分布式环境，登录的用户被Nginx的反向代理分配到多个不同服务器，那么在其中一个服务器建立了WebSocket连接的用户如何给在另外一个服务器上建立了WebSocket连接的用户发送消息呢？今天就来解答一下球友的问题：其实，要解决这个问题就需要实现分布式WebSocket，而分布式WebSocket一般可以通过以下两种方案来实现：将消息（<用户id...

今天这篇文章聊一聊接口安全问题，涉及到接口的加密、解密和产品、前端同学对外需求后，梳理了相关技术方案，主要的需求点如下：尽量少改动，不影响之前的业务逻辑；考虑到时间紧迫性，可采用对称性加密方式，服务需要对接安卓、IOS、H5三端，另外考虑到H5端存储密钥安全性相对来说会低一些，故分针对H5和安卓、IOS分配两套密钥；要兼容低版本的接口，后面新开发的接口可不用兼容；接口有GET和POST两种接口，需要都要进行加解密...

ShardingJDBC目前还整合其他分布式事务模式来解决事务问题，今天就来介绍一下两阶段事务XA是如何解决分布式事务什么是XA规范XA规范是XOpen组织定义的分布式事务处理（DTP，DistributedTransactionProcessing）标准。XA规范描述了全局的事务管理器与局部的资源管理器之间的接口。XA规范的目的是允许多个资源（如数据库，应用服务器，消息队列等）在同一事务中访问，这样可以使ACID属性跨越应用程序而保持有效。XA规范使用两阶段...

SpringSecurityOAuth2的授权码模式一直是个难点，如果你对底层的原理不太理解的话很难去定位到其中的问题今天这篇文章就针对这位朋友提出的问题做个解答，分为如下三个部分：授权码模式的登录页面重定制授权码模式的授权页面重定制授权码模式的异常页面重定制关于OAuth2的授权码模式有不理解的可以看陈某之前文章：​​妹子始终没搞懂OAuth2.0，今天整合SpringCloudSecurity一次说明白！​​授权码模式的登录页面重定制下面就以...