鸿蒙开发者社区

大家好，我是武哥。这是《吃透MQ系列》之Kafka的第3篇，错过前两篇文章的，建议再温习下：扒开Kafka的神秘面纱Kafka架构设计的任督二脉从这篇文章开始，我将从微观角度切入，深入分析Kafka的设计原理。本文要讲的是Kafka最具代表性的：存储设计。谈到Kafka的存储设计，了解不多的同学，可能会有这样的疑惑：为什么Kafka会采用Logging（日志文件）这种很原始的方式来存储消息，而没考虑用数据库或者KV来做存储？而对Kafka有所了...

大家好，我是武哥。这是《吃透MQ系列》的第三篇，有关Kafka的架构设计。这篇文章将带着大家参透：到底什么是Kafka架构设计的任督二脉？把握住了这个关键点，我相信你将能更好地理解Kafka的架构设计，进而顺藤摸瓜地掌握Kafka的核心技术方案。废话不多说了，开始发车。1.Kafka的技术难点究竟在哪？前一篇文章《扒开Kafka的神秘面纱》交代了两个关键信息：1、Kafka为实时日志流而生，要处理的并发和数据量非常大。可见，Kafka本身...

[TOC]Kubernetes基础知识kubernetes整体分为控制平面组件和节点组件节点组件有kubelet，kubeproxy和容器运行时容器运行时指的是负责运行容器的软件比如docker，kubeproxy负责网络代理，kubelet用来管理Kubernetes创建的容器，保证容器运行状态良好控制平面节点有APIServer，这个是访问的入口，调度器主要负责调度pod运行到工作节点中，控制器负责管理集群状态，etcd是存储服务，保存集群数据，而pod就是一个虚拟主机或者物理主...

在开发过程中想要与开发板进行通信一般使用串口通信，当开发板使用串口与pc通信还需要专门的串口转换工具才行。而小凌派开发板自带wifi功能。因此与pc通信时可以使用wifi功能进行tcp通信这样就不需要专门的转换工具非常方便。一、在使用小凌派开发板wifi进行tcp通信的步骤1、要确定pc机所连接路由的wifi名称和密钥。通过修改代码使小凌派连接到与pc同一网络。修改文件devicerockchiprk2206sdkliteosboardsrcconfignetwork.c中的...

一、智慧路灯简介我们平时看到的传统路灯基本是通过定时开启、定时关闭来控制路灯亮灭，在夏天白昼时间长，路灯过早开启，造成能源浪费；在冬天白昼时间短，往往经常是天已经黑了，路灯却未开启，给人们的出行带来了诸多不便；也有的路灯通过专人手动开启关闭，这种方式虽较定时方式灵活，但也存在需要人为操作的局限性。随着社会的发展进步，智慧路灯应运而生，智慧路灯通过自身携带的光线传感器，通过传感器采集的的光线数据...

1.1Graalvm1.1.1简介GraalVM是一种高性能运行时，可显着提高应用程序性能和效率，非常适合微服务.对于Java程序GraalVM负责将Java字节码编译成机器码，映像生成过程使用静态分析来查找可从主Java方法访问的任何代码，然后执行完全提前(AOT)编译。生成的本机二进制文件包含机器代码形式的整个程序，以便立即执行。1.1.2环境准备Brew安装brewinstallcaskgraalvmtapgraalvmceltsjava11guinstallnativeimage下载安装1.下载GraalVM:ht...

前言大家好，我是捡田螺的小男孩。作为后端开发，不管是什么语言，Java、Go还是C++，其背后的后端思想都是类似的。后面打算出一个后端思想的技术专栏，主要包括后端的一些设计、或者后端规范相关的，希望对大家日常工作有帮助哈。我们做后端开发工程师，主要工作就是：如何把一个接口设计好。所以，今天就给大家介绍，设计好接口的36个锦囊。本文就是后端思想专栏的第一篇哈。1.接口参数校验入参出参校验是每个程序员必备的基本...

大家好，我是田螺。今天跟大家就CPU、磁盘、网络及内存方面的问题，聊聊如何排查和调优。•CPU过高，怎么排查问题•linux内存•磁盘IO•网络IO•java应用内存泄漏和频繁GC•java线程问题排查•常用jvm启动参数调优linuxCPU过高，怎么排查问题CPU指标解析•平均负载◆平均负载等于逻辑CPU个数，表示每个CPU都恰好被充分利用。如果平均负载大于逻辑CPU个数，则负载比较重•进程上下文切换◆...

10.你们项目使用了RocketMQ对吧？那你知道如何保证消息不丢失吗？一个消息从生产者产生，到被消费者消费，主要经过这3个过程：1.生产者产生消息2.消息发送到存储端，保存下来3.消息推送到消费者，消费者消费完，ack应答。因此如何保证MQ不丢失消息，可以从这三个阶段阐述：•生产者保证不丢消息•存储端不丢消息•消费者不丢消息10.1生产者保证不丢消息生产端如何保证不丢消息呢？确保生产的消息能顺利到达存储端。...

前言大家好，我是程序员田螺。最近有位读者去面试了oppo，给大家整理了面试真题的答案。希望对大家有帮助哈，一起学习，一起进步。1.聊聊你印象最深刻的项目，或者做了什么优化。2.你项目提到分布式锁，你们是怎么使用分布式锁的3.常见分布式事务解决方案4.你们的接口幂等是如何保证的？5.你们的MySQL架构是怎样的？6.常见的索引结构有？哈希表结构属于哪种场景？7.给你ab,ac,abc字段，你是如何加索引的？8.数据库隔离级别是否...

一、前言前两天做了一个导入的功能，导入开始的时候非常慢，导入2w条数据要1分多钟，后来一点一点的优化，从直接把list怼进Mysql中，到分配把list导入Mysql中，到多线程把list导入Mysql中。时间是一点一点的变少了。非常的爽，最后变成了10s以内。下面就展示一下过程。二、直接把list怼进Mysql使用mybatis的批量导入操作：Transactional(rollbackForException.class)publicintaddFreshStudentsNew2(List<FreshStudentAndStudent...

12.如何快速判断一个数是奇数还是偶数，除开对2取余呢。判断一个数是奇数还是偶数，我们最容易想到的就是对2取余。if(x%2)奇数else偶数还有一种方法，就是与1相与（&1），具体实现如下：if(x&1)奇数else偶数13.Spring声明式事务原理？哪些场景事务会失效？13.1声明式事务原理spring声明式事务，即Transactional,它可以帮助我们把事务开启、提交或者回滚的操作，通过Aop的方式进行管理。在spring的bean的初始化过程中，就需要对...

8.数据库隔离级别是否了解？你们的数据库默认隔离级别是？为什么选它？四大数据库隔离级别，分别是读未提交，读已提交，可重复读，串行化（Serializable）。&bull;读未提交：事务即使未提交，却可以被别的事务读取到的，这级别的事务隔离有脏读、重复读、幻读的问题。&bull;读已提交：当前事务只能读取到其他事务提交的数据，这种事务的隔离级别解决了脏读问题，但还是会存在不可重复读、幻读问题；&bull;可重复读：限制了读取...

4.你们的接口幂等是如何保证的？如果你调用下游接口超时了，是不是考虑重试？如果重试，下游接口就需要支持幂等啦。实现幂等一般有这8种方案：&bull;select+insert+主键唯一索引冲突&bull;直接insert+主键唯一索引冲突&bull;状态机幂等&bull;抽取防重表&bull;token令牌&bull;悲观锁(如selectforupdate，很少用)&bull;乐观锁&bull;分布式锁大家平时是用哪个方案解决幂等的，最后结合工作实际讲讲哈。可以看下我之前这篇文章:聊聊...

本文作者：张勇，现任科大讯飞高级架构师。11年后端经验，曾就职于同程艺龙、神州优车等公司。乐于分享、热衷通过自己的实践经验平铺对技术的理解。一位七牛的资深架构师曾经说过这样一句话：“Nginx+业务逻辑层+数据库+缓存层+消息队列，这种模型几乎能适配绝大部分的业务场景。这么多年过去了，这句话或深或浅地影响了我的技术选择，以至于后来我花了很多时间去重点学习缓存相关的技术。我在10年前开始使用缓存，从本地缓存、...

每个人都有成长的渴望，也都会遇到成长的瓶颈。下面这个问题是一个读者问我的：如何才能训练成为一个编程高手？先简单说下这个读者的背景：工作3年多，目前在大厂做后台开发，身边有不少编程高手，是他想要追赶的目标。最近半年时间，他花了一些精力在研究源码和底层原理上，但总觉得这些知识和实际工作衔接不好，提升很慢，学习动力也越来越差，希望我能给点建议。我和他语音聊了半个小时，讲了一些我个人以及身边同事的案例。...

03问题分析上一章节基本把这个Bug相关的原理知识介绍清楚了，下面正式进入问题的分析过程。最开始拿到这个问题，我也是比较头秃的，尤其看到读者下面这段信息。当然，我的功力是达不到盲猜水平的，说下我的完整思路。第1步复现问题我让读者给我打包发了Demo的源代码、数据库脚本以及ShardingProxy配置，然后本地安装了ShardingProxy4.1.1版本，再通过Navicat连接到ShardingProxy执行数据库脚本，环境基本就准备完毕了。启动Demo...

经典著作《重构》这本书中有这么一段话：一开始，我所做的重构都停留在细枝末节上。随着代码趋向简洁，我发现自己可以看到一些设计层面的东西了，这些是我以前理解不到的，如果没有重构，我达不到这种高度。重构，着实是一件让程序员兴奋的事情。今年年初，我们团队完成了一个复杂项目的重构工作，它属于广告系统最核心的引擎部分，大概有300多个文件，3万多行代码。从技术方案设计到最终全量上线仅仅花了1个月左右的时间，而且...

在斯坦福大学,乔布斯做了一场我认为他最精彩的演讲。他讲的第一个故事是connectingthedots，这也是贯穿他一生非常重要的思想。“你不可能充满预见地将生命的点滴串联起来；只有在你回头看的时候，你才发现这些点点滴滴之间的联系。所以，你要坚信，你现在所经历的将在你未来的生命中串联起来…正是这种信仰让我不会失去希望，它让我的人生变得与众不同。”我不禁在想：我的编码以及架构生涯中，那些点是什么，又终将会连成怎样...

这篇文章记录了给Apache顶级项目分库分表中间件ShardingSphere提交Bug的历程。说实话，这是一次比较曲折的Bug跟踪之旅。10月28日，我们在GitHub上提交issue，中途因为官方开发者的主观臆断被Close了两次，直到11月20日才被认定成Bug并发出修复版本，历时20多天。本文将还原该Bug的分析过程，将有价值的经验和技术点进行提炼。通过本文，你将收获到：1、疑难问题的排查思路2、数据库中间件ShardingProxy的原理3、MySQL预编译的流...