鸿蒙开发者社区
- 登录/注册
默认
发布时间
热度
原创
精华
Redis 内存优化神技，小内存保存大数据
大家好，我是「码哥」，大家可以叫我靓仔。这次码哥跟大家分享一些优化神技，当你面试或者工作中你遇到如下问题，那就使出今天学到的绝招，一招定乾坤！❝如何用更少的内存保存更多的数据？我们应该从Redis是如何保存数据的原理展开，分析键值对的存储结构和原理。从而继续延展出每种数据类型底层的数据结构，针对不同场景使用更恰当的数据结构和编码实现更少的内存占用。为了保存数据，Redis需要先申请内存，数据过期或者内存...开发语言微服务Spring Boot Dubbo 构建分布式服务
SpringBootDubbo构建分布式服务概述：节点角色说明调用关系说明服务容器Container负责启动，加载，运行服务提供者。服务提供者Provider启动的时候，向注册中心Registry注册自己提供的服务。服务消费者Consumer在启动的时候，向注册中心Registry订阅自己所需要的服务。注册中心Registry返回服务提供者的地址列表给消费者，如果有变更注册中心将基于长连接推送变更数据给消费者。服务消费者从提供者地址列表中，基于软负载均衡算...开发语言框架语言ReentrantReadWriteLock读写锁
概述ReentrantReadWriteLock是Lock的另一种实现方式，我们已经知道了ReentrantLock是一个排他锁，同一时间只允许一个线程访问，而ReentrantReadWriteLock允许多个读线程同时访问，但不允许写线程和读线程、写线程和写线程同时访问。相对于排他锁，提高了并发性。在实际应用中，大部分情况下对共享数据（如缓存）的访问都是读操作远多于写操作，这时ReentrantReadWriteLock能够提供比排他锁更好的并发性和吞吐量。读写锁内部维护...开发语言分布式数据库面霸篇：高频 Java 基础问题核心卷一（下篇）
续：面霸篇：高频Java基础问题核心卷一（上篇）Exception与Error区别？❝码老湿，他们的相同点是什么呀？Exception和Error都是继承了Throwable类，在Java中只有Throwable类型的实例才可以被抛出（throw）或者捕获（catch），它是异常处理机制的基本组成类型。Exception和Error体现了Java平台设计者对不同异常情况的分类。异常使用规范：◆尽量不要捕获类似Exception这样的通用异常，而是应该捕获特定异常◆不要生吞（swallow）...开发语言分布式数据库#夏日挑战赛#OpenHarmony JS 关系型数据库使用示例
原创 精华[本文正在参加星光计划3.0–夏日挑战赛](https:ost.51cto.composts13954)作者：杜晨阳概述在应用开发的过程中，数据存储是一项重要功能。那么在鸿蒙系统中，作为数据持久化存储之一的数据库是怎么使用的呢？下面给大家带来的是基于api8版本的数据库使用示例导入模块javascriptimportdataRdbfrom'ohos.data.rdb'关系型数据库的使用1、创建数据库及表格javascriptconstSQLCREATETABLE"CREATETABLEIFNOTEXISTS"+TABLENAME+"(IDINTE...开鸿HarmonyOSJS数据库OpenHarmony鸿蒙离线云监测系统工程设备在线监测服务器
离线云监测系统OfflineCloudMonitoringSystemOCMS概述OCMS是什么？OCMS（OfflineCloudMonitoringSystem）是利用人们熟知的稳定可靠的第三方电子邮件、FTP服务商提供的数据永久存储服务作为中间环节，监测设备向服务器发送数据，监测软件从服务器获取数据的以非实时在线的方式工作的无线监测预警系统。具有数据可靠、部署快捷、操作简单、无需在线等主要优势和特点。OCMS有何优势？逻辑清晰：使用第三方服务器，监测设备将数据发...工程监测服务器监测系统JVM 中不正确的类加载顺序导致应用运行异常问题分析
编者按：两位笔者分享了不同的案例，一个是因为JDK小版本升级后导致运行出错，最终分析定位原因为应用启动脚本中指定了Classpath导致JVM加载了同一个类的不同版本，而JVM在选择加载的类则是先遇到的先加载，进而导致应用出错，该问题的根因是设置了错误的Classpath。第二个案例是在相同的OS、JDK和应用，不同的文件系统导致应用运行的结果不一致，最终分析定位的原因是JVM在加载类时遇到了多个版本的问题，但是该问题的根因是没...服务器操作系统使用jemalloc解决JVM内存泄露问题
编者按：JVM发生内存泄漏，如何能快速定位到内存泄漏点并不容易。笔者通过使用jemalloc（可以替换默认的glibc库）中的profiling机制（通过对程序的堆空间进行采样收集相关信息），演示了如何快速找到内存泄漏的过程。Java的内存对象一般可以分为堆内内存、堆外内存和Nativemethod分配的内存，对于前面两种内存，可以通过JVM的GC进行管理，而Nativemethod则不受GC管理，很容易引发内存泄露。NativeMethod导致的内存泄漏，无法使...服务器操作系统openEuler Kernel 技术解读 | UADK框架介绍
UADK全称为UserSpaceAcceleratorDevelopmentKit,是一套用户态硬件加速器开发工具集，旨在SVA技术下用户可以高效地利用鲲鹏硬件加速器能力，为用户提供基础的库和驱动支持，通俗地说就是给数据进行压缩解压缩、加解密等处理加速的软件库。UADK作为通用的加速器用户态框架并不只是支持鲲鹏加速器，配合UACCE框架可以支持任何厂商的加速器硬件，openEuler21.09Kernel已完整回合支持SVA。UADK框架分析UADK完整组件包括：支持SVA的加...服务器操作系统openEuler Kernel 特性解读 | BPF 数据传递的桥梁 – BPF map
什么是MAPmap是驻留在内核空间中的高效键值仓库（keyvaluestore）。map中的数据可以被BPF程序访问，如果想在多个BPF程序之间保存状态，可以将状态信息放到map。map还可以从用户空间通过文件描述符访问，可以在任意BPF程序以及用户空间应用之间共享。Map就是它们之间的一个桥梁。MAP创建只能在用户态创建，根据是否用户显式创建，可分为用户态程序创建和加载器创建两种方式。Map创建后具有全局唯一的id。BPFMAPCREATE系统调用返...服务器操作系统StratoVirt：下一代轻量级虚拟化VMM
StratoVirt是什么Strato，取自stratosphere，意指地球大气层中的平流层，大气层可以保护地球不受外界环境侵害，而平流层则是大气层中最稳定的一层；类似的，虚拟化技术是操作系统平台之上的隔离层，既能保护操作系统平台不受上层恶意应用的破坏，又能为正常应用提供稳定可靠的运行环境；以Strato入名，寓意为保护openEuler平台上业务平稳运行的轻薄保护层。同时，Strato也承载了项目的愿景与未来：轻量、灵活、安全和完整的保护...服务器操作系统深入浅出Greenplum Bitmap Index（上篇）
位图（bitmap）索引是Greenplum中所特有（对比PostgreSQL）的一种索引类型，非常适用于大数据量且数据修改需求不大的数据分析场景（OLAP）中使用。Bitmap索引可以保证在提供优良查询速度的前提下，使用更小的空间开销，能够有效节省大数据量环境的硬盘空间使用，从而降低系统运行成本。1什么是BitmapIndexBitmapIndex非常类似于RevertedIndex(转置索引，或倒排索引)，是一种反向索引，使用位图（bitmap）结构来记录某个唯一Key...Greenplum数据库深入浅出GPORCA 优化器Transform流程
优化器是数据库的关键组件，GPORCA是Greenplum中的强大的模块化查询优化器，帮助用户对SQL进行优化，生成高效的查询计划，提高查询效率。GPORCA优化器架构是基于Cascades模型，本文将对GPORCA优化器的Transform流程进行详细介绍。优化器简介SQL是一种描述性语言。对于一个复制的SQL语句，可能生成几十上百个等价的执行计划。实际上，选择最优执行计划的问题，已经被证明是一个NPHARD问题。因此，人为的把SQL推导成执行计划，并...Greenplum数据库看看毕昇 JDK 团队是如何解决 JVM 中 CMS 的 Crash
编者按：笔者遇到一个非常典型JVM架构相关问题，在x86正常运行的应用，在aarch64环境上低概率偶现JVM崩溃。这是一个典型的JVM内部bug引发的问题。通过分析最终定位到CMS代码存在bug，导致JVM在弱内存模型的平台上Crash。在分析过程中，涉及到CMS垃圾回收原理、内存屏障、对象头、以及ParNew并行回收算法中多个线程竞争处理的相关技术。笔者发现并修复了该问题，并推送到上游社区中。毕昇JDK发布的所有版本均解决了该问题，其他J...服务器操作系统使用 NMT 和 pmap 解决 JVM 资源泄漏问题
编者按：笔者使用JDK自带的内存跟踪工具NMT和Linux自带的pmap解决了一个非常典型的资源泄漏问题。这个资源泄漏是由于Java程序员不正确地使用JavaAPI导致的，使用Files.list打开的文件描述符必须关闭。本案例一方面介绍了怎么使用NMT解决JVM资源泄漏问题，如果读者遇到类似问题，可以尝试用NMT来解决；另一方面也提醒Java开发人员使用JavaAPI时需要必须弄清楚API使用规范，希望大家通过这个案例有所收获。背景知识：NMTNMT是Nati...服务器操作系统【干货】Greenplum备份恢复工具gpbackup
gprestore是专门用来做gpdb数据恢复的并行恢复工具，配合gpbackup使用，编译安装方式与gpbackup一样，无论是官方下载的软件包还是自行编译的软件包，均会有gprestore这个命令。下面我们仍然采用与中篇一样的套路来进行演示，首先把gprestore的详细命令给大家贴一下，然后通过实验的方式做几个具体场景的解释。在本文的最后，对整个工具进行一个总结，希望对大家日后使用有所帮助。1gprestore备份参数详解如果要使用gprestore进...Greenplum数据库白话版《openEuler 21.09 技术白皮书》 | Linux 中国
导读：我阅读了这份几十页的《openEuler21.09技术白皮书》，发现其中有些值得重视的技术变化被掩盖在了枯燥的技术术语之中本文字数：3964，阅读时长大约：7分钟作者：硬核老王怀着这个疑问，我对在“华为全连接2021”后几天发布的openEuler21.09是颇为关注的，希望可以第一时间拿到它的白皮书一窥究竟。几天后，我提前拿到了欧拉的技术白皮书。我在翻阅后感觉，与其说欧拉是一辆粉饰一新的新车，不如说是它在引擎盖下做了颇多改...服务器操作系统深入浅出Greenplum Bitmap Index（下篇）
续：深入浅出GreenplumBitmapIndex（上篇）3.1IndexScan首先来看下IndexScan的执行流程以及大致的函数调用栈，如下图所示:整体可以分为4大部分:最外层自然是AM，即AccessMethod部分，是PostgreSQL对数据访问方式的一种抽象，我们可以简单地理解为一种多态。BitmapIndex使用bmgettuple()每次向上层调用返回一个tuple，在第一次调用时将调用bitmapfirst()完成初始化工作，而后不断调用bitmapnext()返回结果；第二部分则是为索引扫...Greenplum数据库相同版本JVM和Java应用，在x86和AArch64平台性能相差30% 何故？
编者按：目前许多公司同时使用x86和AArch642种主流的服务器。这两种环境的算力相当，内存相同的情况下：相同版本的JVM和Java应用，相同的JVM参数，应用性能在不同的平台中表现相差30%，x86远好于AArch64平台。本文分析了一个应用在AArch64平台上性能下降的例子，发现JVM的CodeCache大小是引起这个性能问题的根源，进而研究什么导致了不同平台上CodeCache大小的不同。最后笔者给出了不同平台中该如何设置参数规避该问题。希望本...服务器操作系统梅科尔工作室-openharmony-开营直播
物联网开发概述有线通讯技术短距无线通信技术LPWA通信技术openharmony
