鸿蒙开发者社区

检索锦囊1：尽可能的使用缓存对于精准匹配的查询，不关注评分结果，只关注数据是否满足检索需求。可以考虑用filter“包裹一层”，如处理时间范围检索，Elasticsearch能缓存部分结果。但，要说明的是更换时间窗口，换不同时间段检索，原有缓存不起作用。关于filter的缓存效果，官方文档如是说：“FrequentlyusedfilterswillbecachedautomaticallybyElasticsearch,tospeedupperformance.”即：“频繁的使用过滤器会有自动缓存的“...

1、Elasticsearch线上实战问题问个问题啊，es能通过两个字段差值进行查询吗？类似selectfrommyindexwhereendtimesstarttime>10这种？——问题来源：死磕Elasticsearch知识星球那么问题来了，Elasticsearch如何实现时间差的查询呢？2、先说一下MySQL实现2.1MySQL表结构2.2MySQL样例数据2.3MySQL计算时间差？selecttimestampdiff(MINUTE,starttime,endtime)asspanfromtest;结果如下：结果​​15​​代表15分钟的意思。3、Elastics...

1、线上问题如上所示，问题是：“把green这个条件放到query里面做一个bool查询，有什么不一样吗？”2、拿官方样例飞行数据举例这个问题涉及到：filter（过滤器）和postfilter（后过滤器）的区别，我们拿官方样例索引：kibanasampledataflights做一样演示。3、filter过滤+聚合的场景直接上DSL，检索条件为：过滤目标城市为：CO（缩写代号）的数据，然后以目标天气执行聚合操作。本质是：先过滤后聚合。POSTkibanasampledatafligh...

1、安全无小事此处省略1万字。。。。。。2、Elasticsearch安全演进历史6.3版本之前XPack需要单独安装。6.3（含）及之后版本XPack已集成到Elasticsearch。如果没有第三方加固，1.X——6.8之前版本，Elasticsearch都属于“裸奔”状态。6.8版本和7.1版本之后，ElasticsearchXPack基础功能免费。1.X——7.X，Elasticsearch安全都不是必选项，也就是部署Elasticsearch安全是否开启都是自己随意的，Elasticsearch没有强制要求。直到8....

序言图示：Elasticsearch在​​DBEngine​​综合排名第8Elasticsearch简称"ES”,在DBEngine综合排名第8，已经持续了相当长的时间，按照当下热度应该会继续保持或者上升一个名次；ES在多数工程师印象中最深刻可能是ELK三件套或者全文检索领域，但在笔者看来，应该是业务系统领域“大宽表查询”场景，或者叫“数据库查询加速”场景。下面就从微服务架构开始，谈谈ES是如何解决应用系统中复杂查询的，为什么应该是首选？微服务架构...

前言本文由NebulaGraph实习生王杰贡献。最近Yener开源了史上最大规模的中文知识图谱——OwnThink（链接：https:github.comownthinkKnowledgeGraphData），数据量为1.4亿条。本文介绍如何将这份数据快速导入图数据库NebulaGraph，全过程大约需要30分钟。中文知识图谱OwnThink简介思知（OwnThink）知识图谱是由Google在2012年提出来的一个概念。主要是用来描述真实世界中存在的各种实体和概念，以及他们之间的关系。在搜索引擎、...

摘要笔者最近在重新整理和编译NebulaGraph的第三方依赖，选出两个比较有意思的问题给大家分享一下。FlexSegmentationFaultSegmentationfault(coredumped)在编译Flex过程中，遇到了Segmentationfault：使用gdb查看coredump：可以看到，问题出在了​​allocatearray​​函数。因为​​reallocarray​​返回指针，返回值应该使用64bit寄存器​​rax​​，但​​allocatearray​​调用​​reallocarray​​之后，检查的却是32bit的...

摘要上文（存储篇）说到数据库重要的两部分为存储和计算，本篇内容为你解读图数据库Nebula在查询引擎QueryEngine方面的设计实践。在Nebula中，QueryEngine是用来处理Nebula查询语言语句（nGQL）。本篇文章将带你了解NebulaQueryEngine的架构。上图为查询引擎的架构图，如果你对SQL的执行引擎比较熟悉，那么对上图一定不会陌生。Nebula的QueryEngine架构图和现代SQL的执行引擎类似，只是在查询语言解析器和具体的执行计划有所区...

摘要在讨论某个数据库时，存储(Storage)和计算(QueryEngine)通常是讨论的热点，也是爱好者们了解某个数据库不可或缺的部分。每个数据库都有其独有的存储、计算方式，今天就和图图来学习下图数据库NebulaGraph的存储部分。Nebula的Storage包含两个部分，一是meta相关的存储，我们称之为MetaService，另一个是data相关的存储，我们称之为StorageService。这两个服务是两个独立的进程，数据也完全隔离，当然部署也是分别部署，不过...

NebulaGraph简介NebulaGraph是开源的高性能分布式图数据库。项目使用C++语言开发，​​cmake​​工具构建。其中两个重要的依赖是Facebook的ThriftRPC框架和folly库。由于项目采用了C++14标准开发，需要使用较新版本的编译器和一些三方库。虽然NebulaGraph官方给出了一份开发者构建指南，但是在本地构建完整的编译环境依然不是一件轻松的事。开发环境构建NebulaGraph依赖较多，且一些第三方库需本地编译安装，为了方便开发者本地...

本文目录小知识图数据库兴起的契机图数据库存储方式——基于内存存储vs基于分布式kv存储一种图数据库存储层的设计探讨图结构的可视化与GIS数据的可视化Q&A提问回答图数据库计算存储分离设计及该设计模式的考量原因怎么理解图数据库顶点和标签Nebula如何处理ID冲突问题图数据库0标签的意义大家怎么看「图数据库要有索引」这个问题？在知识图谱场景下计算、存储及副本一致性问题图数据库维基百科：在计算机科学中，图数据库（英语...

摘要本文介绍OpenSource和OpenCore的区别。OpenSource已广为人知，那么OpenCore又是什么，在开源软件盛行的今天，二者会怎样影响这个市场呢？开篇之前，我们先回到一个2013年CMSWire向行业内专家提出一个问题：专有软件（proprietarysoftware）和开源软件(opensource），哪个更好？当时就这个问题业内人士没有达成共识，而现在这个问题似乎已经失去其存在价值。开源无处不在ConstellationResearch副总裁兼首席分析师HolgerMuell...

摘要NebulaGraph是一个高性能的分布式开源图数据库，本文为大家介绍NebulaGraph的整体架构。一个完整的Nebula部署集群包含三个服务，即QueryService，StorageService和MetaService。每个服务都有其各自的可执行二进制文件，这些二进制文件既可以部署在同一组节点上，也可以部署在不同的节点上。MetaService上图为NebulaGraph的架构图，其右侧为MetaService集群，它采用leaderfollower架构。Leader由集群中所有的MetaService节点...

前言有小伙伴问我，你怎么老写技术类文章，能不能写点别的。其实我兴趣挺广泛的，早年还有机会做个游戏博主，可惜最近2年金盆洗手了。戒了手游，ns和ps4都在吃灰。能完整玩完的游戏屈指可数。但是对于折腾装备，却越来越热衷了。最近就来分享下我最近2个月玩NAS的心得，打算做一个系列。这篇主要介绍优化网络连接性，更快的通过公网去访问你的NAS这东西到底有啥用可能有童鞋不知道NAS是什么。NAS全称是NetworkAttachedStorage，...

摘要图数据库NebulaGraph在生产环境中将拥有庞大的数据量和高频率的业务处理，在实际的运行中将不可避免的发生人为的、硬件或业务处理错误的问题，某些严重错误将导致集群无法正常运行或集群中的数据失效。当集群处于无法启动或数据失效的状态时，重新搭建集群并重新导入数据都将是一个繁琐并耗时的工程。针对此问题，NebulaGraph提供了集群snapshot的创建功能。Snapshot功能需要预先提供集群在某个时间点snapshot的创建功能，...

V站曾经有个热帖说为何我的开源项目只有Fork没有Star，楼下有个热评说开源项目关注的不应该是Commit数据吗？先不论Star、Fork和Commit，issue、pr也应是一个开源项目社区关注的数据。下面我们来看看市面上有哪些GitHub数据统计工具​Chrome插件——StarHistory顾名思义你可以通过StarHistory这个项目看到一个项目的趋势增长，安装上此插件之后你可以直接在某个开源项目主页，如下图所示，一键操作看star增长趋势无烦恼。当然它...

前言在每个公司的系统中，总有一些拥有复杂业务逻辑的系统，这些系统承载着核心业务逻辑，几乎每个需求都和这些核心业务有关，这些核心业务业务逻辑冗长，涉及内部逻辑运算，缓存操作，持久化操作，外部资源调取，内部其他系统RPC调用等等。时间一长，项目几经易手，维护的成本得就会越来越高。各种硬代码判断，分支条件越来越多。代码的抽象，复用率也越来越低，各个模块之间的耦合度很高。一小段逻辑的变动，会影响到其他模块...

前言做java的人，一般IDE工具用的不是eclipse就是IntelliJIDEA了吧，eclipse因为是开源软件，而且起步比较早，功能也比较完善。早期基本上做java的使用eclipse都是必备技能。我工作十年多，直到2年前还在用eclipse，随着IntelliJIDEA的市场份额原来越大，很多人都转投这个更现代化，更懂开发者的IDE工具中。我也在两年前从eclipse阵营转投IntelliJIDEA的阵营了，同时把windows电脑也换成了mac。本身IntelliJ看起来就更现代化，...

前言最近在做TLog1.2.5版本的迭代，许多小伙伴之前也表示说很想参与开源项目的贡献。为了让项目更好更快速的迭代新特性以及本着发扬开源精神互相学习交流，很有幸招募到了很多小伙伴与我一起前行。为了方便大家理解TLog项目的核心原理和架构，便有了此篇内容。此篇内容偏向TLog技术设计和核心原理，同时也涵盖着做一个开源框架所需要考虑的问题和技术要点。我一直相信，好的技术内容应提领关键点，引导大家该去如何读懂源码。而...

前言不知道大家在工作中有没有碰到过在代码级别中进行上传和下载呢，一般的场景为调用第三方的接口进行上传大文件和下载大文件。我一个小伙伴最近在工作中就碰到了，他需要在代码中调用第三方http接口进行原始文件的上传，然后需要调用第三方接口把第三方服务处理好的数据文件下载到本地。他说其实没什么技术难度，百度了下，代码示例也很多，httpclient就支持上传文件和下载，就是代码写的太多了，不怎么优雅。他给我看了httpc...