鸿蒙开发者社区

现象有业务系统反应，通过主键条件查询用户表，得到的一行结果与条件中的主键值不一致，这是什么鬼啊？结论设置JDBC参数不合理（queryTimeout10s，socketTimeout10s），导致在异常情况下，第二条get获得了第一条get的结果，得到错误的数据，数据库表现正常；详细的出错流程(1)应用设置queryTimeout10s，socketTimeout10s；(2)在JDBC代码中，socketTimeout是利用fd超时实现的，而queryTimeout是另外起一个任务(cancel线程)，监听...

本文整理自BIGO在nMeetp上的主题分享，主要介绍BIGO过去一年在数据管理建设方面的理解和探索。而BIGO数据管理的核心重点在于元数据平台的建设，用以支撑上层数据管理和建设应用，包括数据地图、数据建模、数据治理和权限管理等等。本文主要围绕以下五个方向展开：OneMeta基础建设；图引擎：Nebula替换JanusGraph数据资产平台应用；Adhoc即席查询；未来规划BIGO是欢聚时代（YY直播母公司）原移动新产品部基础上成立的独立公司，...

>>>>背景刚学习图数据的内容，当前网上充斥大量的安装文档，参差不齐，部署起来令人十分头疼。现整理一份比较完整的安装文档，供大家学习参考。>>>>版本macOS12.0.1（Intel）Docker20.10.14NebulaGraphv3.x(20220415master分支)NebulaStudiov3.2.2NebulaConsolev3.0.0(20220415master分支)注：以上软件版本为20220415最新版本>>>>安装教程以下内容亲测可用。Docker安装下载网站相关地址：InstallDockerDesktoponMacDockerDocume...

介绍OceanBase分区能按照某种规则自动地对数据表进行划分，每个分区存储表格的一部分数据。相对于分库分表方案，分区功能既能对用户比较透明，又具有良好的可扩展性。在OceanBase中，针对分区表构建索引时，会对该表格的每个分区进行外部排序，构建相应的索引表，由于分区的数据量通常是GB，甚至是TB级别的，采用串行的外部排序构建索引容易达到瓶颈，因此，需要分区内并行构建索引的功能。本文主要描述了OceanBase分区内并行构...

普通服务器具有良好的性价比，因此在互联网等行业得到了广泛的应用。但普通服务器也不得不面对2%4%的年故障率([1])，于是必须高可用的传统数据库只得很悲催地使用性价比低得可怜的高可靠服务器。分布式一致性协议（distributedconsensusprotocol）是迄今为止最有效的解决服务器不可靠问题的途径，因为它使得一组服务器形成一个相互协同的系统，从而当其中部分服务器故障后，整个系统也能够继续工作。而Paxos协议([2])则几乎成了...

介绍层次查询（HierarchicalQuery）是一种具有特殊功能的查询语句，通过它能够将HierarchicalData按照层次关系展示出来。HierarchicalData是指Relation中的数据之间具有层次关系。这种关系在现实生活中十分常见，例如：组织架构中leader和member之间的关系企业中上下级部门之间的关系Web网页中，页面跳转的关系HierarchicalData实际上较适合存储在HierarchicalDataMode数据库中，在这类数据库中数据就是按照其层次关系（树形结...

引言数据库插入操作的语句为insertintotablevalues(a1,b1)，涉及到SQL层和存储层，其中SQL层需要解析SQL语句，生成抽象语法树(AST)，计算表达式等，存储层需要判断主键冲突，包括增量数据和基线数据上的主键冲突，如果是非重复主键，则将数据插入到增量数据中。上条插入语句只插入一行数据，称之为单条插入，相应地，还可以在一条语句中插入多行数据，insertintotablevalues(a1,b1),(a2,b2),(a3,b3)，称之为批量插入。批量插入...

Gartner2014年首次提出HTAP（HybridTransactionAnalyticalProcessing，混合事务分析处理）并给出明确的定义：即同时支持OLTP和OLAP场景，需要创新的计算存储框架，在一份数据上保证事务的同时支持实时分析，省去费时的ETL过程。在我看来，HTAP代表了一种技术理想，但是落地的时候难免会遇到各种问题，包括：1.HTAP对用户意味着什么？一个OLTP和OLAP“无所不能”的系统真的是用户想要的吗？2.基于一份数据的假设，HTAP到底牺牲OL...

此前，通过《向量化引擎对HTAP的价值与技术思考》一文，我们分享了OceanBase怎样看待向量化引擎技术，并介绍了用它解决复杂查询场景的技术思路。HTAP的本意是把OLTP（事务处理）和OLAP（分析处理）放在一个系统上更好地运行，帮助客户开展实时业务决策，降低运营成本并提升创新效率。因为OLTP、OLAP使用资源（CPU、内存、IO等）的方式不同，同时运行时容易产生资源干扰。如何将二者的相互影响降到最小，成为实现HTAP的关键，也...

编者按本文系华东师范大学俞融&王清帅两位同学所著，本篇也是OceanBase学术系列稿件第六篇。「俞融，华东师范大学数据科学与工程学院在读硕士生。研究生期间在数据学院DBHammer组从事面向HTAP数据库系统的评测相关技术研究，致力于定义新型benchmark并开发开源工具服务于HTAP数据库公平、公正、高效评测工作。」「王清帅，华东师范大学数据科学与工程学院在读博士生。博士生期间在华东师范大学数据学院DBHammer组致力数据库系统...

德国科技管理专家斯坦门茨早年移居美国，他以非凡的才能成为美国企业界的佼佼者。一次，美国著名的福特公司的一组电机发生故障，在束手无策之时，公司请斯坦门茨出马解决问题。斯坦门茨在电机旁仔细观察，经过计算，用粉笔在电机外壳划了一条线，说：“从这里打开，把里面的线圈减少16圈。”工人们照他说的一试，电机果然运转如初，福特公司给他酬金时，他索价一万美元。公司老板觉得一条线要一万美元未免漫天要价。斯坦门茨回...

有了《系统架构的11条原则》，真正到设计阶段还有另外11个考虑。系统正确性考虑一：负负得正假如我们看到某个代码，明显有逻辑错误，想随手改改。你就要考虑一件事情：这段明显有问题的代码为什么在线上运行着没有人来报bug？有一种正常运行叫做【负负得正】。如果把错误的逻辑改对了反而可能引起问题。这种问题要避免最好的时机是初版设计和开发阶段就避免。除了设计阶段逻辑要清晰，代码要做好审查、加上单体测试等测试手段外...

根据麦肯锡相关报告显示，2020年全球支付业收入11年来首次下降。黑天鹅事件让支付行为发生重大转变，现金使用量大幅下降，商务服务从线下快速转移至线上，这些转变为支付参与者带来了新的机会与挑战。2021年，支付业收入指标快速修复反弹，其中，数字支付在面对危机时展现出来的敏捷性成为推动经济更快复苏的重要因素之一。如菲律宾电子钱包GCash在2022年Q1，注册用户数首次超过6000万，达到覆盖菲律宾83%成年人口的里程碑。在...

4月29日，OceanBase面向出海企业举办了一场专享会。出海企业在面临企业快速发展中常会遇到数据库的性能瓶颈、稳定性要求、数据合规、HTAP能力、多云部署等多种挑战，出海企业如何选择一款高性价比、稳定、安全、具备HTAP能力并能灵活部署在现有云资源上的数据库，是DBA非常关心的问题。本次活动中OceanBase资深解决方案架构师孟磊（花名：亦年）也回答了一些客户的问题，整理本次问答实录希望能够帮助更多出海企业了解业务发展...

近日，OceanBaseCTO杨传辉解读HTAP的文章《真正的HTAP对用户和开发者意味着什么？》介绍了OceanBase对HTAP的理解和技术思路，在读者中引发了广泛讨论。OceanBase认为，真正的HTAP要求先有高性能的OLTP，然后在OLTP的基础上支持实时分析。OceanBase通过原生分布式技术提供高性能的OLTP能力，真正通过“一个系统”同时提供事务处理和数据实时分析能力，“一份数据”用于不同的工作负载，从根本上保持数据的一致性并最大程度降低数...

此前，OceanBase源码解读第十篇《​​一号表及其服务寻址​​》，为大家介绍了“系统租户的「一号表」”的前世今生，并对一号表相关的服务寻址过程进行了说明。本期“源码解读”继续由OceanBase内核研发工程师镇楠为大家带来文中提及的LocationCache模块浅析。Locationcache是observer上的一个基础模块，为SQL、事务、CLOG等多个其他模块提供获取及缓存某个副本位置信息的能力。Locationcache依赖各级meta表以及底层partitionse...

在一家公司工作很多年了，办公电脑很陈旧，想申请一台新的。但是总会一拖再拖。想到要重装软件，很多数据有可能丢就很头疼。如果咱们平时对数据养成及时备份的好习惯，换新电脑的成本可能并没有想象中的那么高。咱们今天从软件开发生命周期的角度进行一次梳理。立项阶段一个软件最初先要进行充分沟通，才能立项。沟通至少需要foxmail等邮件工具和微信或者是内部的企业微信或者钉钉等IM工具。当然，自从疫情，线上沟通多了起来，...

10多年前我毕业到广州工作，出火车站第一件事就是去路边报刊亭办一张“羊城通”卡用来乘坐公交地铁。今天路边的报刊亭已十分稀少，“羊城通”也逐渐被扫码、NFC、数字货币等移动支付替换。公交支付的升级只是出行智能化的冰山一角。公交出行开始跑在数据上艾媒咨询数据显示，中国智慧交通技术支出规模不断增长，2020年中国智慧交通技术支出规模达502.7亿元，同比增长16.26%，预计2021年中国智慧交通技术支出规模将达580亿元，轨...

导语2021年9月，某超大型金融机构圆满实现最后一个规模高达20TB+核心数据库的全面迁移改造工作，也为后续向云原生多活架构演进打下了坚实的基础。该核心系统数据库全量迁移项目的成功上线，树立了金融行业践行科技强国的标杆实践。阿里巴巴集团副总裁、阿里云智能新金融&互联网事业部总经理刘伟光将历时一年的迁移全过程完整步骤及技术攻略做提炼梳理，完整沉淀成了独一无二的干货、本文的全部内容。“实践出真知”，阿里云和Oc...

今天我们邀请了OceanBase资深解决方案架构师孟磊围绕“原生分布式数据库助力跨境电商低成本稳步增长”为大家展开分享，结合实践与案例，探讨跨境电商如何通过打好数据底座，保障未来业务稳步增长的同时，用更低的成本享受更高的性能。毕业于湖南大学，多年海外工作经验，曾在Oracle从事多年数据库售后及解决方案工作，加入OceanBase后负责大型金融、政企、互联网等多个行业头部客户的分布式系统改造项目。以下是正文内容：“大...