鸿蒙开发者社区

搭建一套数据治理体系耗时耗力，但或许我们没有必要从头开始搞自己的数据血缘项目。本文分享如何用开源、现代的DataOps、ETL、Dashboard、元数据、数据血缘管理系统构建大数据治理基础设施。元数据治理系统元数据治理系统是一个提供了所有数据在哪、格式化方式、生成、转换、依赖、呈现和所属的一站式视图。元数据治理系统是所有数据仓库、数据库、表、仪表板、ETL作业等的目录接口（catalog），有了它，我们就不用在群里喊“大...

车载tbox与分时租赁，车载TBOX作为汽车与网络连接硬件，包括中央处理器MCU,以及与所述中央处理器MCU通过管脚电连接的电源模块,电池供电模块,GPS北斗定位模块,蓝牙通讯模块,,GPRS模块,CAN总线模块,FlexRay总线模块,Lin总线模块,RS232通讯接口,数据存储模块;本实用新型设有三种类型总线接口,统一硬件设计,能够适合不同总线网络类型的车辆,节约了成本;本实用新型设有两路CAN总线模块,预留一路,实现有故障时随时切换;本实用新型所述...

用了一个月断断续续的月底，终于把这本书看完了。作者对时间的把控是值得我学习的呢。接下来我按着这个作者的时间规划在专注力高的时候做重要的事，我想我要考的职业兽医资格考试应该也能过呢。当然，每个月也只要自己有想去做应该能看2本书以上呢。慢慢学习精进自己。共勉。

【本文正在参加2023年第一期优质创作者激励计划】老规矩，还没看前面的文章而且对这些知识点不熟悉的，可以点击连接进行观看哦：[hive从入门到放弃(一)——初识hive](https:ost.51cto.composts21537)[hive从入门到放弃(二)——DDL数据定义](https:ost.51cto.composts21604)[hive从入门到放弃(三)——DML数据操作](https:ost.51cto.composts21691)[hive从入门到放弃(四)——分区与分桶](https:ost.51cto.composts22503)话不多说...

《OpenHarmony嵌入式操作原理与应用》一书以物联网应用为切入点,以瑞芯微RK2206芯片为核心控制器,详细讲解了OpenHarmony(开源鸿蒙)轻量级操作系统的原理与开发过程。作者：薛小铃定价：79.00元ISBN：9787302625612本书基于已经通过开放原子开源基金会XTS认证的小凌派RK2206开发套件,书中所有的电路、程序和开发实例均在开发套件上调试和验证通过。内容提要：本书主要内容:小凌派RK2206硬件快速入门,OpenHarmony软件快速入门;Ope...

【本文正在参加2023年第一期优质创作者激励计划】今天讲讲分区表和分桶表，前面的文章还没看的可以点击链接：[hive从入门到放弃(一)——初识hive](https:ost.51cto.composts21537)[hive从入门到放弃(二)——DDL数据定义](https:ost.51cto.composts21604)[hive从入门到放弃(三)——DML数据操作](https:ost.51cto.composts21691)分区分区可以提高查询效率，实际上hive的一个分区就是HDFS上的一个目录，目录里放着属于该分区的数据...

[【本文正在参加2023年第一期优质创作者激励计划】](https:ost.51cto.composts21211)1概述关系型数据库(RelationalDatabase,以下简称RDB)是一种基于关系模型来管理数据的数据库，是在SQLite基础上提供一套完整的对本地数据库进行管理的机制，为开发者提供无需编写原生SQL语句即可实现数据增、删、改、查等接口，同时开发者也可以直接运行原生SQL语句来满足复杂的场景需要。关系型数据库在应用卸载之后，才会被自动清除。2运作机...

作者：梅科尔IoT组申晨哲安装Guass数据库修改python环境[rootecs6d3f]pythonV2.6.8[rootecs6d3f]cdusrbin[rootecs6d3fbin]mvpythonpython.bak[rootecs6d3fbin]lnspython3usrbinpythonpythonV3.7.4关闭防火墙systemctlstopfirewalld.servicesystemctldisablefirewalld.service关闭之后查看状态，应为inactivesystemctlstatusfirewalld修改etcselinuxconfig文件中的“SELINUX”值为“disabled”。[rootecs6d3f]vimetcselinuxconfi...

今天分享一下如何快速定位慢查询SQL以及优化1.如何定位并优化慢查询SQL？一般有3个思考方向：根据慢日志定位慢查询sql使用explain等工具分析sql执行计划修改sql或者尽量让sql走索引2.如何使用慢查询日志？先给出步骤，后面说明，有3个步骤1.开启慢查询日志首先开启慢查询日志，由参数​​slowquerylog​​决定是否开启，在MySQL命令行下输入下面的命令：setglobalslowquerylogon;默认环境下，慢查询日志是关闭的，所以这里开启...

【本文正在参加2023年第一期优质创作者激励计划】上一篇给大家介绍了hive的DDL数据定义语言，这篇来介绍一下DML数据操作语言。没看过的可以点击跳转阅读：[hive从入门到放弃(一)——初识hive](https:ost.51cto.composts21537)[hive从入门到放弃(二)——DDL数据定义](https:ost.51cto.composts21604)数据写入数据导入部分默认数据文件格式为textfile，每一列由‘，’进行分割，以换行分行。insertinsert表示向表中插入数据，可以...

1前言我们来回顾下在这个系列的第一篇深刻理解高性能Redis的本质中介绍过Redis的几种基本数据结构，它服务于各种不同的业务场景而设计的，比如：动态字符串(REDISSTRING)：整数(REDISENCODINGINT)、字符串(REDISENCODINGRAW)双端列表(REDISENCODINGLINKEDLIST)压缩列表(REDISENCODINGZIPLIST)跳跃表(REDISENCODINGSKIPLIST)哈希表(REDISHASH)整数集合(REDISENCODINGINTSET)除了这些常见数据类型，还有一些不常用的数据类型，如B...

【本文正在参加2023年第一期优质创作者激励计划】云数据库时代，数据库软件越来越成熟和智能，伴随着云计算、分布式技术的逐步落地，近十年来数据库的形态发生了很大变化，各类数据库不断涌现，数据库架构也随之演进。在云时代下，数据库有何“新解”？DBA的未来发展趋势如何？DBA的转型及出路在哪里？下面我们通过问答形式解答大家的一些疑惑。1.作为一个DBA，主要工作包含了哪些方面，一个合格的DBA应该具备哪些基础能力？在...

【本文正在参加2023年第一期优质创作者激励计划】前一篇文章，介绍了什么是hive，以及hive的架构、数据类型，没看的可以点击阅读：[hive从入门到放弃(一)——初识hive](https:ost.51cto.composts21537)今天讲一下hive的DDL数据定义创建数据库CREATEDATABASE[IFNOTEXISTS]①databasename[COMMENTdatabasecomment]②[LOCATIONhdfspath]③[WITHDBPROPERTIES(propertynamepropertyvalue,...)]④;①若存在则不创建，不存在则创建②数...

【本文正在参加2023年第一期优质创作者激励计划】[toc]1华为云数据库服务全景图1.1华为云数据库服务华为云数据库服务分为自研数据库服务和云托管两个主要服务类型1.2关系型数据库和非关系型数据库在关系型数据库中，我们有华为的自研数据库GaussDB，其目前可以支持多种不同的生态1.支持mysql等主流数据库的接口和语法2.支持数仓场景3.支持TP和AP在非关系型数据库中，我们有两大平台，一个是华为的自研数据库GaussDB，针对当前的...

【本文正在参加2023年第一期优质创作者激励计划】云数据库时代，数据库软件越来越成熟和智能，伴随着云计算、分布式技术的逐步落地，近十年来数据库的形态发生了很大变化，各类数据库不断涌现，数据库架构也随之演进。在云时代下，数据库有何“新解”？DBA的未来发展趋势如何？DBA的转型及出路在哪里？下面我们通过问答形式解答大家的一些疑惑。1.作为一个DBA，主要工作包含了哪些方面，一个合格的DBA应该具备哪些基础能力？在...

背景前面一篇我们说到，2020年5月份，Redis官方推出了令人瞩目的Redis6.0，提出很多新特性，包括了客户端缓存(Clientsidecaching)、ACL、ThreadedIO和RedisClusterProxy等诸多新特性。如下：我们也专门对Redis6.0的ThreadedIO（多线程网络IO模式）做了很详细的说明，有兴趣的翻到前面一篇。这一篇咱们就来聊下这个Clientsidecaching（客户端缓存），看看Redis为什么需要客户端缓存、是基于什么原理实现的，以及具体应该怎么使用...

背景我们在第一篇《Redis系列1：深刻理解高性能Redis的本质》中就已经提到了，Redis的网络IO以及键值对指令读写是由单个线程来执行的，避免了不必要的contextswitch和资源竞争，对于性能提升有很大的帮助。而到了2020年的5月份，Redis官方推出了令人瞩目的Redis6.0，提出很多新特性，包含多线程网络IO的概念，如下：新特性内核优化应用优化其他ACL细粒度权限管控(包括ACLLOG)过期Key回收优化，增加配置参数新版本ModuleAPI全面...

【本文正在参加2023年第一期优质创作者激励计划】[toc](目录)hive介绍hive是一个开源的用于大数据分析和统计的数据库工具，它的存储基于HDFS，计算基于MapReduce或Spark，可以将结构化数据映射成表，并提供类SQL查询功能。特点提供类SQL查询，容易上手，开发方便封装了很多方法，尽量避免了开发MapReduce程序，减少成本支持自定义函数，可以根据需求实现函数适用于处理大规模数据，小数据的处理没有优势执行延迟较高，适合用于...

故障发生在2023春节前两天，DeepFlow团队内部访问工单系统出现问题，影响了所有北京区的同事，这篇文章将详细记录如何利用DeepFlow定位到对这次问题根因（网关MSS误变更导致报文大于MTU，大数据报文被丢弃）。01｜背景介绍工单系统是DeepFlow团队自主研发的一个跟踪工单的内部工具，部署在阿里公有云的容器服务（ACK）中，工单系统通过Ingress的方式对外提供服务，办公区与阿里云通过VPN连接，因此办公区可以直接使用域名访问工...

故事的开始开始Debug在日常的调试过程中，我们总会遇到一些有趣的bug，在本文我就遇到了一个有意思的查询结果不一致问题。故事的开始我们在测试NebulaGraph的MATCH语句的时候发现一个很神奇的事情：(rootnebula)[gdlancer]>match(v1)[e1..1]>(v2)whereid(v1)in[1,2,3,4]and(v2)[e1..1]>(v1)returne;++e++[[:Rel52>20{Rel50Bool:true,Rel51Bool:true,Rel52Double:0.533698,Rel53String:"StephenCurry",Rel54Double:0.162998}]][[...