开源基础软件社区

作者川石信息来源今日头条一、Docker安装Nginx在Docker容器中安装Nginx的步骤如下：1.获取最新版的nginx镜像rootubuntu:hometestdockerpullnginx:latest2.查看本地镜像rootubuntu:hometestdockerimagesREPOSITORYTAGIMAGEIDCREATEDSIZEnginxlatestad4c705f24d33weeksago133MBalpine3.1414119a10abf45weeksago5.6MB3.运行容器rootubuntu:hometestdockerrunnnametestnginxp80:80nginx4.查看nginx安装是否成功也可以直接访问主页ht...

作者川石信息来源今日头条一、Dockerfile添加数据卷除了使用v选项来添加数据卷之外，也可以使用Dockerfile文件中的VOLUME命令来创建一个带数据卷的镜像。VOLUME指令创建具有指定名称的挂载点，并将其标记为保存来自本地主机或其他容器的外部安装的数据卷。该值可以是JSON数组，VOLUME["varlog"]，也可以是带有多个参数的纯字符串，例如VOLUMEvarlog或VOLUMEvarlogvardb。使用Dockerfile创建带数据卷的镜像步骤如下：1.创建一个D...

作者川石信息来源今日头条在生产环境中使用Docker时，经常需要对数据进行持久化，这就有点像Redis里面的持久性一样的，或者需要在多个容器之间在进行数据共享，这就是Docker中我们说的数据管理操作。容器中管理数据主要有两种方式：数据卷(DataVolumes)：容器内数据直接映射到本地主机环境;数据卷容器(DataVolumeContainers)：使用特定容器维护数据卷;【数据卷】数据卷(DataVolumes)是一个可供容器使用的特殊目录，它可以将主机...

作者川石信息来源今日头条在上面的内容中介绍了如何使用dockercommit的方法来构建镜像，相反推荐使用被称为Dockerfile的定义文件和dockerbuild命令来构建镜像。Dockerfile使用基本的基于DSL语法的指令来构建一个Docker镜像，之后使用dockerbuild命令基于该Dockerfile中的指令构建一个新的镜像。第一个Dockerfile现在来创建一个最简单的Dockerfile文件样例，先创建一个空的Dockerfile文件，在任意目录下都行，在Dockerfile文件中...

作者川石信息来源今日头条Docker除了通过网络访问外，还提供了两个很方便的功能来满足服务访问的基本需求，一个是允许映射容器内应用的服务端口到本地宿主主机;另一个是互联机制实现多个容器间通过容器名来快速访问。一、端口映射实现容器访问1.从外部访问容器应用在启动容器时，如果不指定对应参数，在容器外部是无法通过网络来访问容器内的网络应用和服务的，当容器中运行一些网络应用，要让外部访问这些应用时，可以通过P或p...

Docker是一种轻量级的虚拟化技术，同时是一个开源的应用容器运行环境搭建平台，可以让开发者以便捷方式打包应用到一个可移植的容器中，然后安装至任何运行Linux或Windows等系统的服务器上。相较于传统虚拟机，Docker容器提供轻量化的虚拟化方式、安装便捷、启停速度快。操作Docker容器：启动容器重启容器创建且运行容器进入容器删除容器查看容器中进程查看统计信息一、启动容器使用start命令来启动一个已经创建的容器，语法如下...

做SpringBoot的盆友应该都知道，SpringBoot支持三种内嵌容器，有了这几个容器，我们就不需要打成War包再去部署，而是直接执行javajarjar包即可启动，真是太方便了。Tomcat在我们使用SpringBoot开发WebApi时，会引入springbootstarterweb这个starter组件，其自带了Tomcat容器，所以我们平时新建项目启动起来，会看见Tomcat相关的一些信息。tomcat常用参数:server.tomcat.uriencoding：Tomcat请求编码server.tomcat.threads.max：...

在之前的系统，用户主要是经销商，用户数不多，数据量也不大，便采用了最简单的方式定时扫描表，这种方式确实简单粗暴，如果要实时性较高，那么就只有频繁扫描表，这样就增加了数据库的压力，如果要减轻数据库压力，那么就只有降低扫描频率，这样就出现延迟很高。这次的新系统的用户和数据量较之前的系统就要多一些了，如果再使用之前的方式，不止数据库压力会很大，用户体验也不好。现在，有很多支持延迟消息的开源消息队列，...

昨天，记录了SpringBoot基于Redisson实现订单状态延迟处理的思路后，就想着，还是要去搞清楚RedissonDelayedQueue的实现思路，所以，今天就忙里偷闲，去Github下载Redisson源码来大概查略一番。如何创建RedissonDelayedQueue队列在Test中，可以看到这样一段代码RBlockingQueue<Integer>queue1redisson.getBlockingQueue("test");按名称获取一个阻塞队列实例RDelayedQueue<Integer>dealyedQueueredisson.getDelayedQueue(queue1)...

在我们日常开发中，经常会遇到查询一对多的业务场景，比如：订单，用户权限，用户菜单，文章评论，以前没有用到ORM的时候，都是批量取出再重新匹配或者循环取出，这在代码里面实现起来还是有些繁琐。在现今Mybatis、Hibernate等ORM框架里，都给我们提供方便的一对多的映射功能，使得我们的开发效率得到了提高。今天，我们就来演示一下订单一对多的关系映射。我们先创建两张表，分别为tdorder(订单表)和tdorderline(订单行表):1C...

前言上文我们聊了基于Sentinel的Redis高可用架构，了解了Redis基于读写分离的主从架构，同时也知道当Redis的master发生故障之后，Sentinel集群是如何执行failover的，以及其执行failover的原理是什么。这里大概再提一下，Sentinel集群会对Redis的主从架构中的Redis实例进行监控，一旦发现了master节点宕机了，就会选举出一个Sentinel节点来执行故障转移，从原来的slave节点中选举出一个，将其提升为master节点，然后让其他的节...

虽然说单机的Redis性能很好，也有完备的持久化机制，那如果你的业务体量真的很大，超过了单机能够承载的上限了怎么办不做任何处理的话Redis挂了怎么办带着这个问题开始我们今天的主题「Redis高可用」，由于篇幅原因，本章就只聊聊主从复制。为啥要先从主从复制开始聊，是因为「主从复制」可以说是整个Redis高可用实现的基石，你可以先有这么一个概念，至于具体为什么是基石，这个后面聊到Sentinel和Redis集群的时候会说到。首先...

背景在最近的项目中，有一个需求是对一个很大的数据库进行查询，数据量大概在几千万条。但同时对查询速度的要求也比较高。这个数据库之前在没有使用Presto的情况下，使用的是Hive，使用Hive进行一个简单的查询，速度可能在几分钟。当然几分钟也并不完全是跑SQL的时间，这里面包含发请求，查询数据并且返回数据的时间的总和。但是即使这样，这样的速度明显不能满足交互式的查询需求。我们的下一个解决方案就是Presto，在使用了Pr...

之前的文章介绍了Redis的简单数据结构的相关使用和底层原理，这篇文章我们就来聊一下Redis应该如何保证高可用。数据持久化我们知道虽然单机的Redis虽然性能十分的出色，单机能够扛住10w的QPS，这是得益于其基于内存的快速读写操作，那如果某个时间Redis突然挂了怎么办我们需要一种持久化的机制，来保存内存中的数据，否则数据就会直接丢失。Redis有两种方式来实现数据的持久化，分别是RDB(RedisDatabase)和AOF(AppendOnlyFile)...

如果你是一个有经验的后端或者服务器开发，那么一定听说过Redis，其全称叫RemoteDictionaryServer。是由C语言编写的基于KeyValue的存储系统。说直白点就是一个内存数据库，既然是内存数据库就会遇到如果服务器意外宕机造成的数据不一致的问题。这跟很多游戏服务器也是一样的，感兴趣的可以参考我之前的文章游戏服务器和Web服务器的区别。其数据首先会流向内存，基于快速的内存读写来实现高性能，然后定期将内存的数据中的数据落...

redis在很早之前就支持消息队列了，使用的是PUBSUB功能来实现的。PUBSUB有一个缺点就是消息不能持久化，如果redis发生宕机，或者客户端发生网络断开，历史消息就丢失了。redis5.0开始引入了stream这个数据结构，stream可以很好地用于消息队列，它支持消息持久化，同时可以记录消费者的位置，即使客户端断开重连，也不会丢失消息。本篇文章我们就来聊一聊基于stream的消息队列使用。stream队列简介基于stream实现的消息队列有4个...

面试官:你们系统是怎么实现分布式锁的我:我们使用了redis的分布式锁。具体做法是后端接收到请求后加入一个分布式锁，如果加锁成功，就执行业务，如果加锁失败就等待锁或者拒绝请求。业务执行完成后释放锁。面试官:能说一下具体使用的命令吗我:我们使用的是SETNX命令，具体如下：SETNXKEYNAMEVALUE设置成功返回1，设置失败返回0。如下图，客户端1加锁成功，客户端2获取锁失败：面试官:这样设置会不会有问题呢如果加锁成功的客户...

最近，confluent社区发表了一篇文章，主要讲述了Kafka未来的2.8版本将要放弃Zookeeper，这对于Kafka用户来说，是一个重要的改进。之前部署Kafka就必须得部署Zookeeper，而之后就只要单独部署Kafka就行了。[1]1.Kafka简介ApacheKafka最早是由Linkedin公司开发，后来捐献给了Apack基金会。Kafka被官方定义为分布式流式处理平台，因为具备高吞吐、可持久化、可水平扩展等特性而被广泛使用。目前Kafka具体如下功能：消息队列,Kafka...

又到了金三银四跳槽季，好多同学已经开始行动了。今天我来助力一把，送出这套redis面试题，助力大家通关。1redis为什么响应快1.1数据保存在内存中redis数据保存在内存中，读写操作只要访问内存，不需要磁盘IO。1.2.底层数据结构redis的数据以key:value的格式存储在散列表中，时间复杂度o(1)。redis为value定义了丰富的数据结构，包括动态字符串、双向链表、压缩列表、hash、跳表和整数数组，可以根据value的特性选择选择最高效...

bitmap是redis的一种扩展数据类型，主要用于二值状态统计，比如公司记录员工打卡记录，电商网站记录用户登录行为，积分商城记录用户签到情况。bigmap底层使用的是String的数据结构，而String保存在计算机中的格式是二进制的字节数组，这样bitmap就充分利用了每个字节的bit位，大大节省了内存开销。下面我们看一下bitmap的使用。员工打卡假如一个公司有100个员工，公司要对员工11月份的打卡行为进行统计，我们可以为11月份每一天...