搜索结果
查询Tags标签： 分布式，共有 1332条记录-
分布式 PostgreSQL - Citus 架构及概念
节点 Citus 是一种 PostgreSQL 扩展，它允许数据库服务器（称为节点）在“无共享(shared nothing)”架构中相互协调。这些节点形成一个集群，允许 PostgreSQL 保存比单台计算机上更多的数据和使用更多的 CPU 内核。 这种架构还允许通过简单地向集群添加更多节点来扩展数据…
2022/3/7 2:15:20 人评论 次浏览 -
基于Redis分布式BitMap的应用
一、序言 在实际开发中常常遇到如下需求：判断当前元素是否存在于已知的集合中，将已知集合中的元素维护一个HashSet，使用时只需耗时O(1)的时间复杂度便可判断出结果，Java内部或者Redis均提供相应的数据结构。使用此种方式除了占用内存空间外，几乎没有其它缺点。 当数据…
2022/3/4 19:15:16 人评论 次浏览 -
彻底解决分布式环境下Redisson消息队列监听重复执行问题
问题现象：测试环境单台部署，没有问题，生产环境多台部署订单都是2条重复数据。 问题描述：我们把每个服务都部署了2台，订单产生后，有redisson的mq发布，如果MQListener监听到就会执行后面的业务逻辑。现实的问题是2台MQListener都会监听到，会重复处理我们的逻辑，插入…
2022/3/3 19:17:46 人评论 次浏览 -
redis分布式锁
https://blog.csdn.net/a772304419/article/details/97528441
2022/3/2 19:18:04 人评论 次浏览 -
Java后端开发|学习路线
Java学习路线 JavaSE Java基础 Java8新特性 数据库MySQL与SQL语言 JDBC JavaWeb HTML基础与CSS JavaScript DOM与jQuery XML与Tomcat HTTP协议 服务器端组件Servlet JSP EL表达式 JSTL 会话控制Cookie和Session 服务器端组件Filter 服务器端组件Listener 国际化 异步数据传…
2022/3/1 1:21:23 人评论 次浏览 -
02-Hadoop完全分布式
一、完全分布式集群搭建 1、规划 HDFS: 1个NN+N个DN YARN: 1个RM+N个NM 避免单点故障，NN和RM建议分散到多台机器。注意负载均衡。hadoop101 hadoop102 hadoop103DN DN DNNM NM NMNN RM 2NN 2、准备集群，安装软件 （1）克隆三台虚拟机在每台机器的/etc/hosts中配置集群所…
2022/2/27 23:28:34 人评论 次浏览 -
大数据概述
1.列举Hadoop生态的各个组件及其功能、以及各个组件之间的相互关系，以图呈现并加以文字描述。 1)HDFS（分布式文件系统） 负责数据的存储与管理。HDFS有着高容错性的特点，并且设计用来部署在低廉的硬件上。而且它提供高吞吐量来访问应用程序的数据，适合那些有着超大数据…
2022/2/27 6:23:08 人评论 次浏览 -
分布式锁之Redis实现
在Java中，关于锁我想大家都很熟悉。在并发编程中，我们通过锁，来避免由于竞争而造成的数据不一致问题。通常，我们以synchronized 、Lock来使用它。 但是Java中的锁，只能保证在同一个JVM进程内中执行。如果在分布式集群环境下呢？一、分布式锁 分布式锁，是一种思想，它…
2022/2/26 19:22:11 人评论 次浏览 -
RocketMQ(分布式消息队列)
RocketMQ MQ(Message Queue):消息队列 基本概念 消息模型（Message Model）: RocketMQ主要由 Producer、Broker、Consumer 三部分组成，其中Producer 负责生产消息，Consumer 负责消费消息，Broker 负责存储消息。Broker 在实际部署过程中对应一台服务器，每个 Broker 可以…
2022/2/25 23:30:34 人评论 次浏览 -
OceanBase数据库工程师培训实战教程（阿里/淘宝/天猫/蚂蚁/支付宝金融级分布式数据库）
课程简介： 一、风哥OceanBase数据库工程师培训实战视频教程介绍 课程目标： 为满足想快速学习学习国产数据库OceanBase的学员，风哥特别设计的一套比较系统的OceanBase数据库学习课程，共11小时。本教程内容涉及OceanBase数据库基础与体系架构 、OceanBase数据库集群规…
2022/2/24 19:24:48 人评论 次浏览 -
tidb 分布式数据库介绍
1.tidb 介绍：是开源的，java开发，大公司和tidb公司合作，有问题及时得到处理2.tidb 特别底层架构3.tidb和mysql压力测试4.tidb+spark 大数据处理5.tidb高效原理mysql：关系型数据库能联查，大数据查询慢，并发差，redis,es,hbase：非关系型数据库，不能联查，并发性能高…
2022/2/23 19:22:21 人评论 次浏览 -
分布式调度引擎 elastic-job3 源码分析 (四) 核心服务 I
1. 背景 调度引擎是关键的基础设施，不但是定时执行任务，更是大规模分布式任务引擎，分布式并行处理平台，管理计算节点集群，提供高吞吐的可伸缩的数据处理能力。 公司日益增长的业务，对调度引擎高吞吐，高并发的要求也快速增长，需构建一个无中心，管理大集群，健壮分…
2022/2/23 17:22:47 人评论 次浏览 -
对以前 分布式锁的 错误理解的纠正，以及 mysql数据 同步理解的 纠正
以前的理解 分布式锁产生的条件（应用和存储集群两块）1. 集群相同2. 集群涉及负载均衡，即集群的每个节点都参加，提供服务分布式锁解决的问题（有两个）1.先把，集群的 共享数据 同步，即机器之间的 共享数据是可见的，并且同步的，这样集群就可以当做 一个机器2.再 考虑…
2022/2/23 2:23:50 人评论 次浏览 -
第一章 Hbase专题之产生背景&分布式数据库设计要点
1、Hbase产生背景 1.1、hadoop特点 （1）存储：对于任意格式的庞大数据集，hadoop可以做到安全存储 （2）单条记录：无法在庞大数据集中做针对单条记录随机的低延迟的增删改查 1.2、hive特点 （1）存储：对于存储在HDFS上的结构化数据抽象成为一张二维表格，使用Hive进行各…
2022/2/23 2:21:50 人评论 次浏览 -
Redisson实现分布式锁(1)---原理
Redisson实现分布式锁(1)---原理 有关Redisson作为实现分布式锁，总的分3大模块来讲。 1、Redisson实现分布式锁原理 2、Redisson实现分布式锁的源码解析 3、Redisson实现分布式锁的项目代码（可以用于实际项目中）本文只介绍Redisson如何实现分布式锁的原理。其它的会在接…
2022/2/22 19:25:20 人评论 次浏览
