刷新
MySQL 复习(一):建表约束

博主头像 MySQL 复习(一):建表约束 MySQL 复习(一):建表约束 1. 主键约束 -- 添加:alter table table_name add primary key (字段) -- 删除:alter table table_name drop primary key 1.1 添加主键约束 1 ...

读数据工程之道:设计和构建健壮的数据系统18数据存储系统(上)

博主头像 1. 单机存储和分布式存储 1.1. 存储系统是存在于原材料之上的抽象层次 1.2. 磁盘是一种原始存储材料,而主要的云对象存储平台和HDFS是利用磁盘的存储系统 1.3. 随着数据存储和访问模式变得越来越复杂,并超出了单一服务器能做到的支持,将数据分布到一个以上的服务器上变得很有必要 1.4. 数 ...

mysql主从复制概述和配置

概述 主从复制是指将主数据库的DDL和DML操作通过二进制日志传到从库服务器中,然后在从库上对这些日志重新执行(也叫重做),从而使得从库和主库的数据保持同步。 MySQL支持一台主库同时向多台从库进行复制,**从库同时也可以作为其他从服务器的主库*实现链状复制。 一般主库称为Master从库Slav ...

MariaDB 和 GreatSQL 性能差异背后的真相

博主头像 MariaDB 和 GreatSQL 性能差异背后的真相 前言 最近项目上遇到了两次 MariaDB 和 GreatSQL 的对比,GreatSQL受到客户质疑,最后经过排查抓到性能差异背后的真相。基于此做个分享。 版本 MariaDB版本:10.3.39 该版本为麒麟V10 yum安装 Great ...

应对复杂架构下的监控挑战?统一运维可观测能力是关键!

博主头像 在全球数字化变革背景下,企业需适应数字经济与市场变化,进行系统性数字化转型。在“十四五”规划指导下,企业纷纷探求数字化应用之路,大数据、云计算、人工智能、区块链等技术成了热门话题,其中云运维备受瞩目。 企业在数字化转型中难免会碰到云上系统规划、运维体系建设、云上安全等挑战,因此用可观测性来改进现有监 ...

保姆级 | MySQL的安装配置教程(非常详细)

博主头像 一、下载Mysql 从官网下载MySQL,这里我选用的是Mysql8.0.34版本 二、安装Mysql 下载完成后直接双击进行安装,打开后的页面如下所示: “Developer Default”是开发者默认 “Server only”仅作为服务器安装 “Clientonly”仅作为客户端安装 “Fu ...

mysql建议单表2000万条数据的由来

Mysql在建表之初就要考虑到他的存储量和性能问题,所以一般Mysql数据库建议单表最大两千万,但是为啥是两千万呢这里我们解释一下,知其然还要知其所以然! 这一块的知识解释起来会涉及一点存储引型的相关知识了这里给提供一个基本概念,但是了解完之后会对InnonDB引型会有一定的了解 数据页相关知识 首 ...

HDFS 重要机制之 checkpoint

博主头像 核心概念 hdfs checkpoint 机制对于 namenode 元数据的保护至关重要, 是否正常完成检查点是评估 hdfs 集群健康度和风险的重要指标 editslog : 对 hdfs 操作的事务记录,类似于 wal ,edit log文件以 edits_ 开头,后面跟一个txid范围段,并 ...

深入解析Apache DolphinScheduler容错机制

博主头像 简述 Apache Dolphinscheduler Master和Worker都是支持多节点部署,无中心化的设计。 Master主要负责是流程DAG的切分,最终通过RPC将任务分发到Worker节点上以及Worker上任务状态的处理 Worker主要负责是真正任务的执行,最后将任务状态汇报给Mas ...

@dailai,欢迎成为Apache SeaTunnel Committer一员!

博主头像 Apache SeaTunnel社区最近又迎来了一位新Committer,他是来自中电信翼康的大数据架构师,作为医疗健康行业从业者,他给SeaTunnel项目带来了此专业领域相关的技术支持,探索了医疗数据的价值挖掘与AI模型应用与SeaTunnel相结合的潜能。来看看他是如何成为SeaTunnel社 ...

mysql的执行逻辑

本篇章为构建mysql在执行过程中简单的业务流程,为后续的代码优化和面试构建基础。 1、首先一条sql在执行时sql会通过网络传送给mysql 2、在Mysql收到sql语句后会先在分析器中先判断一下SQL语句有没有语法错误。 3、判断完语法之后语法无误,优化器会根据你写的sql判断执行什么索引。( ...

国产数据库的崛起与挑战:谁将在激烈市场洗牌中脱颖而出

博主头像 国产数据库的崛起与挑战:谁将在激烈市场洗牌中脱颖而出 数据 先看一下当前企业数据 截至最新的公开数据,中国的企业数量总量非常庞大。 截至2022年底,民营企业已超过4500万家,在各类企业中占比极大。 截至2022年底,国有企业约有15万家,其中中央企业有97家。 目前国情 在数据库领域,国家的政策 ...

读数据工程之道:设计和构建健壮的数据系统16源系统实际细节(下)

博主头像 1. 数据共享 1.1. 云数据共享的核心概念是,多租户系统支持租户之间共享数据的安全策略 1.2. 任何具有细粒度权限系统的公有云对象存储系统都可以成为数据共享的平台 1.3. 数据共享也简化了数据市场的概念,在几个流行的云和数据平台上都可用 1.4. 数据共享还可以简化组织内的数据管道 1.5. ...

Newstar_week1-2_wp

博主头像 week1 wp crypto 一眼秒了 n费马分解再rsa flag: import libnum import gmpy2 from Crypto.Util.number import * p = 9648423029010515676590551740010426534945737639235 ...

为什么说Kafka还不是完美的实时数据通道

博主头像 本文主要谈谈Kafka用于实时数据通道场景的缺陷,以及如何在架构上进行弥补。 Kafka归属于消息队列类产品,其他竞品还有RabbitMQ、RocketMQ等,总的来说它们都是基于生产者、中介和消费者三种角色,提供高并发、大数据量场景下的消息传递。Kafka诞生自Hadoop生态,与生态中的其他组件 ...

RockyLinux安装redis

博主头像 本文介绍RockyLinux使用dnf在线安装redis并修改密码设置远程登陆。 本博客使用RetHat系的新版本系统,如使用Debian系的系统如Ubuntu,只需使用apt安装,其余部分类似。 1、使用如下命令安装redis sudo dnf install redis-server 2、安装完 ...

<1···454647···50>