完备的企业数据资产管理体系，首先依赖于数据资产管理规划及机制等上层设计，其次基于数据资产管理职能，使用有效的数据资产管理工具，将数据转化为数据资产，从而把数据价值真正发挥出来。数据资产管理架构如下图所示： 具体而言，数据资产管理包括数据开发、数据标准管理、数据质量管理、数据治理、数据资产评估、数据资 ...

MySQL的复杂查询 复杂查询主要包括视图、子查询和关联子查询 1.视图 先介绍一下视图: ·从SQL的角度来看，视图和表是相同的，两者的区别在于表中存储的是实际的数据，而视图中保存的是SELEC T语句(视图本身并不存储数据)。 使用视图可以轻松完成跨多表查询数据等复杂操作。 视图中不能包含ORD ...

压缩备份和TDE 1，曾经的曾经，未加密的数据库启用加密之后，数据库的完整压缩备份时间比未启用加密之前增加了好几倍，到了完全无法接受的程度，不解，查了文档之后发现SQLServer加密后不支持压缩备份，一旦加上压缩选项之后，不但没有压缩效果，而且备份时间有数倍的增长 2，曾经，自己又被自己打脸，对加 ...

目录表的约束空属性非空约束（NOT NULL Constraint）默认值定义用途语法演示列描述：commentzerofill语法:效果主键 (primary key)语法基本效果删除主键追加主键复合主键语法自增长 auto_increment验证自增长属性的特点自增长基准值变化搭配主键语法函数l ...

最近，在做某大型零售企业项目时，有客户用到DolphinScheduler，并咨询是否可以用Python脚本编排工作流？该如何实现？相信有很多人会有这样的疑问，那么，本文将为我们简单分享DolphinScheduler的优势和实际使用。 为什么企业数据开发要使用海豚调度？ 当企业在做数据开发时，任务 ...

大家好，我是 V 哥，在数据库设计中，是否使用 NOT NULL 是一个非常重要的决策，直接影响数据完整性、查询性能以及业务逻辑的复杂度。使用 NOT NULL 的关键在于理解业务需求和具体场景。 下面V哥通过一些场景来分析什么时候应该使用 NOT NULL，什么时候允许 NULL。一起聊聊经验之谈 ...

一.orchestrator是什么？ 1.1 概述 orchestrator is a MySQL high availability and replication management tool, runs as a service and provides command line acces ...

为了让各位更好的了解文章，我归纳了下面几点最重要的： 1、MySQL 高可用系统的可用性，是依赖于主备延迟的。延迟的时间越小，主库故障的时候，服务恢复需要的时间就越短，可用性就越高。 2、主备延迟原因：备库用的机子不行（IOPS是和主库相同的，不要轻视备库）、备库压力太大，查询消耗了大量cpu（因为... ...

目录函数时间日期函数:字符串函数数学函数其他函数 函数 时间日期函数: 所有的时间日期函数都是从完整的时间日期开始,根据需求进行截断; 例如需要时间,则只显示时间部分;需要日期就显示日期部分; 获得年月日： select current_date(); + + | current_date() | ...

问题现象 用户迁移到新集群后,反馈他们开发平台大量 flink 任务提交失败了,当时集群的 yarn 资源是足够的 排查过程 用户是在他们的开发平台上提交的,查看他们失败的任务,发现是他们提交端主动 Kill 的,接着沟通发现他们提交平台有个逻辑就是提交到 yarn 的 flink 任务,如果在 2 ...

统计一个字符在字符串里出现的次数 背景在数据库操作中，统计字符串中某个特定字符出现的次数是一个常见需求。无论是分析文本数据、格式化字符串，还是确保数据一致性，字符出现次数的统计对于开发人员和数据库管理员来说都是一项重要任务。这个问题看似简单，但可以通过数据库管理系统的内置函数高效解决，避免复杂的循环 ...

分布式锁是控制分布式系统间同步访问共享资源的一种方式，其可以保证共享资源在并发场景下的数据一致性。 1. 工作原理 当有多个线程要访问某一个共享资源（DBMS中的数据或Redis中的数据，或共享文件等）时，为了达到协调多个线程的同步访问，此时就需要使用分布式锁了。 为了达到同步访问的目的，规定：让这 ...

出乎意料的现象 我们有一张测试表 t1，表中有一些数据，当 session1 开启一个事务，并执行了 select for update 操作后仍未提交事务，在并发事务(如 session2)开启事务并行执行一些操作会有不同的锁现象，表现在： select for update 会出现锁等待 del ...

Linux平台安装Oracle 19c的时候遇到了下面错误“[INS-35180] Unable to check for available memory”，如图所示： 具体的错误信息如下所示： Additional Information:Exception details - PRVG-190 ...

SQL Server的Descending Indexes降序索引 背景索引是关系型数据库中优化查询性能的重要手段之一。对于需要处理大量数据的场景，合理的索引策略能够显著减少查询时间。 特别是在涉及多字段排序的复杂查询中，选择合适的索引类型（如降序索引）显得尤为重要。本文将探讨如何在SQL Serv ...

背景 最近碰到一个 case，一个 Redis 实例的内存突增，used_memory最大时达到了 78.9G，而该实例的maxmemory配置却只有 16G，最终导致实例中的数据被大量驱逐。 以下是问题发生时INFO MEMORY的部分输出内容。 # Memoryused_memory:84716 ...

目录使用C语言连接库的安装C APImysql_initmysql_real_connectmysql_closemysql_querymysql_set_character_setmysql_store_result 使用C语言连接 mysql操作是线程安全的(事务) 以API路线认识mysql ...

[20240920]跟踪library cache lock library cache pin使用gdb.txt--//前一阵子，写的使用gdb跟踪library cache lock library cache pin的脚本有一个小问题，无法获得lock address以及pin address ...

目录用户用户管理查询所有用户查看当前用户查看当前连接数创建用户删除用户修改密码规则查看规则/策略规则说明临时设置持久设置修改密码权限数据库提供的 权限列表查看权限给用户授权回收用户权限 用户 用户管理 mysql用户管理位于数据库mysql中的user表中 mysql> show tables; + ...

摘要 在学习MySQL语法之前，我们需要先解决在Ubuntu或CentOs环境下的“软件安装”的问题。本文梳理了安装前后的各个步骤及有关的注意事项，主要涵盖了安装前的准备工作、如何安装mysql，以及安装之后如何启动、如何正式使用这几个方面。建议读者先浏览一遍，留心相关的注意事项，或许能令自己稍后的 ...