鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程软考华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

RAG实战 | 向量数据库LanceDB指南

LanceDB是一个开源的用 Rust 实现的向量数据库。向量搜索是一种在高维空间中搜索向量的方法，主要是将原始数据通过嵌入模型得到向量，然后通过向量相似度算法计算向量之间的距离，从而找到最相似的向量。

2025-04-03 16:02:14

RAG 向量数据库 LanceDB

为什么AI需要向量数据库？

大模型遇到了严峻瓶颈。参数膨胀效益递减，幻觉问题依旧。在这关键节点，有个核心技术正在成为破局者——向量数据库。

2025-04-03 11:04:40

AI 向量数据库大模型

Redis 三主三从高可用集群部署全过程详解

在每台主机上运行两个 Redis 实例，需要为每个实例创建独立的配置文件和数据目录。

2025-04-03 11:00:00

Redis 集群数据库

一文读懂 Apache Doris

海量数据如同洪水般涌来，传统数据库却无力应对？当分析查询需求日益增长，普通数据库却只能提供龟速的响应时间？当业务决策需要实时洞察，而系统返回的只有超时提示？这正是Apache Doris要解决的核心问题。

2025-04-03 10:56:47

数据库数据分析

MySQL 主从，一定会不一致！

今天聊聊数据库主库与从库的一致性问题，以及数据库主从不一致时的四种常见优化方案。

2025-04-03 09:51:37

MySQL 数据库架构

震惊！用 Redis+AI 模型实现秒级实时风控，这波操作太秀了

兄弟们，有没有遇到过这种情况：凌晨三点在某东抢购显卡，刚提交订单就提示"系统繁忙"，转头发现黄牛已经在海鲜市场挂出同款；扫码支付时突然弹出风险提示，非要验证人脸识别；更绝的是某银行APP，刚输完密码就收到短信提醒："检测到您的账户存在异常操作"——但此时您根本没动过手机。

2025-04-03 09:30:56

Redis AI 模型

活动中台系统慢 SQL 治理实践

活动中台系统作为中台项目非常注重系统性能和用户体验，数据库系统性能问题会对应用程序的性能和用户体验产生负面影响。慢查询可能导致应用程序响应变慢、请求堆积、系统负载增加等问题，甚至引发系统崩溃或不可用的情况，因此，需要在数据库系统中针对执行缓慢的SQL查询进行优化和改进。

2025-04-03 09:00:00

慢SQL 数据库

行转列不再复杂：SQL高手都在用的技巧揭秘

将冗长的纵向数据“压缩”为横向结构，让分析更高效。本文将通过实战案例，手把手教你掌握 SQL 中行转列的3 种核心方法，并揭示高手的隐藏技巧。

2025-04-03 08:00:51

SQL 原始数据结构

Elasticsearch深度分页全解：从原理到跳页实战

在数据爆炸的时代，分页查询已成为系统标配功能。但当面对亿级数据量时，传统的分页方式却可能成为压垮系统的最后一根稻草。本文将深入剖析Elasticsearch深度分页的成因，并提供常见的解决方案.

2025-04-03 00:03:00

数据内存网络

五分钟快速部署 MySQL：二进制方式

本篇文章我们将分享关于 MySQL 五种部署方式中的二进制部署。下面，我们一起来看。

2025-04-02 11:30:00

MySQL 二进制部署数据库

IvorySQL：兼容Oracle数据库的开源PostgreSQL

今天给大家介绍一款基于 PostgreSQL 开发、兼容 Oracle 数据库的国产开源关系型数据库管理系统：IvorySQL。

2025-04-02 08:30:00

IvorySQL Oracle PostgreSQL

CTO 问我，为什么不按照教材上的 3NF 来设计数据库？

数据冗余在大数据量与高并发量的数据库设计中使用极其广泛，今天重点讲讲冗余表的设计。

2025-04-02 08:05:00

数据库 3NF 数据冗余

阿里面试：MySQL乐观锁是什么？底层实现原理？

MySQL的乐观锁通过版本号或时间戳机制实现，其核心原理：是在更新数据时检查数据是否被其他事务修改，从而避免并发冲突。

2025-04-02 01:22:44

MySQL 乐观锁数据

重生之 MySQL 索引失效六大陷阱

书接上回，林渊盯着监控屏上跳动的QPS 18500，突然发现商品搜索接口的Handler_read_next计数器每秒暴涨百万次。" 这是全表扫描的死亡信号！"他抓起对讲机："立刻降级推荐系统！"

2025-04-02 00:00:04

MySQL 索引失效

SpringAI用嵌入模型操作向量数据库！

嵌入模型和向量数据库是实现 RAG（检索增强生成）的技术基础，当然除了以上案例外，你可以使用 Redis 或 ES 来存储向量数据，并尝试加入 DeepSeek 实现 RAG 功能，这种形式更符合企业真实的技术应用。

2025-04-02 00:00:00

向量数据库嵌入模型 RAG

关于分库分表，你知道多少？

本质上分库分表是三个概念，这里我们都是从水平拓展的维度讨论问题，本质上分库分表中的概念分别对应：分库、分表和分库分表。

2025-04-01 08:45:00

分库分表数据库 MySQL

RAG知识库的数据方案：图数据库、向量数据库和知识图谱怎么选？

想解决一个困扰企业多年的问题：如何让员工快速找到所需信息？检索增强生成（RAG）技术有望成为解决这一难题的关键，但如何选择最合适的数据存储方案？向量数据库？图数据库？还是知识图谱？让我们一探究竟。

2025-04-01 07:30:00

RAG 图数据库向量数据库

三分钟掌握MySQL是如何存储一行记录

Mysql的数据是保存在磁盘上，数据具体保存在磁盘的哪个文件上是由存储引擎决定的，Mysql支持多种存储引擎（如InnoDB、MyISAM等），不同的存储引擎保存的文件也存在一定的差异。

2025-04-01 01:25:00

MySQL InnoDB MyISAM

Redis集群全解析：从原理到实战，如何构建高可用分布式缓存

Redis集群是应对高并发、大数据的利器，但“没有银弹”——需根据业务特点选择方案。对于大多数企业，Redis Cluster是平衡性能与扩展性的最优解。如果你还在为单机Redis的性能焦虑，不妨从搭建一个3主3从的集群开始，迈向分布式缓存的新世界！

2025-04-01 01:04:00

Redis 集群缓存

MySQL 主从集群 + mycat 双节点 + Keepalived 读写分离高可用方案

今天分享一下读写分离使用 MyCAT 版本来实现 MySQL 主从集群与 MyCAT 双节点部署，并结合 Keepalived 实现高可用的完整解决方案。

2025-03-31 10:40:52

MySQL 集群 MyCAT

重生之我用 2025 年的 InnoDB 知识在 2003 年 IT 圈打工

2003 年 12 月 31 日 23:45，北京中关村某电商公司机房。林渊盯着监控屏上疯狂跳动的Table_locks_waited计数器，手指在键盘上悬停。距离新年促销只剩 15 分钟，MyISAM 表锁导致的雪崩效应正在蔓延。

2025-03-31 08:31:15

IT InnoDB 计数器

从日志到表格，不用导入数据库就能用 SQL 查询

dsq 是 DataStation（一个图形界面工具）的命令行伴侣，二者共享底层技术栈，但 dsq 专注于命令行用户，提供轻量、快速的数据分析能力。

2025-03-31 08:20:00

SQL 查询数据库 dsq

生产环境CPU狂飙900%，到底该如何处理？

大家在使用MySQL过程，想必都有遇到过CPU突然过高，或者达到200%以上的情况。数据库执行查询或数据修改操作时，系统需要消耗大量的CPU资源维护从存储系统、内存数据中的一致性。

2025-03-31 08:04:50

MySQL CPU 内存

千万级的大表，如何做性能优化？

很多小伙伴的数据库在刚开始的时候表现良好，查询也很流畅，但一旦表中的数据量上了千万级，性能问题就开始浮现：查询慢、写入卡、分页拖沓、甚至偶尔直接宕机。

2025-03-31 01:55:00

千万级性能优化

MySQL：MyISAM锁表致千万损失！穿越工程师如何逆天改命

本章技术要点总结：1. MyISAM 锁机制：表级锁导致并发灾难，SHOW STATUS LIKE 'Table_locks%'监控锁争用；2. 崩溃恢复缺陷：断电可能导致索引/数据不一致，需定期执行REPAIR TABLE；3. 性能优化方向：通过myisamchk --analyze优化索引统计信息；4. 历史价值：MyISAM 在 GIS 和全文索引领域仍具参考价值。

2025-03-31 00:00:01

QPS MySQL MyISAM

MySQL MyISAM引擎是什么？有什么致命缺陷？为何现在都不使用了？

"当我启动 InnoDB 引擎时，服务器内存突然耗尽..." —— 林渊如何用 Buffer Pool 优化化解内存危机？

2025-03-31 00:00:00

InnoDB 引擎优化

来聊聊大厂常用的分布式 ID 生成方案

本文就基于保证数据ID唯一的要求针对市面主流的几种分布式ID算法的特点和适用场景展开深入探讨。

2025-03-28 10:27:29

分布式ID 分库分表算法

国产数据库“AI助手”能力如何原创

从各家反馈来看，整体效果还是不错的。做的比较好的，可以提供较为完善的信息（包括步骤、示例），也都提供了信息的来源方便检索纠错。

2025-03-28 07:33:09

数据库 AI助手设计

Elasticsearch实战指南：让你的业务搜索飞起来

当你的MySQL数据库查询突然从0.5秒飙升到15秒，当你的产品经理第20次提出"模糊搜索要支持同义词联想"时——是时候重新认识这个改变搜索游戏规则的分布式搜索引擎了。

2025-03-28 03:20:00

MySQL 数据库搜索

PgDog：一个PostgreSQL分布式集群中间件

PgDog 是一个实现了 PostgreSQL 分片、连接池以及负载均衡功能的中间。PgDog 使用 Rust 语言编写，支持跨平台（Linux、Mac OS、Windows），具有高性能和高可靠性，可以在不需要修改任何应用程序的前提下实现 PostgreSQL 数据库的水平扩展。

2025-03-27 11:03:18

PostgreSQL PgDog 分布式集群

深度剖析 StarRocks 读取 ORC 加密文件背后的技术

本文介绍了StarRocks数据库如何读取ORC加密文件，包括基础概念以及具体实现方案。深入探讨了利用ORC文件的四层结构和三层索引机制，实现高效查询加密数据。希望通过本文对ORC加密文件读取功能的实现细节的剖析，让读者更加深刻理解ORC文件，同时了解StarRocks支持加解密数据分析的方案。

2025-03-27 09:58:50

StarRocks 数据库

国产集中式数据库对象评测 — 表原创

针对国产集中式数据库的 SQL 能力，做了一系列的评测工作，通过多篇文章分享，受到了业内的广泛关注。这里紧接着上一话题重新开辟一个系列，从另一个维度-对象，来评估下各厂商产品针对数据对象的支持能力如何。

2025-03-27 07:30:28

集中式数据库 SQL

MySQL悲观锁是什么？底层实现原理？

在 MySQL 中悲观锁（Pessimistic Lock），是一种并发控制机制，用于防止多个事务同时修改同一条数据，从而确保数据一致性。基于“悲观”的假设，认为在多用户环境下，数据被多个事务同时访问、或修改的冲突概率较高。

2025-03-27 04:00:00

MySQL 悲观锁事务

"慢SQL"治理的几点思考

如果SQL没有问题，那么关注点可以放在mysql实例的资源开销上了。因为造成慢查询的原因不单只是SQL本身，有可能是磁盘负载，CPU以及网络等方面的资源不足引起了。

2025-03-27 03:22:00

SQL 缓存 mysql

Go语言中Redis管道的性能潜力

Redis管道技术为高并发场景下的性能优化提供了有效手段，但需要开发者深入理解其实现原理和适用边界。通过合理控制批处理规模、优化命令组合方式，并配合完善的监控体系，可以在保证系统稳定性的前提下充分发挥Redis的性能潜力。

2025-03-27 00:45:00

Redis QPS 场景

Redis 核心知识点深度剖析：原理、机制与应用

本文将深入探讨Redis的核心知识点，带你领略其内部的奥秘，助力你在数据处理的领域中如鱼得水。

2025-03-26 11:30:40

Redis 数据处理数据库

SpringBoot与Jasypt整合，实现数据库字段自动加密解密功能

使用Jasypt可以显著提升应用程序的数据安全性，简化加密操作，并提供灵活的配置选项。不仅有助于满足各种法规要求，还能提高开发效率和系统的整体稳定性。

2025-03-26 08:43:17

Jasypt 数据库配置

面试官：MySQL优化手段有哪些？

MySQL 常见的优化手段包含 5 大类，索引优化、SQL 优化、事务和锁优化、架构优化和硬件及配置优化。你还知道哪些优化手段呢？

2025-03-26 01:25:00

MySQL 优化事务

Apache Hive：基于Hadoop的分布式数据仓库

Apache Hive 是一个基于 Apache Hadoop 构建的开源分布式数据仓库系统，支持使用 SQL 执行 PB 级大规模数据分析与查询。

2025-03-25 10:49:24

分布式数据仓库 Hadoop SQL

每天一个 Python 小问题！三小时血泪史！Python 连 Oracle 踩过的三个大坑，最后一个让我差点砸键盘

作为一个自认为已经摸爬滚打多年的"老"程序员，这次真是被Oracle狠狠教育了一番。来，让我把这三个坑一一道来，希望你们能少走弯路。

2025-03-25 10:35:37

Oracle Python 数据库

38 张图详解 Redis：核心架构、发布订阅机制、九大数据类型底层原理、RDB和AOF 持久化、高可用架构、性能问题排查和调优

如果一批 key 的确是同时过期，可以在 EXPIREAT 和 EXPIRE 的过期时间参数上，加上一个一定大小范围内的随机数，这样，既保证了 key 在一个邻近时间范围内被删除，又避免了同时过期造成的压力。

2025-03-25 08:35:53

Redis 架构机制

到底什么是“数据湖”？

数据湖，英文名叫做Data Lake。它和数据库、数据仓库一样，是一种存储和处理数据的平台。

2025-03-24 12:18:25

数据库数据仓库存储

MySQL 能不能双主？有没有一致性问题？

MySQL 主库高可用，主库一致性，是有一些小技巧的。下面，我们一起来看。

2025-03-24 10:17:01

MySQL 架构数据库

Redisson 全面解析：从使用方法到工作原理的深度探索

本文演示了redisson几个常用的数据结构以及一些简单并发流程工具使用示例和底层源码分析，希望对你有帮助。

2025-03-24 09:57:19

Redisson redis 数据结构

降维打击 Navicat！Chat2DB：21K Star 的 AI 数据库管理新王者

Chat2DB以其开源、AI驱动的特点，提供了一个高效、易用的数据库管理解决方案，尤其适合需要支持多种数据库和智能化工具的用户。

2025-03-21 08:00:00

数据库管理数据库 Chat2DB

高并发下连接池：性能飞升的魔法秘籍

今天，就让我们一同深入连接池的设计与优化世界，探寻让系统性能飞升的魔法秘籍。

2025-03-21 06:20:00

连接池系统数据库

PostgreSQL跨版本升级常用方案

对于企业而言，将数据库系统升级到新版本通常可以获得更好的性能、更多的功能、最新的安全补丁和错误修复等。因此，本文就来介绍一下 PostgreSQL 数据库版本升级的三种常用方案。

2025-03-20 11:12:50

PostgreSQL 数据库集群

缓存监控治理在游戏业务的实践和探索

通过对 Redis 和 Caffeine 的缓存监控快速发现和定位问题降低故障的影响面。

2025-03-20 10:50:08

Redis Caffeine 缓存监控

Geo技术助力，让风险定位更精准

要判断用户地址与中介地址是否相同，或者相近。那落到实际功能开发，其实就是计算两个地址之间的距离，由距离长短决定是否相同，或相近。

2025-03-20 10:43:21

MySQL 地址计算

聊聊 Redis 中的字典设计与实现

本文笔者从字典的数据结构和常见操作的角度对Redis中字典的设计思想和优化思路进行深入的剖析，希望对你有帮助。

2025-03-20 09:54:47

Redis 字典数据库

1 2 3 4 5 6 ··· 337 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营