鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

【Java面试】Redis如何保证缓存与数据库的数据一致性？

在分布式系统中，缓存（如Redis）与数据库（如MySQL）的数据一致性问题是开发者和架构师必须面对的核心挑战。缓存的存在大幅提升了系统的读取性能，但也引入了数据不一致的风险。

2025-04-27 08:52:21

Redis 数据库缓存

MongoDB从入门到实战之Docker快速安装MongoDB

单机模式，是MongoDB最基本的部署方式。在这种模式下，MongoDB运行在一个单一的服务器上，适合用于开发、测试或者小型应用。由于它不具备高可用性和可扩展性，因此不适用于大型生产环境或需要高可靠性的场景。

2025-04-27 01:33:23

MongoDB Docker 容器

10万QPS高并发请求，如何防止重复下单

当业务量暴增的话，MySQL单机磁盘容量会撑爆。并且，我们知道数据库连接数是有限的。在高并发的场景下，大量请求访问数据库，MySQL单机是扛不住的！高并发场景下，会出现too many connections报错。

2025-04-27 01:22:00

QPS 高并发 MySQL

最火向量数据库Milvus安装使用一条龙！

Milvus 设计之初就是为 AI 而生的一个高效的向量数据库系统，在大多数情况下，Milvus 的性能是其他向量数据库的 2-5 倍，它能实现万亿级向量的毫秒级相似性搜索，而且 Milvus 还是开源的向量数据库。

2025-04-27 00:00:00

Milvus 向量数据库 AI

详解 mini-redis 复刻 Redis 的 I NCR 指令

本文将针对字符串操作中介绍笔者近期所复刻的键值自增指令的落地思路，以帮助读者更好的理解和学习mini-redis。

2025-04-25 11:00:00

mini-redis Redis INCR指令

StarRocks：一款开源的高性能分析型数据仓库

StarRocks是一款高性能分析型数据仓库，使用向量化、MPP 架构、CBO（基于成本优化）、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。

2025-04-25 05:00:00

StarRocks 开源数据仓库

Apache SeaTunnel：新一代开源、高性能数据集成工具

Apache SeaTunnel 是一款开源、分布式、高性能的数据集成工具，可以通过配置快速搭建数据管道，支持实时海量数据同步。

2025-04-25 03:00:00

开源数据集成工具数据库

MySQL 数据库锁：Record Lock， Gap Lock 和 Next-Key Lock

InnoDB引擎在共享锁和排他锁文章中，我们详细分析了共享锁和排他锁在MySQL中是如何工作的，今天，我们接着分析InnoDB引擎的 3种行锁。

2025-04-24 10:56:01

MySQL InnoDB 数据库锁

如何理解 Redis 是单线程的

本文我们会直接通过 3.0.0 源码分析的角度来剖析一下 Redis 单线程的设计与实现。

2025-04-24 08:15:00

Redis 单线程线程

这对缓存 CP 直接炸场！Redis+Caffeine 强强联手有多狠？

Redis 和 Caffeine 的组合，就像程序员的左右手，左手快速处理日常任务（本地热点），右手搞定复杂问题（分布式存储）。别再让你的系统单打独斗了，赶紧组个 CP，让性能飞起来。

2025-04-23 09:31:30

Redis Caffeine CP

国产数据库对象能力评测_视图&序列原创

数据库序列，是一种用于生成唯一数字标识符的核心机制，主要用于自动化生成主键、订单号等需全局唯一性的场景，其能力包括灵活控制起始值、步长及循环规则，支持高并发环境下的低锁竞争和高效生成，尤其通过缓存机制（如Oracle的CACHE）显著提升吞吐量。

2025-04-23 07:31:14

数据库序列，核心机制

数据库服务 MySQL 9.3 发布：增强支持 JavaScript

科技媒体 linuxiac 4 月 22 日发布博文，开源关系型数据库管理系统（RDBMS）MySQL 9.3 发布，显著提升了数据库备份能力，优化了 mysqldump 工具，新增了用户管理选项。

2025-04-23 00:30:00

数据库 MySQL MySQL 9.3

MySQL 8.2 疯了！读写分离竟让数据库秒变 “双引擎”？

关于 MySQL 8.2 的双引擎读写分离，咱们就聊到这里。相信大家对这个新特性已经有了比较深入的了解，也看到了它在实际应用中的优势和价值。

2025-04-22 09:31:52

MySQL 双引擎优化

一文说透亿级流量网站缓存架构核心技术！

本文缓存方案已经开源，开源地址如下，如果开源方案对你有点帮助或者启发，欢迎在代码仓库给个Star，让更过的小伙伴看到它，互相学习，一起进步。

2025-04-22 08:57:27

缓存方案缓存架构缓存穿透

Redis 到底能不能保证原子性？

Redis是 Java程序员工作中经常使用的一个 NoSQL，很多人把它对标成数据库，因此，原子性成了特别关注的问题。那么，Redis到底能不能保证原子性？这篇文章来聊一聊。

2025-04-22 08:00:00

数据库 Redis 原子性

MongoDB从入门到实战之MongoDB简介

MongoDB 是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似Json的Bson格式，因此可以存储比较复杂的数据类型。

2025-04-22 07:52:59

MongoDB 数据库数据结构

OB单机版，扰动集中式数据库市场的X因素原创

在国产数据库市场竞争白热化的当下，OceanBase单机版的发布犹如投入湖面的巨石，以"单机分布式一体化"架构为支点，正在撬动传统集中式数据库市场格局。

2025-04-21 07:31:21

OB 单机版数据库

超实用！用FunctionCall实现快递AI助手

昨天晚上直播，我们用 RAG（Retrieval-Augmented Generation，检索增强生成）实现了数据库 AI 助手，今天我们准备换一个技术使用 function call 来实现快递 AI 助手。

2025-04-18 00:00:00

AI 助手数据库

HexHub：一款高颜值的数据库、SSH/SFTP、Docker管理工具

推荐一个专为程序员和运维人员量身打造的一站式开发运维利器：HexHub。它可以同时支持数据库开发、SSH 以及 RDP 远程连接、SFTP 文件传输以及 Docker 面板管理。

2025-04-17 08:00:00

HexHub 数据库 Docker

SQLite-Web：一个轻量级的SQLite数据库管理工具

SQLite-Web 是一个基于 Web 浏览器的轻量级 SQLite 数据库管理工具。它基于 Python 开发，免费开源，无需复杂的安装或配置，适合快速搭建本地或内网的 SQLite 管理和开发环境。

2025-04-17 04:00:00

SQLite-Web SQLite 数据库

Spring Boot3.3 + Apache Calcite 实战：用 SQL 动态查询 JSON 数据源

Apache Calcite 作为一个高度可扩展的查询引擎，在大数据和异构数据访问场景中具有广泛的应用价值。它不仅支持灵活的 SQL 查询语法，还能与各类数据源轻松集成，让开发者能够以统一方式访问结构化和非结构化数据。

2025-04-17 03:33:00

Spring SQL 动态查询

学会MySQL数据备份与恢复，删库不跑路！

真实案例告诉我们：没有安全的数据库，就像没有安全绳的走钢丝——一次误操作就可能让业务坠入深渊。在实际的运维过程中，做好数据库的备份和恢复至关重要，也是运维工程师和dba需要掌握的基本技能。

2025-04-17 03:30:00

MySQL 数据备份

dbt：新一代数据转换工具

dbt（Data Build Tool）一款专为数据分析和工程师设计的开源工具，专注于 ETL/ELT 流程的数据转换（Transform）环节，帮助用户以高效、可维护的方式将原始数据转换为适合分析的数据模型。

2025-04-17 03:00:00

dbt 数据转换工具开源

Hydra Columnar：一个开源的PostgreSQL列式存储引擎

Hydra Columnar 是一个 PostgreSQL 列式存储插件，专为分析型（OLAP）工作负载设计，旨在提升大规模分析查询和批量更新的效率。

2025-04-17 01:30:00

开源 PostgreSQL 存储引擎

SpringAI更新：向量数据库不可用的解决方案！

虽然 SimpleVectorStore 不支持了，但 Spring AI 内置了 Redis 或 ES 作为向量数据库的分布式存储中间件，我们可以用他们来进行向量的存储。

2025-04-17 00:00:00

SpringAI 数据库 Redis

糟糕，线上库存竟然变成负500......

通过组合使用：Redis做第一道防线（承受80%流量）；分布式锁控制核心业务逻辑；预扣库存+消息队列保证最终一致性。

2025-04-16 08:20:34

线上库存预扣

基于数据库锁实现防重复提交

今天介绍如何结合数据库的悲观锁或乐观锁来实现对请求的有效验证，确保同一操作不会被重复执行。

2025-04-15 08:40:00

数据库悲观锁乐观锁

SeaTunnel 同步 MySQL 到 Doris 的优化策略

SeaTunnel作为一个高性能的分布式数据集成工具，被广泛用于将MySQL数据同步到Doris等OLAP数据库。本文将结合实际配置文件，详细探讨SeaTunnel同步MySQL到Doris的优化策略。

2025-04-15 08:30:00

MySQL 数据库 Doris

面试官：RocketMQ 长轮询是怎么实现的？

长轮询可以降低无效的轮询请求，提升请求效率。RocketMQ 消费者长轮询支持配置，当消息量不太大，消费者没有必要频繁地请求，这时可以设置成长轮询机制。需要注意的是，消费端设置的请求超时时间必须大于 Broker 轮询时间。

2025-04-14 11:41:12

RocketMQ 长轮询配置

SQLite + Redis = Redka

Redka 是一个基于 SQLite 实现的 Redis 替代产品，实现了 Redis 的核心功能，并且完全兼容 Redis API。

2025-04-14 02:00:00

SQLite Redis Redka

不宕机、无风险！千亿级数据线上平滑扩容实战！

在项目初期，我们部署了三个数据库A、B、C，此时数据库的规模可以满足我们的业务需求。为了将数据做到平均分配，我们在Service服务层使用uid%3进行取模分片，从而将数据平均分配到三个数据库中。

2025-04-14 02:00:00

不宕机数据数据库

SpringBoot与Calcite整合，实现多数据源统一查询系统

最近，接到一个电商系统的兼职小单，其中订单信息存储在MySQL数据库，而用户信息存储在PostgreSQL数据库。客户那边想有一个统一查询接口，可以通过SQL查询同时获取这两个数据源的信息。

2025-04-14 01:00:00

Calcite 电商系统 MySQL

大厂防止商品超卖的五种方案！

当时某电商大促，我们自认为完美的分布式架构，在0点整瞬间被击穿。数据库连接池耗尽，库存表出现负数，客服电话被打爆...

2025-04-14 00:00:00

数据库分布式架构分布式锁

FastAPI 实战：打造高效的 CRUD 接口（增删改查优秀实践）

快速、安全、优雅地构建一套完整的数据库 API，是每个全栈工程师的基本功。本篇文章，我们用 FastAPI + Tortoise-ORM 实现最常见的用户信息表的 CRUD 接口。

2025-04-11 10:13:00

数据库 API FastAPI

线上 Redis 频繁崩溃？这套大 key 治理方案请收好

现在稍微大点的项目都用 Redis 集群，假设你用的是分片集群（比如 Codis、Redis Cluster），一个大 key 会被固定分配到某个分片上。想象一下，其他分片内存使用率才50%，就这个分片像吹气球一样涨到90%，整个集群的负载均衡瞬间失效。

2025-04-11 09:30:42

Redis 频繁 Codis

5大步骤+10个案例，SQL优化万能公式！

在应用开发的早期，数据量少，开发人员开发功能时更重视功能上的实现，随着生产数据的增长，很多SQL语句开始暴露出性能问题，对生产的影响也越来越大，有时可能这些有问题的SQL就是整个系统性能的瓶颈。

2025-04-11 02:44:00

SQL 优化万能公式

FastAPI + Tortoise-ORM：异步数据库操作优秀实践

在构建现代 Web 应用时，我们越来越追求高性能 + 易维护 + 强扩展性。FastAPI 与 Tortoise-ORM 这对组合，正是实现异步数据库操作的黄金搭档。

2025-04-10 10:20:12

Web 应用异步数据库 FastAPI

"另类MySQL"-openHalo 初体验原创

作为最大的两个开源项目，MySQL\PostgreSQL 拥有着庞大的用户群体。而这一开源项目，将两者统一起来，让很多MySQL生态用户，可以平滑迁移到PG生态上来。我也抽了点时间做个简单的评测，下面将从通讯协议、数据类型、数据对象、字符集、SQL语法、过程化语言、内置函数、系统视图及其他等角度进行阐述。

2025-04-10 07:30:43

MySQL openHalo 开源

如何合理规划Elasticsearch的索引

创建一个索引需要结合业务使用场景考量字段类型选择和是否需要索引分词，按照数据规模和业务增长速度来确定分片和副本的数量的大小。

2025-04-10 01:11:00

索引数据业务

Prometheus 快速监控 MySQL 数据库，超简单！

本文在默认数据库和 prometheus 都已部署好的前提下，分享 Prometheus 如何监控 MySQL 数据库。

2025-04-09 11:35:00

MySQL 数据库监控

MySQL遇到AI：字节跳动开源 MySQL 虚拟索引 VIDEX

VIDEX 提供开箱即用的虚拟索引能力，可无缝集成至现有 MySQL 生态；对于数据库研究者，VIDEX 模块化设计允许新算法（如 NDV 估计、Cardinality估计等等）在 MySQL 上快速验证，推动前沿技术落地。

2025-04-09 09:20:00

MySQL AI 人工智能

Spring Boot：RedisTemplate的List类型操作

Redis中的List类型是一个双向链表结构，支持在头部或尾部进行元素的插入和删除操作，常用于实现队列、栈等场景。RedisTemplate对Redis中的List类型提供了多种操作方法，通过opsForList()，可以进行List的增删查操作。

2025-04-09 00:55:00

List 类型 Redis

面试官：谈谈你对分库分表的理解？

Sharding Sphere JDBC 和 Sharding Sphere Proxy 使用场景分别是啥？ShardingSphere-JDBC 具体实现步骤有哪些？说说它的实现原理？

2025-04-09 00:00:00

分库分表 MySQL

数据库与缓存不一致，你会怎么办？

缓存与数据库数据不一致，根本上是由数据库主从不一致引起的。当主库上发生写操作之后，从库binlog同步的时间间隔内，读请求，可能导致有旧数据入缓存。

2025-04-08 09:00:00

数据库缓存架构

一文搞懂 MySQL InnoDB架构 Buffer Pool、Change Buffer、自适应哈希索引、Log Buffer

Buffer Pool 是主内存中的一个区域，它在访问时缓存表和索引数据。Buffer Pool 允许频繁使用的数据直接从内存中访问，从而加快处理速度。

2025-04-08 08:20:00

MySQL 架构 InnoDB

FastAPI 响应模型：Pydantic 的数据验证与转换，一篇吃透！

response_model 是 FastAPI 最强大功能之一，搭配 Pydantic 使用，可以动校验、转换、过滤、文档全搞定！

2025-04-08 08:15:00

FastAPI 响应模型数据库

国产集中式数据库对象评测 — 索引原创

索引能否发挥更大作用，取决于优化器能能否充分地利用索引。这里有一些常见的优化手段，包括索引覆盖扫描、索引条件下推、索引跳跃扫描等等。这里稍微吐槽下，国内数据库这部分介绍的不多，搜索也得不到有用的信息，因此可能信息不够完整。

2025-04-08 07:30:40

数据库对象索引

国产数据库与Oracle数据库事务差异分析

数据库中的ACID是事务的基本特性，而在Oracle等数据库迁移到国产数据库国产中，可能因为不同数据库事务处理机制的不同，在迁移后的业务逻辑处理上存在差异。

2025-04-08 06:00:00

数据库 Oracle 处理机制

Entity Framework性能翻车？手写SQL不如试试这三招！

我们能够有效地提升Entity Framework的性能，避免出现“性能翻车”的情况。在大多数场景下，这些优化技巧能够让EF在性能上与手写SQL相媲美，甚至在某些复杂业务逻辑场景中更具优势。开发者们可以根据实际项目需求，灵活运用这些技巧，打造高性能的.NET应用程序。

2025-04-08 01:00:00

Entity SQL 开发

重生之 MySQL B+Tree 提前问世二十年，MySQL之父叫我师父

B+树把磁盘的物理运动，变成了内存的闪电舞蹈！"——当日登上《程序员》杂志封面。三月后，林渊成立"深空科技"，发布"伏羲 B+引擎"。

2025-04-07 08:30:04

MySQL B+Tree ID 字段

1 2 3 4 5 6 ··· 338 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营