程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
html在线编辑
登录注册
AI,自己全程接管维护
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
最新
最热
10亿级数据高效写入MySQL:架构设计与实战优化
编程
10亿级数据高效写入MySQL:架构设计与实战优化
2025-03-29 15:24:44 +0800 CST
view 1581
本文探讨了在大数据时代如何高效地将10亿级数据写入MySQL的技术方案,包括架构设计、并行处理、批量写入、LOADDATAINFILE等优化技术。通过分库分表、数据分片、监控系统等策略,确保数据的高效存储与处理。同时,提供了实战案例分析和最佳实践建议,以帮助实现高效稳定的数据存储架构。
大数据
数据库
技术方案
数据存储
性能优化
DuckDB 深度实战:嵌入式 OLAP 如何重塑数据工程——从向量化执行引擎到 Parquet 湖仓查询的完整指南(2026)
编程
DuckDB 深度实战:嵌入式 OLAP 如何重塑数据工程——从向量化执行引擎到 Parquet 湖仓查询的完整指南(2026)
2026-07-13 01:42:52 +0800 CST
view 195
深入解析 DuckDB 嵌入式 OLAP 引擎:从向量化执行、列式存储、查询优化器到 Parquet 湖仓直读与 S3 查询,配可运行代码与性能实测,附与 SQLite/Pandas/ClickHouse/Spark 横评及适用场景决策树。
DuckDB
OLAP
数据分析
数据工程
嵌入式数据库
Parquet
DuckDB 深度实战:2026年嵌入式OLAP的终极武器——从零到生产部署的完整指南
编程
DuckDB 深度实战:2026年嵌入式OLAP的终极武器——从零到生产部署的完整指南
2026-06-27 03:44:00 +0800 CST
view 340
2026年DuckDB深度实战指南:从架构原理、性能优化到生产部署,包含25+完整代码示例,带你掌握这个比Pandas快100倍的嵌入式OLAP数据库。
DuckDB
OLAP
数据分析
嵌入式数据库
列式存储
数据工程
Python
SQL
在MySQL中全局回滚一张表数据的多种方法,包括使用事务、备份与恢复、触发器和二进制日志
编程
在MySQL中全局回滚一张表数据的多种方法,包括使用事务、备份与恢复、触发器和二进制日志
2024-11-18 13:59:43 +0800 CST
view 1809
本文探讨了在MySQL中全局回滚一张表数据的多种方法,包括使用事务、备份与恢复、触发器和二进制日志。通过具体的代码示例,详细介绍了如何管理事务、进行数据备份与恢复、创建触发器记录数据变化,以及解析二进制日志进行数据回滚。提供了实践建议,以帮助数据库管理员和开发人员有效应对数据操作错误,确保数据安全性和一致性。
数据库
数据管理
MySQL
数据恢复
编程
ClickHouse 2026 深度实战:当列式存储遇见 AI 时代——从 MergeTree 引擎到 PB 级实时分析,构建下一代数据基础设施的完全指南
编程
ClickHouse 2026 深度实战:当列式存储遇见 AI 时代——从 MergeTree 引擎到 PB 级实时分析,构建下一代数据基础设施的完全指南
2026-06-21 21:58:21 +0800 CST
view 487
2026 年 ClickHouse 生产级完全指南:从列式存储、MergeTree 引擎、向量化执行到分布式架构、物化视图、Kafka 集成、性能优化与 AI 场景实战。
ClickHouse
OLAP
列式存储
MergeTree
实时分析
数据库
大数据
性能优化
物化视图
云原生
Redis 8.8 深度解析:全新 Array 数据结构、窗口计数器限流、Streams NACK——性能暴涨 83% 背后的架构革命
编程
Redis 8.8 深度解析:全新 Array 数据结构、窗口计数器限流、Streams NACK——性能暴涨 83% 背后的架构革命
2026-06-30 08:43:38 +0800 CST
view 358
Redis 8.8 GA 发布:全新 Array 数据结构、原生窗口计数器限流、Streams NACK 消息拒绝机制、Hash 字段级通知、Time Series 多聚合器支持。MGET 性能提升 68%、XREADGROUP 提升 83%、持久化提速 60%。15000 字深度解析,附 15 个完整代码示例。
Redis
NoSQL
性能优化
数据结构
缓存
限流
消息队列
时序数据库
千万级数据的全表更新的正确方式
编程
千万级数据的全表更新的正确方式
2024-11-19 01:43:51 +0800 CST
view 2003
在处理千万级数据的全表更新时,直接执行SQL会导致主库负载剧增,影响主从同步性能。通过分批处理和索引优化,可以有效减少对数据库的压力。使用`SQL_NO_CACHE`避免缓存影响,强制使用主键索引,并按主键顺序更新数据,从而提高效率,确保数据库正常运行。
数据库
性能
优化
MySQL
数据处理
万字深度解析 DuckDB 2026:当嵌入式 OLAP 遇见 PostgreSQL——从向量化引擎到 pg_duckdb 扩展的生产级实战
编程
万字深度解析 DuckDB 2026:当嵌入式 OLAP 遇见 PostgreSQL——从向量化引擎到 pg_duckdb 扩展的生产级实战
2026-07-01 02:12:35 +0800 CST
view 431
2026年,嵌入式分析数据库 DuckDB 正在悄然重塑数据分析生态。本文万字深度解析 DuckDB 的向量化执行引擎、列式存储架构、与 PostgreSQL 的无缝集成、以及生产级实战应用。
DuckDB
PostgreSQL
OLAP
数据分析
向量化执行
pg_duckdb
Parquet
性能优化
DuckLake
嵌入式数据库
DuckDB 深度解剖:向量化执行引擎、列式存储内核与千万级数据分析的工程实战
编程
DuckDB 深度解剖:向量化执行引擎、列式存储内核与千万级数据分析的工程实战
2026-07-25 01:43:45 +0800 CST
view 212
从第一性原理深度拆解 DuckDB 架构设计、向量化执行引擎、列式存储、扩展系统,以及千万级数据分析实战与性能调优。
DuckDB
列式存储
向量化执行
OLAP
数据分析
Python
Parquet
嵌入式数据库
性能优化
开源
MySQL事务隔离级别终极指南:从脏读到幻读,一文彻底讲透!
编程
MySQL事务隔离级别终极指南:从脏读到幻读,一文彻底讲透!
2025-08-22 21:35:23 +0800 CST
view 1128
本文深入探讨了MySQL的事务隔离级别及其对并发数据访问的影响,详细解释了事务的ACID特性以及四种隔离级别(读未提交、读已提交、可重复读、串行化)。通过示例代码,展示了脏读、不可重复读和幻读等并发问题,并提供了选择合适隔离级别的建议,以平衡数据一致性与性能。
数据库
数据一致性
并发控制
性能优化
Redis 8.0 重磅解析:重返开源、9种新数据结构、性能飙升36%——AI时代的内存数据库完全指南
编程
Redis 8.0 重磅解析:重返开源、9种新数据结构、性能飙升36%——AI时代的内存数据库完全指南
2026-06-27 04:12:31 +0800 CST
view 313
Redis 8.0 GA正式发布,详解许可证变更(AGPLv3)、9种新数据结构(Vector Set/JSON/Time Series/概率结构)、性能优化(延迟降低36%)、查询引擎升级、实战代码与迁移指南。
Redis
Redis 8.0
内存数据库
AI
向量搜索
JSON
时间序列
概率数据结构
性能优化
MySQL 处理大数据表的 3 种方案,写的太好了,建议收藏!
编程
MySQL 处理大数据表的 3 种方案,写的太好了,建议收藏!
2024-11-18 23:36:44 +0800 CST
view 1685
本文探讨了在MySQL中处理大数据表的三种方案:数据表分区、数据库分表和冷热归档。随着数据量的增加,查询性能可能下降,本文分析了问题的原因,并提供了相应的解决方案。通过合理选择方案,可以有效提升查询效率和数据库性能,适应不同的业务场景。
数据库
性能优化
数据管理
编程
MySQL 日志详解
2024-11-19 02:17:30 +0800 CST
view 1889
MySQL日志是数据库管理的重要组成部分,记录运行状态信息,关键于异常排查、性能优化和数据恢复。主要分为Server层日志和引擎层日志,包括错误日志、二进制日志、查询日志、慢查询日志、重做日志和撤销日志。RedoLog用于事务持久性,Binlog用于数据备份和主从复制。两者各有特点,共同确保数据完整性和一致性。
数据库
日志管理
性能监控
数据恢复
MySQL
DuckDB 的三次自我否定:当进程内数据库长出网络协议——Quack、VARIANT 与 v2.0 异步 I/O 的全链路架构拆解
编程
DuckDB 的三次自我否定:当进程内数据库长出网络协议——Quack、VARIANT 与 v2.0 异步 I/O 的全链路架构拆解
2026-08-11 07:48:34 +0800 CST
view 15
DuckDB 2026 三次自我否定深度拆解:Quack 协议为何建在 HTTP 上、6000万行4.94秒批量传输与8线程撞上存储层天花板、VARIANT shredding 带来 10-100 倍提速的三个来源、v2.0 异步 I/O 双线程池与 read-ahead 队列、TPC-H Q6 从 8.230s 到 2.227s 的调优路径。含部署实战与 14 条踩坑清单。
DuckDB,Quack协议,VARIANT,异步IO,OLAP,数据湖,DuckLake,Parquet,S3,列式存储,数据库,性能优化,湖仓一体
MySQL 主从同步一致性详解
综合
MySQL 主从同步一致性详解
2024-11-19 02:49:19 +0800 CST
view 1991
MySQL主从同步是一种数据复制技术,允许主服务器的数据自动同步到从服务器。本文详细解析了主从同步的一致性问题,包括异步、半同步和全同步复制模式,以及可能出现的数据延迟、丢失和冲突等问题。通过案例分析,提供了优化网络、统一配置和合理使用锁机制等解决方案,以确保主从同步的一致性。
数据库
数据同步
性能优化
故障恢复
MySQL悲观锁:高并发场景下的数据守护者
编程
MySQL悲观锁:高并发场景下的数据守护者
2025-03-29 14:55:09 +0800 CST
view 1558
本文探讨了MySQL悲观锁在高并发场景下的数据一致性保障机制,介绍了悲观锁的核心思想、实现原理、锁类型、事务隔离及实际应用案例,如账户转账和库存扣减。分析了悲观锁的优缺点、性能优化建议及死锁处理方法,并与乐观锁进行了对比,旨在帮助开发者合理选择锁机制以提升系统的可靠性和性能。
数据库
并发控制
数据一致性
开发实践
性能优化
ClickHouse 深度拆解:当关系型数据库学会「按列思考」——从 MergeTree 引擎、向量化执行到稀疏索引与生产级 OLAP 完全指南(2026)
编程
ClickHouse 深度拆解:当关系型数据库学会「按列思考」——从 MergeTree 引擎、向量化执行到稀疏索引与生产级 OLAP 完全指南(2026)
2026-07-17 02:44:42 +0800 CST
view 248
深度拆解 ClickHouse v25.8 LTS:从列存与向量化执行原理、MergeTree 引擎家族、稀疏主键索引、物理存储布局,到物化视图、跳数索引、Kafka 接入与 Python 实战、生产级性能优化完全指南。
ClickHouse
OLAP
列式存储
MergeTree
向量化执行
物化视图
数据分析
数据库
sql语句分别按日,按周,按月,按季统计金额
编程
sql语句分别按日,按周,按月,按季统计金额
2024-11-17 05:05:22 +0800 CST
view 3419
本文讨论如何使用SQL语句按日、周、月和季节统计消费记录的总量。提供了四条SQL示例语句,分别实现不同时间段的消费总和计算,并说明了如何根据指定日期进行查询。示例中使用了聚合函数和groupby语句,适用于消费记录表的分析。
数据库
SQL
数据分析
Redis 8 深度实战:当 antirez 亲手写下 Vector Set,Redis 如何长成内存里的多模型数据库
编程
Redis 8 深度实战:当 antirez 亲手写下 Vector Set,Redis 如何长成内存里的多模型数据库
2026-07-10 19:43:38 +0800 CST
view 213
深度拆解 Redis 8 的多模型进化:Vector Set 向量检索、原生 JSON、Bloom/Cuckoo/CMS/Top-K/T-Digest 概率结构、TimeSeries 与统一查询引擎,配可运行代码与 RAG 语义缓存实战。
Redis 8
Vector Set
向量数据库
RedisJSON
概率数据结构
RAG
DuckDB 1.5 深度实战:当分析型数据库压缩进一个文件,我们为什么还需要 Spark?
编程
DuckDB 1.5 深度实战:当分析型数据库压缩进一个文件,我们为什么还需要 Spark?
2026-07-11 03:41:54 +0800 CST
view 428
DuckDB 1.5 深度实战:拆解嵌入式分析型数据库如何用向量化执行、列式存储和进程内架构,把 Spark 的单体分析任务压缩进一个文件。含 Python 联邦查询、DuckLake/Iceberg、Parquet 下推与性能优化实战。
DuckDB
OLAP
嵌入式数据库
数据分析
向量化执行
列式存储
Parquet
批量导入scv数据库
编程
批量导入scv数据库
2024-11-17 05:07:51 +0800 CST
view 3499
本文介绍了如何进行MySQL环境检测,特别是关于secure_auth和secure_file_priv变量的设置。通过修改my.ini文件并重启MySQL,可以启用secure_auth。接着,提供了使用LOADDATAINFILE命令将UTF-8编码的文本文件导入数据库的核心代码示例。
数据库
MySQL
数据导入
使用 Go 语言并发处理 CSV 文件到数据库
编程
使用 Go 语言并发处理 CSV 文件到数据库
2024-11-18 12:08:55 +0800 CST
view 1908
本文介绍了如何使用Go语言的并发特性高效地将CSV文件中的联系人信息迁移到数据库。通过使用goroutine和channel,本文展示了并发处理的实现方式,并提供了完整的代码示例,包括数据结构定义、错误处理和最终响应生成。此方法显著提升了数据迁移的速度,适用于大规模数据处理。
编程
数据处理
Go语言
并发编程
数据库
DuckDB 深度拆解:当嵌入式数据库决定「干掉全部 OLAP 数据仓库」——一个 26K Star 的 C++ 引擎如何用向量化执行和异步 I/O 重新定义「分析即查询」的终极形态
编程
DuckDB 深度拆解:当嵌入式数据库决定「干掉全部 OLAP 数据仓库」——一个 26K Star 的 C++ 引擎如何用向量化执行和异步 I/O 重新定义「分析即查询」的终极形态
2026-08-04 22:16:41 +0800 CST
view 103
深度拆解26K Star开源嵌入式OLAP数据库DuckDB:向量化执行引擎、列式存储压缩、Quack客户端-服务器协议、异步I/O预取队列、DuckLake SQL原生湖仓格式,附完整架构分析与Python实战代码
DuckDB
向量化执行
OLAP
列式存储
异步I/O
Quack协议
DuckLake
数据分析
嵌入式数据库
开源
DuckDB 2026 深度拆解:当嵌入式数据库决定「干掉全部 OLAP 数据仓库」——一个 26K Star 的 C++ 引擎如何用向量化执行和异步 I/O 重新定义「分析即查询」
编程
DuckDB 2026 深度拆解:当嵌入式数据库决定「干掉全部 OLAP 数据仓库」——一个 26K Star 的 C++ 引擎如何用向量化执行和异步 I/O 重新定义「分析即查询」
2026-08-04 22:18:44 +0800 CST
view 154
深度拆解26K Star开源嵌入式OLAP数据库DuckDB:向量化执行引擎、列式存储压缩、Quack客户端-服务器协议、异步I/O预取队列、DuckLake SQL原生湖仓格式,附完整架构分析与Python实战代码
DuckDB
向量化执行
OLAP
列式存储
异步I/O
Quack协议
DuckLake
数据分析
嵌入式数据库
开源
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调
回调
上一页
1
2
3
4
5
...
60
下一页