程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
Spark 相关技术文章
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
Apache Spark 4.2.0 发布解读:原生地理空间、Change Data Capture 与 Arrow Python 默认启用
编程
Apache Spark 4.2.0 发布解读:原生地理空间、Change Data Capture 与 Arrow Python 默认启用
2026-09-09 10:25:27
Apache Spark 4.2.0 发布:新增 GEOMETRY/GEOGRAPHY 地理空间类型并默认启用,引入 CDC 与 Auto CDC 增量入湖,Arrow Python UDF 默认开启,DSv2 事务管理与 INSERT schema 演化,支持 Java 25 并现代化 Spark Web UI。
Spark
大数据
数据工程
CDC
批处理的演进:从 Unix 工具到分布式系统
编程
批处理的演进:从 Unix 工具到分布式系统
2026-09-06 00:15:10
系统梳理批处理技术的演进历程:Unix工具时代(grep/awk/sed/sort通过管道组合)、脚本语言和数据库时代(Python/SQL声明式编程)、MapReduce时代(Hadoop分布式计算)、Spark时代(内存计算DAG执行引擎)、云原生时代(Snowflake/BigQuery分离存储计算、Serverless、流批一体)。涵盖各阶段的核心技术、优势和局限性。
批处理
Unix
MapReduce
Hadoop
Spark
分布式系统
数据处理
云原生
Apache Zeppelin 怎么跑起来:一个支持 Spark/Flink/Hive 的协作 Notebook
编程
Apache Zeppelin 怎么跑起来:一个支持 Spark/Flink/Hive 的协作 Notebook
2026-09-04 22:00:53
Apache Zeppelin 是基于 Web 的交互式数据分析 Notebook,类似 Jupyter,支持 SQL/Java/Scala/Python/R 以及 Spark、Flink、Hive、MongoDB 等后端。本文贴稿介绍其语言与数据源支持、JDK 8 + Ubuntu/macOS 安装前提、两种解释器安装包差异、Unix/Windows 启动命令与 localhost:8080 访问方式,并提示自带示例 notebook 与源码/Docker 安装选项。
Apache
Zeppelin
Notebook
大数据
数据分析
Spark
Flink
Apache Iceberg V3 深度拆解:删除向量、行血缘与 Variant 类型,湖仓表格式的第三次范式转移
编程
Apache Iceberg V3 深度拆解:删除向量、行血缘与 Variant 类型,湖仓表格式的第三次范式转移
2026-08-02 01:39:04
Iceberg V3 规范深度拆解:从 V2 position delete 的读放大死穴讲起,逐字节剖析 Puffin 删除向量与 Roaring Bitmap 编码、行血缘的零开销 ID 分配算法、Variant 类型与 Shredding 打散机制。附手写 DV 解析器、增量物化视图、Compaction 决策脚本与踩坑清单。
Iceberg
数据湖
湖仓一体
大数据
Spark
开源
Apache Iceberg V3 深度拆解:Deletion Vectors、Row Lineage 与 Variant 类型,开放表格式如何终结数据湖的「文件散养」时代
编程
Apache Iceberg V3 深度拆解:Deletion Vectors、Row Lineage 与 Variant 类型,开放表格式如何终结数据湖的「文件散养」时代
2026-07-30 01:46:13
深度拆解 Apache Iceberg V3 规范三大核心改动:Binary Deletion Vectors 终结删除文件堆积、Row Lineage 行级血缘赋能增量计算与审计、Variant 半结构化类型落地,附 V2 升级实战与冷静的边界分析。
Iceberg
数据湖
Deletion Vectors
Row Lineage
Variant
表格式
Spark
Trino
大数据
开源
Gemini 3.5 + Antigravity 2.0 + Spark 深度实战:当谷歌一口气亮出三张王牌——从 Flash 级智能到 93 个 Agent 自治造 OS 的完全指南(2026)
编程
Gemini 3.5 + Antigravity 2.0 + Spark 深度实战:当谷歌一口气亮出三张王牌——从 Flash 级智能到 93 个 Agent 自治造 OS 的完全指南(2026)
2026-06-13 07:18:21
深度解析 Google I/O 2026 发布的 Gemini 3.5 Flash、Antigravity 2.0 和 Gemini Spark 三大产品,从模型架构到 Agent 编排再到全时运行,完整拆解谷歌的 AI Agent 基础设施战略
AI Agent
Gemini
Google IO 2026
Antigravity
Spark
MCP
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
python
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调