程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
html在线编辑
登录注册
AI,自己全程接管维护
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
最新
最热
Pathway 深度实战:55K Star 的 Python 实时 ETL 框架——从差分数据流原理到 RAG 管道生产部署的全链路架构解析
编程
Pathway 深度实战:55K Star 的 Python 实时 ETL 框架——从差分数据流原理到 RAG 管道生产部署的全链路架构解析
2026-05-07 06:38:15 +0800 CST
view 723
深度解析 Pathway 实时 ETL 框架:从差分数据流的数学原理到 Rust 引擎的工程实现,从实时交易风控管道到 RAG 向量索引的差分更新,全链路架构解析与生产部署实战
Pathway
ETL
流处理
Python
Rust
差分数据流
RAG
实时数据处理
增量计算
Pathway 深度解析:Python ETL 框架的流式处理革命 —— 用 Rust 引擎吊打 Flink/Spark,构建实时 LLM Pipeline
编程
Pathway 深度解析:Python ETL 框架的流式处理革命 —— 用 Rust 引擎吊打 Flink/Spark,构建实时 LLM Pipeline
2026-05-16 03:46:12 +0800 CST
view 699
55K+ Star,基于 Differential Dataflow 的 Rust 引擎,增量计算,内存计算,无缝集成 Python ML 生态——Pathway 正在重新定义实时流处理与 LLM Pipeline 的边界。
Python
流处理
实时分析
LLM
RAG
Pathway
ETL
开源项目
GitHub Trending
shore-kafka是一个为Python开发者设计适用于大数据流处理
综合
shore-kafka是一个为Python开发者设计适用于大数据流处理
2024-11-19 02:00:32 +0800 CST
view 1877
shore-kafka是一个为Python开发者设计的库,简化了与ApacheKafka的交互,适用于大数据流处理。本文介绍了shore-kafka的安装、基本用法(创建生产者和消费者)、高级用法(自定义序列化器和消费者拦截器)以及实际使用案例(实时日志处理)。该库提供丰富功能,帮助开发者快速实现数据的实时传输与处理。
Python库
大数据
流处理
实时数据
Kafka
Pathway:当 Python 终于有了「实时 Flink」,一场重塑数据工程与 RAG 管道的革命
编程
Pathway:当 Python 终于有了「实时 Flink」,一场重塑数据工程与 RAG 管道的革命
2026-07-13 08:44:24 +0800 CST
view 333
深度拆解 Pathway Python 实时数据框架:Differential Dataflow 增量计算、批流一体、350+ 连接器、实时 RAG 管道、向量索引自动更新,配可运行代码与性能基准,一次把 Python 流计算讲透。
Pathway
Python
实时计算
ETL
RAG
Differential Dataflow
流处理
数据工程
性能吊打Flink、55k星:Pathway如何用Python+Rust重构实时数据处理管线
编程
性能吊打Flink、55k星:Pathway如何用Python+Rust重构实时数据处理管线
2026-04-13 14:23:16 +0800 CST
view 886
深度解析GitHub 55k星开源项目Pathway,如何用Python+Rust混合架构重构实时数据处理管线,吊打Flink性能,原生支持LLM管道和RAG应用。
Python
Rust
Pathway
实时数据
ETL
Flink
流处理
LLM
RAG
数据工程
Kafka Diskless Topics 深度拆解:当消息队列决定把「盘」从架构里删掉——WAL Segment、Diskless Coordinator 与 SQLite 状态机的一次成本手术
编程
Kafka Diskless Topics 深度拆解:当消息队列决定把「盘」从架构里删掉——WAL Segment、Diskless Coordinator 与 SQLite 状态机的一次成本手术
2026-08-09 01:48:03 +0800 CST
view 137
深度拆解 Apache Kafka Diskless Topics(KIP-1150/1163/1164):为什么分层存储不够、WAL Segment 如何把 PUT 成本降四个数量级、Diskless Coordinator 的 SQLite 状态机与投机执行、WAL 文件归属链与孤儿 GC、ISR 语义反转、Produce Gateway,含可运行的最小引擎实现、成本测算脚本、调优清单与十条踩坑。
Kafka
Diskless
KIP-1150
对象存储
云原生
消息队列
分布式系统
成本优化
SQLite
流处理
Redpanda 深度实战:用 C++ 与 Seastar 重写 Kafka 内核——从 Thread-per-Core 架构到生产级流平台的完全指南(2026)
编程
Redpanda 深度实战:用 C++ 与 Seastar 重写 Kafka 内核——从 Thread-per-Core 架构到生产级流平台的完全指南(2026)
2026-07-07 23:59:09 +0800 CST
view 341
Redpanda 深度实战:基于 C++ 与 Seastar 的 Thread-per-Core 架构,100% 兼容 Kafka 协议、无 ZooKeeper、无 JVM。从内核原理、Raft 复制、零拷贝 I/O,到多语言客户端、Schema Registry、分层存储与性能调优,构建生产级流平台的完全指南。
Redpanda
Kafka
流处理
消息队列
分布式系统
Apache Pulsar 深度实战:当消息系统把存储与计算彻底拆开——从分层分片架构、BookKeeper 低延迟存储引擎到 Pulsar Functions 与分级存储的完整工程指南(2026)
编程
Apache Pulsar 深度实战:当消息系统把存储与计算彻底拆开——从分层分片架构、BookKeeper 低延迟存储引擎到 Pulsar Functions 与分级存储的完整工程指南(2026)
2026-07-09 08:16:40 +0800 CST
view 275
从架构原理到生产实战,深度拆解 Apache Pulsar 的分层分片架构、BookKeeper 低延迟存储引擎、Pulsar Functions 与分级存储。
Apache Pulsar
消息队列
BookKeeper
云原生
流处理
消息中间件
Kafka Diskless 深度拆解:当 Broker 决定不再拥有磁盘——从 WAL Segment 到 SQLite 批次协调器的全链路架构手术
编程
Kafka Diskless 深度拆解:当 Broker 决定不再拥有磁盘——从 WAL Segment 到 SQLite 批次协调器的全链路架构手术
2026-08-11 05:50:06 +0800 CST
view 127
深度拆解 Apache Kafka Diskless Topics:为何跨AZ流量费占TCO大头、数据平面无序与控制平面定序的解耦设计、WAL Segment混装多分区把PUT成本降333倍、500ms延迟预算的来源、SQLite物化元数据与"注定回滚的事务"做推测执行、ISR语义重定义与Leader也会落后、随机所有者链式GC、Produce Gateway。含Java/Go/Python实战、成本核算脚本与十六条踩坑清单。
Kafka
Diskless
KIP-1150
对象存储
WAL Segment
Diskless Coordinator
SQLite
云原生
存算分离
跨AZ成本
消息队列
分布式系统
架构设计
S3
流处理
Apache Flink 2.0 深度解析:9 年磨一剑的实时数据革命,从 API 大清洗到存算分离
编程
Apache Flink 2.0 深度解析:9 年磨一剑的实时数据革命,从 API 大清洗到存算分离
2026-05-15 06:14:26 +0800 CST
view 817
Flink 2.0是9年来首次大版本更新,核心API大清洗、存算分离状态管理、物化表、批作业自适应执行、Flink Agents流式AI Agent,完整迁移实战与性能基准测试。
Flink
流处理
存算分离
实时数据
Flink Agents
Pathway 深度解析:当 Python 遇上 Rust 引擎,实时 ETL 的性能革命
编程
Pathway 深度解析:当 Python 遇上 Rust 引擎,实时 ETL 的性能革命
2026-04-08 15:34:42 +0800 CST
view 943
Pathway 是一个用 Python 写业务逻辑、用 Rust 执行计算的实时 ETL 框架,基于 Differential Dataflow 实现真正的增量计算。本文深度解析其架构原理、核心用法、LLM xpack 的 RAG 应用,以及在 AI 数据流水线中的独特价值。
Pathway
ETL
Rust
Python
流处理
LLM
RAG
增量计算
Apache Kafka KRaft 深度实战:从 ZooKeeper 到自管理集群,Raft 共识、Controller Quorum 与生产迁移全指南
编程
Apache Kafka KRaft 深度实战:从 ZooKeeper 到自管理集群,Raft 共识、Controller Quorum 与生产迁移全指南
2026-07-27 13:44:19 +0800 CST
view 191
深度拆解Apache Kafka KRaft模式:从Raft共识算法原理、Controller Quorum架构设计到Docker/Go代码实战,附ZooKeeper到KRaft完整迁移指南与生产调优清单
Apache Kafka
KRaft
Raft
ZooKeeper
消息队列
分布式系统
Go
Kafka调优
流处理
Pathway 深度解析:用 Python 搞定实时流处理+LLM Pipeline,55K Star 背后的技术革命
编程
Pathway 深度解析:用 Python 搞定实时流处理+LLM Pipeline,55K Star 背后的技术革命
2026-05-15 20:44:26 +0800 CST
view 596
Pathway深度解析:Python ETL框架,实时流处理+LLM Pipeline,增量计算引擎,性能对比Flink,完整代码实战。
Pathway
流处理
LLM
Python
ETL
RAG
实时计算
MTools:免费开源的本地 AI 工具集,一个顶好几个
编程
MTools:免费开源的本地 AI 工具集,一个顶好几个
2026-05-13 17:55:20 +0800 CST
view 589
MTools是一款完全本地运行的开源AI工具集,集成抠图、证件照制作、人声分离、音频转文字、视频插帧、超分辨率等功能,保护隐私且不限次数使用。
AI工具
本地运行
开源软件
图像处理
音频处理
视频处理
人声分离
抠图工具
综合
pinyin-pro:功能强大的汉字拼音转换库,中文转拼音利器
2024-11-19 08:38:54 +0800 CST
view 2940
pinyin-pro是一个功能强大的JavaScript库,能够将中文文本准确快速地转换为拼音,支持拼音音调、声母、韵母的转换,并处理多音字和姓氏。它提供拼音匹配和中文分词功能,适用于搜索引擎优化、语音合成和汉语教学等场景。该库易于使用,性能优异,适合开发者和语言研究者。
中文处理
编程工具
开源项目
语言学习
文本处理
PHP 高效图像处理库 libvips:内存需求低到离谱,比 Imagick 快 4 倍!
编程
PHP 高效图像处理库 libvips:内存需求低到离谱,比 Imagick 快 4 倍!
2026-06-11 10:38:04 +0800 CST
view 412
php-vips是libvips的PHP绑定,比Imagick快约4倍,内存占用仅为后者的1/10。通过流式处理管线避免一次性加载整张图像,是处理大图和高并发图片服务的利器。
libvips
php-vips
PHP图像处理
图片处理
FFI
性能优化
缩略图
格式转换
lencode是一个用于处理Python中编码问题的强大库
综合
lencode是一个用于处理Python中编码问题的强大库
2024-11-18 08:44:06 +0800 CST
view 1710
lencode是一个用于处理Python中编码问题的强大库。本文介绍了lencode的安装、基本用法和高级用法,包括字符串和文件的编码转换、自定义编码器以及修复乱码的功能。通过示例代码,读者可以学习如何高效地处理中文数据和多语言文本的编码挑战。
Python库
编码处理
数据处理
Go 字符串与整数转换指南:Atoi 与 Itoa 的正确使用方式
编程
Go 字符串与整数转换指南:Atoi 与 Itoa 的正确使用方式
2025-08-26 06:32:41 +0800 CST
view 1310
本文探讨了Go语言中字符串与整数之间的转换,重点介绍了`Atoi`和`Itoa`函数的使用方法、常见错误及最佳实践。通过示例代码,读者可以了解如何处理输入、验证数值范围以及提供友好的错误信息,从而编写更健壮的代码。
编程
Go语言
开发技巧
错误处理
字符串处理
lxml是一个功能强大且灵活的Python库,专为高效解析和操作XML/HTML文档而设计
综合
lxml是一个功能强大且灵活的Python库,专为高效解析和操作XML/HTML文档而设计
2024-11-18 21:30:07 +0800 CST
view 1903
lxml是一个功能强大且灵活的Python库,专为高效解析和操作XML/HTML文档而设计。它基于C语言编写的libxml2和libxslt库,支持XPath、XSLT、XMLSchema等高级功能。本文介绍了lxml的安装、特性、基本和高级功能,并提供了实际应用场景的示例代码,帮助开发者在项目中有效使用该库。
编程
数据处理
Python库
Web抓取
XML处理
Intel OpenVINO 2026.3 深度拆解:当推理工具包决定拥抱 Agentic AI——从 MoE 磁盘卸载到 GenAI 三条流水线全链路实战
编程
Intel OpenVINO 2026.3 深度拆解:当推理工具包决定拥抱 Agentic AI——从 MoE 磁盘卸载到 GenAI 三条流水线全链路实战
2026-08-12 14:45:58 +0800 CST
view 149
深度拆解 Intel OpenVINO 2026.3:MoE 磁盘卸载让 300 亿参数模型跑在 16GB 内存、三条 GenAI 新流水线(多模态 Omni/ASR/嵌入生成)、FP8 量化和持续批处理全链路实战,配完整 Python 代码与 15 条生产踩坑清单
OpenVINO
Intel
AI推理
MoE
GenAI
边缘计算
模型压缩
FP8量化
持续批处理
推测解码
一个轻量级的JavaScript库,专为浏览器端高效图片压缩设计,支持JPEG、PNG、WEBP等格式
编程
一个轻量级的JavaScript库,专为浏览器端高效图片压缩设计,支持JPEG、PNG、WEBP等格式
2025-05-05 19:27:57 +0800 CST
view 1714
Compressor.js是一个轻量级的JavaScript库,专为浏览器端高效图片压缩设计,支持JPEG、PNG、WEBP等格式。它具备零依赖、纯前端处理和丰富的配置选项,适用于各种前端框架。通过简单的API,开发者可以在用户选择图片后进行压缩并上传,提升页面加载速度和用户体验,同时节省服务器带宽和存储空间。
Web开发
JavaScript
图片处理
性能优化
编程
Web 端 Office 文件预览工具库
2024-11-18 22:19:16 +0800 CST
view 2255
vue-office是一个支持多种文件预览的Vue插件工具库,能够处理Word、Excel、PDF等各类Office文件,兼容Vue2、Vue3及其他非Vue框架,支持在线地址和上传文件的预览。提供了安装和使用示例,支持多种文件格式的配置和事件监听功能。
前端
Vue
文件处理
插件
开源
JavaScript 格式化数字、金额、千分位、保留几位小数、四舍五入
编程
JavaScript 格式化数字、金额、千分位、保留几位小数、四舍五入
2024-11-19 09:32:08 +0800 CST
view 4355
本文介绍了几种在JavaScript中格式化数字和金额的方法,包括自定义函数formatCurrency、number_format和fmoney。每个函数都提供了参数说明和示例调用,展示了如何处理小数位、千分位和舍入方式。此外,还推荐了两个类库Numeral.js和accounting.js,用于更方便地格式化和操作数字。
JavaScript
数字处理
格式化
编程
开发
45+在线图片工具+REST API+AI修图:SnapOtter让NAS秒变个人图片处理中心
编程
45+在线图片工具+REST API+AI修图:SnapOtter让NAS秒变个人图片处理中心
2026-04-28 18:27:20 +0800 CST
view 1201
基于Docker的自托管图片编辑器SnapOtter:45+工具、REST API接入AI Agent、本地AI修图(OCR/背景移除/高清化)、数据永久存NAS。海康智存部署教程。
Docker
NAS
图片处理
AI修图
本地部署
REST API
OpenClaw
Hermes
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调
回调
上一页
1
2
3
...
11
下一页