kettle mongodb input 增量数据设置(坑点)

ㅤㅤㅤㅤ ㅤㅤㅤㅤ

357人浏览 · 2025-12-15 11:19:10

ㅤㅤㅤㅤ ㅤㅤㅤㅤ · 2025-12-15 11:19:10 发布

背景：我需要从mongodb数据库中增量获取数据，增量的条件就是昨天的0点到今天的0点。

解决：

从作业中先添加“设置变量”模块，然后增加一个“中间转换”来获取变量具体数据，最后指到获取数据的转换上。

如图：

添加设置变量

中间表(转化表)获取变量值

获取数据转换设置

详情也可参考这两位老师的文章：

https://blog.csdn.net/continue_gdufe/article/details/148476894https://blog.csdn.net/continue_gdufe/article/details/148476894

https://blog.csdn.net/pathconquer/article/details/117704346https://blog.csdn.net/pathconquer/article/details/117704346

AI编程社区

汇聚全球AI编程工具，助力开发者即刻编程。

更多推荐

码道 · 寻艺——从零构建“非遗交互式对话平台“的完整实践

AI编程社区

码道：用 Python + FastAPI 快速构建一个学生信息管理接口：从零到 Swagger 在线文档

在日常开发和教学中，我们经常需要一套简单、可控、能快速上手的后端接口来演示"前后端分离"、练习 Restful API 设计，或者作为前端联调的 Mock 服务。传统做法往往是搭一套完整的 Web 工程：配置数据库、编写 DAO、引入 ORM、做请求分发……一套流程下来，光环境搭建就要花去不少时间，对于想快速验证想法、或者刚入门 API 开发的同学来说，显得过于沉重。

AI编程社区

码道：从零构建学生信息管理系统 API：FastAPI 内存版 CRUD 项目全解析

FastAPI 的强大，很大程度上来自 Pydantic 的校验能力。我们写下类型声明，FastAPI 在运行时自动把它变成边界检查器。name：字符串，长度限制 1 到 50；age：整数，限制在 6 到 120 之间（ge大于等于、le小于等于）；gender：字符串，用正则限定只能是"男"“女”“其他”；email：邮箱格式字符串；grade与major：可选字段，代表班级和专业方向。