senior-data-engineer
世界级资深数据工程技能,用于构建可扩展的数据管道、ETL/ELT 系统及现代化数据基础设施,精通 Python、Spark、dbt 与 Kafka。
探索可复用的代理技能,查看实现细节,快速找到适合你工作流程的技能。
共找到 158 个技能
世界级资深数据工程技能,用于构建可扩展的数据管道、ETL/ELT 系统及现代化数据基础设施,精通 Python、Spark、dbt 与 Kafka。
引导式功能开发代理,通过系统化的代码探索、架构设计、代码实现与自动化测试完整周期完成开发任务。
一个多范式 ETL 流水线代理,支持批处理和流式数据处理、自动模式推断及基于 DAG 的可配置转换,适用于异构数据源。
为 PostgreSQL 数据库设计高性能与可维护架构的综合指南,涵盖最佳实践、数据类型、索引策略及高级功能。
构建并编排从数据准备、模型训练、验证到自动化部署的端到端 MLOps 管线。
使用向量数据库、语义搜索与 LangGraph 构建生产级 RAG 系统,为 LLM 提供外部知识基础。
用于可靠、多目标事件传递的开源基础设施。将 Webhook 路由至 HTTP、SQS、RabbitMQ、Pub/Sub、EventBridge 或 Kafka,并提供内置重试与可观测性功能。
为 AI 代理提供持久的语义长期记忆。通过语义压缩,跨对话存储、查询并检索对话记录、决策与多模态上下文。
结构化、模板驱动的端到端功能开发工作流,包含编码、自动化测试、验证及基于会话的持续改进。
构建 RAG 系统以利用私有数据增强 LLM。包含向量数据库集成、嵌入策略、混合搜索及 FastAPI 后端的高级检索模式。
专责 IDF (Information Display Frame) 类型的子代理,用于生成与审查 Java、TypeScript 及 Go 的 CQRS Query Side 实现。
使用 Flow Nexus 平台在分布式 E2B 沙盒中训练与管理神经网络,支持 Transformer、LSTM 和 GAN 等自定义架构。