senior-data-engineer
世界級資深資料工程技能,用於構建可擴展的資料管道、ETL/ELT 系統及現代化資料基礎架構,精通 Python、Spark、dbt 與 Kafka。
探索可重用的代理技能,查看實作細節,快速找到適合你工作流程的技能。
共找到 156 個技能
世界級資深資料工程技能,用於構建可擴展的資料管道、ETL/ELT 系統及現代化資料基礎架構,精通 Python、Spark、dbt 與 Kafka。
管理 SignalRoom 行銷平台的 dlt 資料管線與 Temporal 工作流。支援同步 Everflow、Redtrack 與 S3 資料至 Postgres,並執行狀態檢查與除錯。
自動化將 Netflix Conductor 工作流遷移至 Temporal Python,包含伺服器編排、Worker 管理與工作流疑難排解。
建構並協調從資料準備、模型訓練、驗證到自動化部署的端到端 MLOps 管線。
全面的 n8n 工作流測試框架,用於自動化環境中的生命週期驗證、節點間數據流、錯誤處理和性能基準測試。
建立並執行基於狀態機的自動化流程,支援人機協作,適用於複雜的多步驟商業處理。
專注於資料工程的 AI 代理,負責設計 ETL/ELT 管線、定義資料結構、管理資料品質以及實作可靠的資料匯入流程。
使用 Upstash Workflow SDK 構建持久且可靠的無伺服器工作流。定義端點、管理複雜的執行步驟,並與 QStash 整合以實現自動重試和狀態管理。
Prefect CLI 技能,用於執行 Prefect 基礎設施中的變更操作,如觸發部署、取消流程執行與管理自動化任務。
利用 ClawTeam CLI 協調多代理 AI 群體,實現平行任務執行、依賴管理與團隊協作,支援 git 工作樹隔離與 tmux 操作。
一個多範式 ETL 管線代理,支援批次與串流資料處理、自動結構推論以及可設定的 DAG 轉換,適用於異質資料來源。
建構無代碼 MCP 伺服器,透過 YAML 以有向圖形式編排工具,實現資料轉換、條件路由與自動化工作流。