hezylo
本站致力于IT相关技术的分享
  文章分类
后端架构 6 云原生 1 云原生与DevOps 1 前端工程化 1 可观测性 3 DevOps 4 数据工程 3 架构设计 1 可观测性工程 1 分布式架构 4 架构与设计 1 DevSecOps 1 分布式系统 1 MLOps 1 云原生与 DevOps 1
基于 Flink Axum 与 Dgraph 构建实时图特征计算与服务链路 基于 Flink Axum 与 Dgraph 构建实时图特征计算与服务链路
项目初期，我们的风控模型依赖于一套基于关系型数据库的特征工程体系。这套体系在处理用户个体行为或简单的一度关联时表现尚可，但随着欺诈手段的升级，我们发现大量的风险来自于团伙作案。这些团伙通过共享设备、IP地址、支付方式等资源，构建出复杂的、隐
2023-10-27 数据工程
Apache Flink Axum Dgraph Rust 图计算 实时特征
集成ActiveMQ与Koa实现Flink端到端Exactly-Once语义的架构复盘 集成ActiveMQ与Koa实现Flink端到端Exactly-Once语义的架构复盘
我们面临一个棘手的需求：一个外部系统通过HTTP API推送关键业务事件，我们的后端系统必须对这些事件进行有状态的流式处理，并且从数据接收到处理完成，整个链路必须保证“精确一次”（Exactly-Once）语义。任何事件的丢失或重复处理都可
2023-10-27 数据工程
Apache Flink Koa ActiveMQ GitHub Actions Babel
构建基于Jupyter的CockroachDB CDC交互式监控与管理面板 构建基于Jupyter的CockroachDB CDC交互式监控与管理面板
我们在生产环境中深度使用 CockroachDB，其原生的 Changefeeds (CDC) 功能是数据管道的基石。但问题随之而来：监控这些管道的状态成了一项繁琐的任务。团队成员，尤其是数据工程师，每天都在 kubectl logs、Pr
2023-10-27 数据工程
CockroachDB Jupyter Headless UI