winmaxfit
本站致力于IT相关技术的分享
在GKE上利用自定义Kong插件为OpenFaaS函数构建分布式GraphQL聚合层 在GKE上利用自定义Kong插件为OpenFaaS函数构建分布式GraphQL聚合层
我们面临一个典型的Serverless架构演进后的困境：几十个细粒度的OpenFaaS函数部署在Google Kubernetes Engine (GKE)上，每个函数负责一个独立的业务领域，例如查询用户信息、获取订单列表、检查库存状态。前
2023-10-27 云原生
Google Cloud (GCP) OpenFaaS Kong GraphQL Client
构建基于Kubeflow的分布式SciPy计算组件以处理海量数据湖特征工程 构建基于Kubeflow的分布式SciPy计算组件以处理海量数据湖特征工程
我们的特征工程管道遇到了一个无法回避的物理瓶颈。最初为GB级数据集设计的、基于SciPy和Pandas的信号处理脚本，在面对数据湖中TB级的时序数据时，单机执行时间从几小时飙升到数天。简单地垂直扩展实例（使用内存和CPU更大的机器）很快就触
2023-10-27 MLOps
Kubernetes Kubeflow MLOps SciPy Data Lake
从WebAuthn无密码认证到Chakra UI实时更新的全栈事件溯源架构实践 从WebAuthn无密码认证到Chakra UI实时更新的全栈事件溯源架构实践
一个棘手的问题摆在面前：如何构建一个多人协作的操作平台，既要保证操作的绝对安全，又要让所有在线用户的界面实时、精准地同步状态，同时还需保留一份不可篡改的完整操作审计日志。传统的 CRUD + WebSocket 方案能勉强应付，但在真实项目
2023-10-27 后端架构
API Gateway Chakra UI Event Sourcing Server-Sent Events (SSE) WebAuthn
异构微服务体系的动态凭证注入架构实现 异构微服务体系的动态凭证注入架构实现
技术痛点：静态凭证的脆弱性在维护一个混合技术栈的微服务环境时，凭证管理总是一个绕不开的难题。系统里既有基于JVM的Scala服务，负责处理复杂的业务逻辑和数据聚合；又有用Go新写的轻量级网关服务，追求极致的并发性能。这些服务都需要访问共享的
2023-10-27 分布式架构
HashiCorp Vault Scala Go-Fiber Zookeeper
构建基于OIDC与MySQL的实时特征存储元数据服务及Storybook组件化前端 构建基于OIDC与MySQL的实时特征存储元数据服务及Storybook组件化前端
当团队的机器学习模型从个位数增长到几十个时，特征管理混乱是必然会引爆的第一个问题。最初，特征逻辑散落在各个数据处理脚本和模型训练代码中，不仅重复计算，更严重的是线上线下特征不一致导致的灾难性后果。我们决定构建一个内部的Feature Sto
2023-10-27 MLOps
Go Feature Store MySQL OpenID Connect (OIDC) Storybook Emotion React
构建基于gRPC契约的全栈类型安全 从Scala后端到Next.js前端的端到端测试实践 构建基于gRPC契约的全栈类型安全 从Scala后端到Next.js前端的端到端测试实践
团队最近接手的一个项目中，一个经典的线上故障再次上演：后端一位同事为了优化，将一个API响应中的userId字段类型从string改为了number。这个变更在后端的所有单元测试中都顺利通过，Swagger文档也更新了。然而，依赖这个字段的
2023-10-27 后端架构
gRPC 测试 Scala Next.js Testcontainers
4 / 5