归档: 2023/10

2023

10

27

我们面临一个具体的工程挑战：构建一个能够支撑高吞吐量文档摄入和低延迟向量检索的系统。一方面，数据源是非结构化文本，需要通过复杂的自然语言处理模型（例如 sentence-transformers）转换为向量嵌入，这是一个计算密集型任务，且生

2023-10-27 架构与设计

Pinecone Spring Boot Sanic 异构系统向量数据库

27

端到端 (E2E) 测试的稳定性是衡量其价值的核心指标。在一个采用数据库读写分离架构的系统中，一个常见的痛点是测试的随机性失败，其根源往往指向主从数据库之间的复制延迟。一个典型的场景是：测试用例通过 Playwright 创建了一个新用户，

2023-10-27 软件工程

Playwright Jest 读写分离 E2E测试数据库

27

在许多数据处理场景中，我们面临一个典型的架构窘境：需要Apache Spark的分布式计算能力来处理TB级的数据集，但整个项目的协调和调度需求又相对简单，引入Apache Airflow或Azkaban这类重型工作流引擎显得杀鸡用牛。这些引

2023-10-27 数据工程

Database SQLite Apache Spark Python 框架

27

定义问题：在遗留系统中集成现代AI能力一个稳定运行多年的PHP内容管理系统，承载着核心业务。现在的需求是在不进行颠覆性重构的前提下，为其赋予基于机器学习模型的智能推荐能力。模型由Python栈（scikit-learn, PyTorch等）

2023-10-27 架构设计

GitHub 框架 (Java) PHP 模型部署 AWS EKS

27

最初的痛点源于一个看似简单的需求：为我们的企业客户生成月度金融风控报告。这些报告并非简单的表格，而是由多个数据可视化图表、AI模型生成的风险评分和解释性文本构成，每个客户的报告都是高度定制化的。旧系统是一个传统的动态Web应用，每次客户访问

2023-10-27 架构设计

SSG AI HashiCorp Vault 数据科学与大数据代码规范

27

在维护一个由多种语言构成的微服务体系时，服务的平滑升级是一个无法回避的挑战。特别是对于核心 gRPC 服务，任何一个微小的变更失误都可能引发连锁故障。直接切换流量的“蓝绿部署”风险过高，我们需要一种更精细的控制手段。这里的核心痛点是：如何将

2023-10-27 分布式架构

Quarkus Envoy Proxy gRPC-Go