wenextly
本站致力于IT相关技术的分享
基于关系型数据库构建可插拔式NLP处理引擎的整洁架构实践 基于关系型数据库构建可插拔式NLP处理引擎的整洁架构实践
一个常见的NLP任务起点，往往是一个Python脚本。它用几行代码加载一个预训练模型，处理一段文本，然后打印结果。这对于验证性工作（POC）是完美的。但在真实项目中，需求会迅速膨胀：我们需要支持不同的处理流程（先分词再实体识别，或者先情感分
2023-10-27 软件架构
软件工程与架构 NLP Clean Architecture SQL Python
使用 OpenFaaS 与 Tekton 在 GKE 上构建事件驱动的异步数据处理管道 使用 OpenFaaS 与 Tekton 在 GKE 上构建事件驱动的异步数据处理管道
一个棘手的生产问题摆在面前：用户上传视频文件到 GCS，我们需要对其进行一系列处理——生成多种分辨率的转码版本、提取关键帧作为封面、分析元数据。这些操作耗时且资源密集，从几秒到几十分钟不等。直接在 API 服务中同步处理会造成请求超时，而简
2023-10-27 云原生
GCP GKE OpenFaaS Tekton 数据处理 Node.js
在 EKS 上使用 Go 构建面向 Cassandra 的分布式 Saga 事务协调器 在 EKS 上使用 Go 构建面向 Cassandra 的分布式 Saga 事务协调器
项目初期，一个看似简单的用户注册流程，需要在用户服务中创建记录、在账户服务中初始化余额，并在权限服务中赋予默认角色。这三步操作，必须是一个原子操作。任何一步失败，整个注册流程都应回滚，不能留下脏数据。在关系型数据库的世界里，一个 BEGIN
2023-10-27 分布式系统
Go AWS EKS 分布式一致性 Cassandra 微服务
为VPC内Oracle数据库构建基于Jib的低延迟Java Cloud Function 为VPC内Oracle数据库构建基于Jib的低延迟Java Cloud Function
我们需要一个能处理突发流量的HTTP端点，它接收JSON负载，经过简单业务逻辑处理后，对一个部署在VPC内的Oracle数据库执行一次事务性更新。项目要求P99延迟必须控制在800毫秒以内，同时由于流量模式极不规律，大部分时间处于闲置状态，
2023-10-27 云原生
Java Google Cloud Functions Jib Oracle Serverless
利用 Qwik 和 Express.js 构建 Weaviate HNSW 索引性能的可视化分析器 利用 Qwik 和 Express.js 构建 Weaviate HNSW 索引性能的可视化分析器
向量搜索的默认参数就像汽车的自动挡——可靠、易用，但无法提供赛道级的极致性能。当我们的应用场景从“能用”变为“极致快、极致准”时，深入向量数据库的索引内部，手动调整那些神秘的参数，就成了绕不开的挑战。问题在于，这些参数（例如HNSW索引中的
2023-10-27 后端架构
Qwik Weaviate Express.js Vector Search Performance
基于 etcd 与 MongoDB 构建动态预览环境的分布式协调与状态持久化实践 基于 etcd 与 MongoDB 构建动态预览环境的分布式协调与状态持久化实践
团队的开发流程一直有个瓶颈：代码审查（Code Review）严重依赖于开发者的本地环境。前端工程师需要拉取后端分支，后端工程师需要理解前端的构建过程，这导致每次 PR 的审查周期都很长，反馈回路极慢。我们的目标是实现自动化预览环境——任何
2023-10-27 平台工程
etcd MongoDB Chakra UI Rome 分布式系统
2 / 5