ecotopaim
本站致力于IT相关技术的分享
2023
10
27
构建从 Pinia 到 PostgreSQL 的全链路追踪 Celery 异步任务上下文传递实战 构建从 Pinia 到 PostgreSQL 的全链路追踪 Celery 异步任务上下文传递实战
一个线上问题的排查请求打破了周五下午的平静。用户反馈：“提交数据分析任务后，等了快一分钟才在页面上看到结果，系统是不是变慢了？” 我查了API网关日志，对应接口的响应时间稳定在50ms以内。再看应用服务器日志，请求处理也一切正常。问题显然出
2023-10-27 可观测性
OpenTelemetry PostgreSQL CircleCI Celery Pinia
27
27
27
27
27
基于 NestJS 构建一个集成了 Puppeteer 网页抓取与 Milvus 向量化的实时 WebSocket 数据管道 基于 NestJS 构建一个集成了 Puppeteer 网页抓取与 Milvus 向量化的实时 WebSocket 数据管道
在处理一个需要即时响应用户输入，并执行长耗时、多阶段后台任务的场景时，传统的 HTTP 请求-响应模型显得力不从心。设想这样一个需求：用户提交一个 URL，系统需要立刻开始抓取该网页的动态渲染内容，对内容进行分块和向量化，最后存入 Milv
2023-10-27 后端架构
NestJS Puppeteer WebSockets Milvus Web API
4 / 5