常见问题
Pipeline 数据处理主要解决什么问题?
Pipeline 用于在数据入库前解析原始日志和观测数据,完成字段提取、格式转换、过滤、脱敏和标准化,让后续检索、告警、聚合和关联分析更准确。
Pipeline 可以处理哪些数据?
Pipeline 可以处理日志、指标、对象、链路、网络等多类观测数据,常见场景包括解析 service、host、status、duration、trace_id 等字段,并统一字段命名和类型。
为什么要在入库前做数据脱敏?
在入库前脱敏可以避免手机号、身份证号、Token、账号等敏感信息进入后续查询、共享和归档链路,从源头降低数据泄露和合规风险。