共享Kubernetes集群下无需控制面部署的开源Sidecar流量观测方案咨询

以下方案均无需集群控制面部署权限，仅需拥有所属Namespace的工作负载部署、ConfigMap创建权限即可使用，全部采用无商业使用限制的开源许可，覆盖API调用次数、延迟、请求/响应耗时、错误统计等指标采集需求，部分自带可视化能力：

方案1：OpenTelemetry Collector Sidecar模式 #

• 许可协议：Apache2.0，无任何商业使用限制
• 部署方式：将OpenTelemetry Collector以Sidecar形式直接写入业务Deployment的Pod模板中，无需部署控制面级别的Operator、CRD等组件，所有采集规则可通过同Namespace下的ConfigMap配置
• 采集能力：原生支持HTTP、gRPC、Dubbo等主流RPC协议的流量解析，可输出QPS、P50/P90/P95/P99延迟、请求/响应体大小、各阶段处理耗时、4xx/5xx错误率等全量需求指标
• 可视化支持：采集到的指标可直接推送至同Namespace内独立部署的Prometheus+Grafana栈，有多款开箱即用的API流量观测面板可直接使用

方案2：APISIX Sidecar模式 #

• 许可协议：Apache2.0，无任何商业使用限制
• 部署方式：将APISIX作为流量代理Sidecar与业务容器同Pod部署，无需部署集群级的APISIX控制面组件，配置可通过本地配置文件或同Namespace下的轻量单实例etcd完成
• 采集能力：接管业务所有出入口流量，原生提供全维度API流量指标统计，支持自定义错误码匹配规则、自定义指标标签维度
• 可视化支持：自带轻量内置控制台，可直接查看实时流量数据，也可对接Prometheus+Grafana实现长期指标存储和多维度大盘展示

方案3：Nginx + nginx-vts-exporter Sidecar组合 #

• 许可协议：Nginx采用BSD类许可，nginx-vts-exporter采用MIT许可，均支持无限制商业使用
• 部署方式：适合已有Nginx作为业务入口的场景，仅需在同Pod内新增nginx-vts-exporter作为Sidecar，无需修改业务代码，也不需要集群级权限
• 采集能力：可统计所有流经Nginx的API的调用次数、请求各阶段耗时、错误分布、入站/出站流量等核心指标
• 可视化支持：指标可对接同Namespace内的Prometheus+Grafana，有成熟的开源观测面板可直接导入使用

最小化Sidecar注入配置示例 #

# 仅展示Deployment中Sidecar注入的核心片段，需根据所选方案替换镜像和配置项
apiVersion: apps/v1
kind: Deployment
metadata:
  name: your-business-service
  namespace: your-namespace
spec:
  replicas: 2
  selector:
    matchLabels:
      app: your-business-service
  template:
    metadata:
      labels:
        app: your-business-service
    spec:
      containers:
      # 业务容器
      - name: business-app
        image: your-app-image:v1.0
        ports:
        - containerPort: 8080
      # 观测Sidecar容器
      - name: metrics-collector
        image: otel/opentelemetry-collector:0.89.0
        volumeMounts:
        - name: collector-config
          mountPath: /etc/otelcol/config.yaml
          subPath: config.yaml
      volumes:
      - name: collector-config
        configMap:
          name: otel-collector-config # 仅需在当前Namespace下创建该ConfigMap即可

内容的提问来源于stack exchange，提问作者Santosh Rao