k8s lvs 优化并发 k8s高并发

转载

mob6454cc6faf88 2024-08-29 15:58:22

文章标签 k8s lvs 优化并发 srs 服务关闭命令 TCP Server HTTP 文章分类 运维

文 / 杨成立

本章描述了如何基于K8s构建EdgeCluster实现高并发流媒体播放。

EdgeCluster实现了合并回源，对于某一路流，不管有多少客户端播放，EdgeServer都只会从OriginServer取一路流，这样可以通过扩展EdgeCluster来增加支持的播放能力，也就是CDN网络具备的重要能力：高并发。

Note: Edge Cluster根据客户端播放的协议不同，可以分为RTMP Edge Cluster或HTTP-FLV Edge Cluster，详细请参考相关Wiki。

对于自建源站，没有那么多播放量，为何不建议使用SRS单源站直接提供服务，而要用EdgeCluster呢？主要场景分析如下：

防止Origin过载，即使推流非常少而且播放的流也不多，比如自建源站后使用CDN回源，在多家CDN回源时，也可能一个CDN一条流会有多个回源连接。使用Edge能保护Origin不因为回源造成Origin问题，最多就是某些Edge被回源打挂。
可以使用多个Edge Cluster（只需要再加srs-edge-service就可以），对外用不同的SLB暴露，可以针对每个SLB限流，防止CDN之间互相干扰。这样能保证某些CDN是可用的，而不是Origin挂了后所有CDN都不可用。
分离Origin关键业务，将下行流媒体分发业务交给Edge Cluster，Origin可以做切片、DVR、鉴权等关键业务，避免业务之间互相干扰。

k8s lvs 优化并发 k8s高并发_Server_02

在这个场景下，对比K8s和传统使用方式的差异：

k8s lvs 优化并发 k8s高并发_k8s lvs 优化并发_03

Step1:

cat <<EOF | kubectl apply -f -apiVersion: v1kind: Servicemetadata:  name: srs-internal-origin-servicespec:  type: ClusterIP  selector:    app: srs-origin  ports:  - name: srs-internal-origin-service-1935-1935    port: 1935    protocol: TCP    targetPort: 1935EOF

Step2:

cat <<EOF | kubectl apply -f -apiVersion: v1kind: Servicemetadata:  name: srs-internal-origin-servicespec:  type: ClusterIP  selector:    app: srs-origin  ports:  - name: srs-internal-origin-service-1935-1935    port: 1935    protocol: TCP    targetPort: 1935EOF

Note: Origin Server在集群内部提供流媒体源站服务，内部域名为srs-internal-origin-service，EdgeServer会通过该域名连接到OriginServer。

Step3:

cat <<EOF | kubectl apply -f -apiVersion: v1kind: Servicemetadata:  name: srs-http-servicespec:  type: LoadBalancer  selector:    app: srs-origin  ports:  - name: srs-http-service-80-80    port: 80    protocol: TCP    targetPort: 80EOF

Note: Nginx通过SharedVolume读取SRSOrigin生成的切片，对外提供HLS服务。

Note: 这里我们选择ACK自动创建SLB和EIP，也可以手动指定SLB，参考指定购买的SLB和EIP。

Step4:

cat <<EOF | kubectl apply -f -apiVersion: v1kind: ConfigMapmetadata:  name: srs-edge-configdata:  srs.conf: |-    listen              1935;    max_connections     1000;    daemon              off;    http_api {        enabled         on;        listen          1985;    }    http_server {        enabled         on;        listen          8080;    }    vhost __defaultVhost__ {        cluster {            mode            remote;            origin          srs-internal-origin-service;        }        http_remux {            enabled     on;        }    }EOF

Note: Edge Server的配置中，通过Service注册的内部域名srs-internal-origin-service，连接到OriginServer。

Step5:

cat <<EOF | kubectl apply -f -apiVersion: apps/v1kind: Deploymentmetadata:  name: srs-edge-deployment  labels:    app: srs-edgespec:  replicas: 3  selector:    matchLabels:      app: srs-edge  template:    metadata:      labels:        app: srs-edge    spec:      volumes:      - name: config-volume        configMap:          name: srs-edge-config      containers:      - name: srs        image: ossrs/srs:3        imagePullPolicy: IfNotPresent        ports:        - containerPort: 1935        - containerPort: 1985        - containerPort: 8080        volumeMounts:        - name: config-volume          mountPath: /usr/local/srs/confEOF

Step6:

cat <<EOF | kubectl apply -f -apiVersion: v1kind: Servicemetadata:  name: srs-edge-servicespec:  type: LoadBalancer  selector:    app: srs-edge  ports:  - name: srs-edge-service-1935-1935    port: 1935    protocol: TCP    targetPort: 1935  - name: srs-edge-service-1985-1985    port: 1985    protocol: TCP    targetPort: 1985  - name: srs-edge-service-8080-8080    port: 8080    protocol: TCP    targetPort: 8080EOF

Note: 这里我们选择ACK自动创建SLB和EIP，也可以手动指定SLB，参考指定购买的SLB和EIP。

Step7: