FATE(Federated AI Technology Enabler)是联邦机器学习技术的一个框架,其旨在提供安全的计算框架来支持联邦 AI 生态。在本专题,我们将介绍如何基于FATE架构从0到1部署联邦学习集群,本文是该系列的第四篇文章,旨在解决在Kubernetes部署运维FATE的问题。背景及KubeFATE架构在之前的文章中,我们介绍了如何使用KubeFATE( https://git            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-03-05 18:52:15
                            
                                764阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            KubeFATE 日志聚合从 KubeFATE v1.5.1开始支持对 FATE 集群日志的收集功能。通过使用kubefate cluster log命令,可以轻松地收集FATE集群各个组件,或指定单一组件的日志。为什么要日志聚合在一个程序运行的生命周期内,日志往往提供了丰富的信息,给予了运维工程师或者程序的用户对程序更好的掌控。日志通常记录在日志文件中,集群应用的日志往往都分散在不同的主机中,这            
                
         
            
            
            
            题图摄于Austin(本文作者系 VMware 中国研发云原生实验室工程师,从事联邦学习 FATE/ KubeFATE 开源项目开发。)需要加入KubeFATE开源项目讨论群的同学,请关注本公众号后回复 “kubefate” 即可。VMware招聘机器学习和云原生开发工程师FATE 已经发布了首个长期支持版本,怎样快速体验新版本的FATE来做联邦学习的实验任务呢,接下来我们带领            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-09-04 20:51:31
                            
                                467阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            题图摄于奥林匹克体育中心企业中使用 Kubernetes 构建云原生联邦学习平台是最佳的选择,本文详细解析了 KubeFATE 的技术要点。作者:马陈龙,VMware 中国研发中心云原生实验室工程师,KubeFATE 开源项目维护者。一、文章背景企业级联邦学习开源项目 KubeFATE 最新版本v1.8.0有一个新功能,可以让用户指定 Ingress 类,切换不同的 Ingre            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-03-15 21:39:34
                            
                                47阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            20211101#基本信息VMware® Workstation 16 Proubuntu18.04@author iscanghai #安装参考https://github.com/FederatedAI/KubeFATE/blob/master/docker-deploy/README_zh.m ...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-11-03 18:13:00
                            
                                391阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            FATE支持Linux或Mac操作系统,目前最新版本为FATE v1.5 (2020年10月)。FATE支持单机部署、集群部署和KubeFATE部署三种方式,其中单机部署和集群部署都属于原生(Native) 部署方式,要求开发人员配置必要的开发环境和依赖库,主要包括JDK 1.8+、Python 3.6、Python virtualenv、MySQL 5.6+、Redis 5.0.2等。注意,FA            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-08-30 21:27:03
                            
                                1292阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                随着联邦学习FATE开源生态的不断发展,目前已经诞生了诸多基于FATE框架的功能模块及落地应用。此前,FATE开源生态已发布了KubeFATE、FATE-Board、FATE Serving 等模块。    作为首个工业级的云端联邦学习管理工具以及构建和管理联邦数据合作网络的基础设施——FATE Cloud V            
                
         
            
            
            
            采用k8s,而非minikube, 在3个centos系统的节点上安装fate集群。集群配置信息3节点配置信息如下图:当时kubefate最新版是1.9.0,依赖的k8s和ingress-ngnix版本如下: Recommended version of dependent software: Kubernetes: v1.23.5 Ingress-nginx: v1.1.3升级K8S到1.23.            
                
         
            
            
            
            题图摄于故宫东华门近期文章:VMware招聘多名云原生开发工程师(北京)Harbor 2.0的飞跃: OCI 兼容的工件仓库运维 Harbor 镜像仓库的法宝:OperatorHarbor和Dragonfly双剑合璧KubeFATE: 用云原生技术赋能联邦学习(一)用FATE进行图片识别的联邦学习(转发 VMware 中国研发中心系列文章,本文作者系 VMware 边缘计算实验            
                
         
            
            
            
            题图摄于北京近期文章:VMware招聘多名云原生开发工程师(北京)Harbor 2.0的飞跃: OCI 兼容的工件仓库运维 Harbor 镜像仓库的法宝:OperatorHarbor和Dragonfly双剑合璧KubeFATE: 用云原生技术赋能联邦学习(一)用FATE进行图片识别的联邦学习(转发 VMware 中国研发中心系列文章,本文作者系 VMware 边缘计算实验室主任            
                
         
            
            
            
            题图摄于北京观光塔近期文章:运维 Harbor 镜像仓库的法宝:OperatorHarbor和Dragonfly双剑合璧KubeFATE: 用云原生技术赋能联邦学习(一)用FATE进行图片识别的联邦学习(本文作者系 VMware 边缘计算实验室主任云计算与边缘计算的协同发展已成为未来发展的重要趋势,然而目前云边协同仍处于发展的初期阶段,业界应引导企业提升云边协同服务水平,推动云            
                
         
            
            
            
            提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档目录前言:一、下载KubeFATE,docker,docker-compose:1.在这个链接里找到你要的版本,下载,解压,放到服务器里去。如下图所示: 2.让两台服务器免密通信: 3.安装docker与docker-compose二、配置部分:1.修改镜像配置文件(可选)2.手动下载镜像(可选)2.1下图是简易版            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-11-21 10:28:16
                            
                                67阅读
                            
                                                                             
                 
                
                                
                    