环境初始化系统选择 centos 7.4,在 thor 平台上先择的基础镜像,什么都没有安装。使用 root 用户用 yum 工具做一些初始化安装yum install -y wgetyum install -y screenyum install -y gccyum install -y gcc-c++yum install -y openssl-develyum install -y read            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-12 18:02:20
                            
                                268阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Airflow 入门及使用什么是 Airflow?Airflow 是一个使用 python 语言编写的 data pipeline 调度和监控工作流的平台。 Airflow 是通过 DAG(Directed acyclic graph 有向无环图)来管理任务流程的任务调度工具, 不需要知道业务数据的具体内容,设置任务的依赖关系即可实现任务调度。这个平台拥有和 Hive、Presto、MySQL、H            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-08-29 18:21:46
                            
                                173阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            新建环境# 注意版本问题哦~最好一致
python=3.7
airflow==1.10.3
# Note 注意 airflow 版本问题!!! pip 安装的时候注意指定版本!!!!!
# 高版本的 airflow 会出现比较多的 no module named xxx 错误
# eg: No Module named airflow.contrib.auth
# eg:  No Module            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-04 13:38:33
                            
                                464阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Airflow配置安装 1.安装前准备工作 安装版本说明 安装工具版本用途 Python 3.6.5 安装airflow及其依赖包、开发airflow的dag使用 MySQL 5.7 作为airflow的元数据库 Airflow 1.10.10 任务调度平台 2.安装Python3 #python依 ...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-08-22 22:04:00
                            
                                745阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            服务器环境:Ubuntu Server 22.04, 刚开始的时候使用命令pip install apache-airflow完成后输入命令airflow 却一直提示command not found.后来使用sudo完成正确安装sudo pip install apache-airflow然后使用如下命令初始化单机版airflow standalone然后打开localhost:8080默认没有            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-09-05 15:49:45
                            
                                1263阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            安装流程step1 在本地创建文件夹,并安装 Python virtualenv               python3 -m venv /path/to/new/virtual/environment    说明:macos 最新系统是默认安装了 Python3 的版本 ,通过命令            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-01-23 22:30:51
                            
                                150阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1、Anaconda环境准备由于Airflow2.1.2版本依赖于python3高阶版本,但是服务器中一般默认python2.7.5版本,如下图:所以,我们直接通过部署miniconda,创建虚拟python3环境就可以满足airflow的要求。1.1、 下载miniconda版本yum install -y wget
wget https://repo.anaconda.com/minicond            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-02-05 11:18:17
                            
                                708阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            文章目录1、官网1.1、文档2、安装2.1、本地安装(Running Airflow locally)2.1.1、说明2.1.2、安装环境2.1.3、安装2.1.3.1、安装过程中遇到的问题说明2.1.3.2、升级 sqlite32.1.3.3、安装 Python3 及虚拟环境 virtualenv2.1.3.4、安装 Airflow2.1.3.5、启动服务3、总结 1、官网官网地址1.1、文档            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-12-14 19:33:19
                            
                                939阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1.安装Python3yum -y install zlib zlib-devel 
yum -y install bzip2 bzip2-devel 
yum -y install ncurses ncurses-devel 
yum -y install readline readline-devel 
yum -y install openssl openssl-devel 
yum -y            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-22 12:08:15
                            
                                582阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            身边很多朋友电脑系统因为这样那样的问题不能开机,需要重装系统,但是又不知道从何下手。很不建议去电脑店重装系统,因为电脑店用的操作系统很多都有捆绑软件和主页捆绑,对电脑体验影响很坏。这篇教程只是针对新手进不了系统重装所用。 重新找一台可以上网的电脑下载工具软件,写入PE系统,传输镜像文件。然后就可以对开不了机的电脑进行重装系统操作了。 一,U盘装PE系统 建议使用微PE来装系统,不建议使用其他PE程            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-01-29 19:54:16
                            
                                48阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            文章目录下面就介绍怎么在Windows上安装Linux子系统一、启用开发者模式二、启用适用于 Linux 的 Windows 子系统三、从应用商店搜索安装Linux (注意这里安装是默认c盘如果不想安装在c盘请看后面的步骤)四、不安装在c盘的方法安装Windows Termail事后配置Linux子系统设置root账号密码 下面就介绍怎么在Windows上安装Linux子系统方案一、通过虚拟机安            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-07-25 18:31:01
                            
                                59阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            # 从Windows系统安装Linux系统的步骤及代码示例
## 1. 确定Linux发行版
在安装Linux系统之前,首先需要确定你想要安装的Linux发行版。常见的Linux发行版包括Ubuntu、CentOS、Debian等,每种发行版都有其特点和用途。你可以根据自己的需求和偏好选择合适的Linux发行版。
## 2. 准备安装介质
接下来需要准备一个用于安装Linux系统的介质,可            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-05-16 11:20:41
                            
                                61阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言**window            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-11-14 05:23:10
                            
                                93阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1、安装Windows系统安装过程除了分区时要预留出部分空间来安装CentOS之外,其它操作与正常安装一样.2、安装CentOS系统使用光盘引导安装,因安装为服务器版,建议选择无界面,最小化安装,须要什么服务再自行添加安装。安装分区到预留空间中。其它默认安装完成。3、修改引导文件使用root用户登陆打开引导文件vi /boot/grub2/grub.cfg找到### BEGIN /etc/grub            
                
         
            
            
            
            直接安装win7原版系统图文教程:没有U盘或光盘怎么安装Win7原版系统?最简单、最方便的就是用硬盘安装器安装。在保证电脑能正常使用的前提下,进行本地硬盘安装Win7原版系统,能够让你快速体验全新的Win7系统。最好下载在D盘或E盘根目录下,现在用“系统之家ghost win7 32位原版”做演示,下载好放在D盘:如图下载好后文件为ISO文件,所以我们要先把它全部解压出来放在根目录下,解压方法:选            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-10-24 08:37:50
                            
                                70阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            — 人间五十年,譬如朝露,如梦似幻;三界之内,焉有不灭!前言:西方有句俗语:“年轻时,拥有一辆甲壳虫;年老时,拥有一辆凯迪拉克”,这样的人生才完美。咱们工程师,平时95%的时间都在Windows系统上,做开发和研究,绝大多数软件也是支持Windows。但是Linux系统绝对不是可有可无,它代表一种开放理念,一种骇客理想,一票最伟大的工程师们的青春、血汗、与奋斗。十几年前,当立哥还是高中生的时候,受            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-06-07 15:54:20
                            
                                20阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            作者:朱金灿来源:https://blog..net/clever101centos 7环境下:mkdir airflow //创建airflow文件夹git clone https://github./puckel/docker-airflow.git /root/airflow //下载源码到airflow文件夹docker run ...            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-12-15 10:55:19
                            
                                726阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            airflow安装配置airflow相关软件安装python3.6.5安装安装依赖程序;[root@node01~]#yum-yinstallzlibzlib-develbzip2bzip2-develncursesncurses-develreadlinereadline-developensslopenssl-developenssl-staticxzlzmaxz-develsqlitesql            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2019-12-29 19:02:59
                            
                                5018阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # Airflow 安装部署 MySQL
## 概述
Airflow 是一个用于调度和监控工作流的开源平台,而 MySQL 是一个常用的关系型数据库。在这篇文章中,我将向你详细介绍如何在安装部署 Airflow 的过程中,将其与 MySQL 数据库进行集成。
## 安装和部署流程
下面是实现“Airflow 安装部署 MySQL”的步骤概览:
| 步骤 | 描述 |
|---|---|
|            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-12-31 06:52:45
                            
                                229阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            ## Ubuntu下安装和配置Airflow和MySQL
### 介绍
Airflow是一个用于调度、监控和维护工作流的平台,而MySQL是一种流行的开源关系型数据库管理系统。在Ubuntu操作系统上安装和配置Airflow与MySQL可以让你更好地管理和执行你的工作流。
在本文中,我们将介绍在Ubuntu上安装和配置Airflow和MySQL的步骤,并提供详细的代码示例。我们将按照以下步骤            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-08-25 16:26:42
                            
                                157阅读