1.技术选用用到的技术有:flume, kafka, spark. 这里面其实存在生产者,消费者的关系。如下图:用户在一个网站中产生的行为就是生产者, 被服务器采集到,服务器是一个消费者, 服务器保存的数据再被flume消费,这时服务器既是生产者又是消息者, 组件间就是这样的生产者消费者关系链。2.技术搭建flume的搭建a. 官网下载 apache-flume-1.6.0-bin.tar.gz
转载 2024-09-23 06:39:16
60阅读
一、Web 服务器与 Web 框架首先明确一下,要运行一个动态网页,我们需要一个 Web 服务器来监听并响应请求,如果请求的是静态文件它就直接将其返回,如果是动态 url 它就将请求转交给 Web 应用。一个 Web 应用来动态处理请求,生成响应其中 Web 服务器通常都是别人已经实现好了的,它通过定义好的接口与我们编写的 Web 应用通信。WSGI 就是一个统一的 Web 服务器接口标准,如果我
转载 2024-05-14 21:32:13
102阅读
 前言最近在做一个开源项目OpenQueue,这是一个IO密集型应用,需要API网关级别的并发性能。后端采用SpringBoot+Redis开发,原型开发完成后做了并发性能测试,理想中的结果还有差距,因此开始寻找提升并发性能的途径。后来听说了WebFlux这样一种在Spring5中引进的非阻塞编程模型,而与之相对应的是SpringBoot默认的SpringMVC这样一种阻塞式模型。一看
Spark 有什么缺点?这个缺点我们之前已经提到过一个——无论是 Spark Streaming 还是 Structured Streaming,Spark 流处理的实时性还不够,所以无法用在一些对实时性要求很高的流处理场景中。这是因为 Spark 的流处理是基于所谓微批处理(Micro-batch processing)的思想,即它把流处理看作是批处理的一种特殊形式,每次接收到一个时间间隔的数据
1、Flask简介 工具箱采用 Werkzeug ,模板引擎则使用 Jinja2 。Flask使用 BSD 授权。   Flask也被称为 “microframework” ,因为它使用简单的核心,用 extension 增加其他功能。Flask没有默认使用的数据库、窗体验证工具。 2、Flask的依赖模块   当前Flask的版本为1.0.2。 pi
转载 2024-01-05 10:28:09
53阅读
Flask小帅锅为什么我们使用Flask呢?他有什么闪光点呢?现在听我慢慢道来Flask是一个使用 Python 编写的轻量级 Web 应用框架。其 WSGI 工具箱采用 Werkzeug ,模板引擎则使用 Jinja2 。不要看他小,但是他其实也是应了一句话,叫做“麻雀虽小五脏俱全”。Flask保留了扩增的弹性,可以用Flask-extension加入这些功能:ORM、窗体验证工具、文件上传、各
转载 2024-06-14 04:41:22
49阅读
1、Apache spark是一个为速度通用目标设计的集群计算平台。从速度的角度看,Spark从流行的MapReduce模型继承而来,可以更有效地支持多种类型的计算,如交互式查询流处理。速度在大数据集的处理中非常重要,它可以决定用户可以交互式地处理数据,还是等几分钟甚至几小时。Spark为速度提供的一个重要特性是其可以在内存中运行计算,即使对基于磁盘的复杂应用,Spark依然比MapRedu
转载 2023-07-14 16:59:39
156阅读
Ref: Use Postman to call a REST API测试 REST API.  GraphQL /* implement */      Restful API一、Flask的本质Ref: 用flask写Restful APIFlask呢,仅仅只是实现了web框架最核心的功能(实际
转载 2023-07-13 10:44:55
57阅读
写在前面FastApi是python的异步Web框架,具有Go,NodeJs相当的性能,总而言之,很快。当然还有一些相比于其他Web框架的优势,例如支持了Swagger文档,增加Python3.6+的数据类型指示功能,基于Pydantic的数据类型校验等等。个人觉得有学一学必要,所在这写下自己的学习记录。安装pip install fastapi pip install uvicorn其中uvi
转载 2024-01-15 01:02:53
64阅读
前言:看了一些国外的关于介绍flaskvue的前后端分离的文章,但没看到比较通俗易懂,代码完善的,直到昨天看到一篇新出的文章,而且内容非常棒,所以翻译过来,供大家一起学习。原文来自Developing a CRUD App with Flask and Vue.js正文:下面会逐步演示通过FlaskVue如何完成一个基本的CRUD应用程序。我们将从搭建框架开始,使用Vue CLI构建一个新的V
一,Flask介绍   框架:对同一类型的项目共性代码的封装,称为框架。  Flask是python编写的一类WEB框架,相较于其他框架来说。Flask框架更加轻量,灵活,但是对python代码能力要求高,Flask只提供了最基本web功能,其他功能需要开发者使用自己python代码实现,所以Flask项目质量由开发者能力决定的,但是,随着版本的迭代更新,许多社区,组织,三方开发了公共的Flask
WEB开发框架性能基准测试解读与趋势分析  TechEmpower的《Web Framework Benchmarks》性能基准测试,是关注Web开发框架发展的重要途径。但是内容数据众多,每次看都耗费大量时间。这是根据Round17(2018-10-30)测试结果做的整理笔记,以及结合多轮结果做的趋势分析。 Web框架性能排名首先,根据开发为出发点,排除了纯服务器O
总括来说,客户端从发送一个 HTTP 请求到 Flask 处理请求,分别经过了 web 服务器层,WSGI层,web框架层,这三个层次。不同的层次其作用也不同,下面简要介绍各层的作用。 图1:web服务器,web框架与 WSGI 的三层关系Web服务器层对于传统的客户端 - 服务器架构,其请求的处理过程是,客户端向服务器发送请求,服务器接收请求并处理请求,然后给客户端返回响应。在这个过程中,服
Flask是一个轻量级的Web应用框架,而MySQL是一个流行的关系型数据库管理系统。当我们将这两者结合使用时,可能会遇到一些问题。本文将详细记录解决“Flask与MySQL”项目中所遇到的一些常见问题及其解决方案。 ## 背景定位 在我最近开发的一个Web应用中,应用使用Flask作为后端框架,并利用MySQL作为数据存储。当数据库与应用连接出现问题,或者执行查询时性能不佳,这会直接影响应用
原创 6月前
51阅读
简介Flask是web框架。Nginx是代理服务器,当访问过大,单个服务器不能满足需要多个服务器(分布式服务器),Nginx可以来分配客户端请求和web服务器(像个管家)。 Nginx优点: 负载均衡:根据请求情况和服务器负载情况,将请求分配给不同的web服务器,保证服务器性能。负载均衡的机制有3种: (1) 循环 - 对应用程序服务器的请求以循环方式分发, (2) 最少连接 - 下一个请求被分配
转载 2024-09-23 14:42:18
123阅读
前面三篇介绍了全栈系统里面后台前端、移动端:后台篇:Flask搭建后台前端篇:Vue2.0搭建PC前端移动端篇:H5+搭建移动端应用项目线上地址:项目访问链接,账号:general 密码:general今天讲述项目部署:docker + nginx + uwsgi,部署项目线上运行环境。1. 安装配置docker环境1.1 创建容器sudo docker run -ti --privileged
WEB 开发是现在程序必会的技能,因为大部分软件都以 Web 形式提供,及时制作后台开发,或者只做前台开发,也需要了解 Web 开发的概念特点。 由于 Python 是解释性脚本语言,用来做 Web 开发非常适合,而且 Python 有上百中 Web 开发框架,以及成熟的模板技术,使得Web开发如虎添翼。今天借用 Flask 框架,快速学习一下 Python 的 Web 开发知识。Flask
转载 2024-03-12 04:33:31
67阅读
# 在Flask中使用MySQL的基本流程 在这篇文章中,我们将一起学习如何在Flask框架中使用MySQL数据库。整个过程将分为几个关键步骤,以下是具体流程的概述。 ## 流程概览 | 步骤 | 描述 | |------------|--------------------------------| | 1. 安装依赖 | 安
原创 9月前
64阅读
# FlaskJava的比较与应用 在Web开发中,FlaskJava是两种非常常见的编程语言和框架。Flask是一个轻量级的Python Web框架,而Java是一种广泛应用于企业级开发的编程语言。本文将介绍FlaskJava的比较以及它们在实际应用中的用途。 ## Flask vs Java Flask是一个基于Werkzeug WSGI工具箱Jinja2模板引擎的Python微
原创 2024-02-25 06:29:46
100阅读
1 环境及部署1.0 基础环境1.2 运行环境1.3 环境部署nodejs环境sudo apt-get install nodejs sudo apt install npm sudo npm install apidoc -g sudo cpm pm2 sudo cnpm iflask环境pip3 install flask pip3 install flask-script pip3 inst
转载 2024-01-17 08:59:59
362阅读
  • 1
  • 2
  • 3
  • 4
  • 5