基于python multiprocessing库的多进程服务框架前言正文功能架构代码注意参考 前言python由于解析器CPython中GIL（Global Interpreter Lock）的缘故，使得多线程python服务并没有想象中的那么高效率（没有发挥CPU多核的优势），具体原因这边不多做展开（细节可参考《python中的GIL详解》）。因此，考虑通过使用python multipro
转载
2024-04-16 19:47:17
17阅读
# 如何在Python中连接和操作PostgreSQL数据库
## 概述
在本文中，我将向你介绍如何在Python中连接和操作PostgreSQL数据库。首先，我会展示整个过程的流程图，并列出每个步骤需要做什么以及需要使用的代码。然后，我会逐步解释每个步骤，并提供相应的代码示例。
## 过程流程图
```mermaid
journey
title Connect and Operate
原创
2024-03-31 06:02:34
70阅读
PostgreSQL是一个轻量级的数据库，用python操作时，用到了psycopg2模块，其程序代码少，速度快，而且稳定。 参考：http://www.yiibai.com/html/postgresql/2013/080998.html 环境 ubuntu 16.04 python2 安装 1. 安装postgresql sudo apt-get in
转载
2023-10-11 08:20:36
0阅读
:1. 数据库基本操作
1.1 创建数据库
- CREATE DATABASE test; #创建数据库
- GRANT ALL ON test.* to user(s); #为指定用户（或所有用户）提升权限 1.2 使用数据库
- USE test; 1.3 删除数据库
- DROP DATABASE test; 1.4 创建表
- CREATE TABLE users(login VARCHA
转载
2023-12-18 10:05:38
45阅读
ETL（Extraction-Transformation-Loading）意为数据抽取、转换和加载。ODS——操作性数据DW——数据仓库DM——数据集市数据抽取数据抽取是指把ODS源数据抽取到DW中，然后处理成展示给相关人员查看的数据，ODS源数据主要包括一些用户访问日志、业务日志、埋点日志、系统日志、监控日志等数据。如果没有特殊要求可以一天一次抽取，但是需要避开拉去日志的高峰期。
转载
2023-10-16 14:48:50
73阅读
PostgreSQL的实例管理（四）1. pg_ctl1.1. 关闭实例2. 数据库实例基本配置2.1. 配置文件postgresql.conf2.2. 数据库访问认证pg_hba.conf2.3. 免密配置文件( .pgpass )3. pg_controldata 1. pg_ctl# PG的启动/停止/查状态/重启/重新加载配置
pg_ctl start/stop/status/rest
转载
2024-07-29 15:25:12
144阅读
前言：基于项目的需要抽取目标源数据库中，其中表名和数据库字段需要可配置，并能实现增量更新。自创文档大佬们不喜勿喷。一、数据的抽取及字段的可配置1、简单的数据抽取 最简单的数据抽取就是把目标源中所需要的数据抽取到自己的数据库中。只要知道数据库表中的字段然后select、insert就OK了2、可配置字段的数据抽取（1）自定义配置文件因为项目的需求,无法确定目标源
转载
2024-06-11 22:11:41
135阅读
目录一、PostgreSQL是什么？二、PostgreSQL的功能和特点三、PostgreSQL对比MySQL有哪些优势？四、PostgreSQL安装部署一、PostgreSQL是什么？PostgreSQL是一种开源的关系型数据库管理系统，也被称为Postgres。它最初由加拿大计算机科学家Michael Stonebraker在1986年创建，其目标是创建一个具有良好扩展性和高级功能的数据库系统
转载
2023-07-30 00:24:42
175阅读
PostgreSQL数据库相比其他数据库，支持更多的数据类型，包括常用的数值类型、字符串类型、日期/时间类型外，还有几何类型、网络地址类型、xml类型和json类型，且还可以使用CREATE TYPE自行添加数据类型，本文主要介绍PostgreSQL数据库主要的数据类型1. 数值类型常用数值类型如下表所示：名称别名存储大小范围描述与其他数据库对比smallintint22字节-225~215-1有
转载
2024-06-05 20:29:33
217阅读
首先切换到postgres用户su - postgres -- 首先切换到postgres常识：PG安装完后默认带有postgres库，可以先进入postgres库再去创建新库1创建用户：postgres=# create user testuser with password '123456';CREATE ROLE2创建数据库：postgres=# crea
转载
2023-11-01 13:37:36
328阅读
概述通过DB-ENGINES的排名可以发现PG越来越火，应该是目前开源数据库中发展势头最好的，下面整理下PG入门的一些内容，方便大家理解。1、PG概念PG是最先进的开源数据库，采用了开放接口的设计，例如type, operator, index, storage, language, fdw, custom scan, sample, hook等，都是开放的接口。PG是最具扩展能力的数据库，这一点
pg_depend系统表记录数据库对象之间的依赖关系。这个信息允许DROP命令找出哪些其它对象必须由DROP CASCADE删除，或者是在DROP RESTRICT的情况下避免删除。这个表的功能类似pg_shdepend，用于记录那些在数据库集群之间共享的对象之间的依赖性关系。名称类型引用描述classidoidpg_class.oid依赖对象所在的系统目录OIDobjidoidany OID c
转载
2023-09-06 17:05:54
226阅读
一、简介序列对象（也叫序列生成器）就是用CREATE SEQUENCE 创建的特殊的单行表。一个序列对象通常用于为行或者表生成唯一的标识符。二、创建序列方法一：直接在表中指定字段类型为serial 类型david=# create table tbl_xulie (
david(# id serial,
david(# name text);
NOTICE: CREATE TABLE will
转载
2024-01-15 10:02:10
90阅读
3 数据库的基本操作3.1 创建数据库3.1.1 使用对象浏览器创建数据库[Server] -> PostgreSQL 9.6 -> 数据库,右击 -> 创建通常:数据库:test所有者:postgres注释:PostgreSQL 学习专用定义:编码:UTF8Connection limit: -1安全: 点击 权限 后面的 + ,添加选项:Grantee - PUBLIC权限
转载
2023-09-26 15:30:12
428阅读
基本查看命令查看数据库：\l\c database 切换到指定数据库切换schema set search_path to your_schema;\dn 列出当前数据下所有的schema\db 列出所有的表空间 tablespace查看当前schema下面的表： \d查看表定义：\d tableName\du或\dg列出所有的角色或者用户\dp 查看权限分配当客户端与服务器端编码不一致时候会出现
转载
2023-08-16 05:15:25
261阅读
有时候我们值得用 REINDEX 命令周期性重建索引。在 PostgreSQL 版本 7.4 之前，我们经常有必要避免"索引膨胀"，因为缺乏在 B-tree 索引内部的空间恢复机制。一个情况就是索引健字的范围随着时间而变化。比如，一个在时间戳上的索引随着时间的推移，旧的记录会最终被删除，因为那些用于不再使用的键字范围的索引页面不能得到重复使用，就会导致膨胀。随着时间的推移，索引的尺寸可能会变得比里
转载
2024-03-11 06:55:36
82阅读
一、创建数据库1.1 语法CREATE DATABASE name
[ [ WITH ] [ OWNER [=] user_name ]
[ TEMPLATE [=] template ]
[ ENCODING [=] encoding ]
[ LOCALE [=] locale ]
[ LC_COLL
转载
2024-06-07 07:19:38
255阅读
一、python操作mysql数据库：
数据库信息：(例如211.149.218.16 szz 123456)
操作mysql用pymysql模块
#操作其他数据库，就安装相应的模块
import pymysql
ip=’211.149.218.16’
port=3306
passwd=’123456’
user=’root’
db=’szz’
conn
转载
2024-05-31 09:43:14
44阅读
Navicat for PostgreSQL 是一套专为PostgreSQL设计的强大数据库管理及开发工具。它可以在PostgreSQL数据库7.5以上的版本中运行，并且支持大部份最新的PostgreSQL功能，包括触发器、函数检索及权限管理等。Navicat的的功能不仅可以满足专业开发人员的所有需求，而且对PostgreSQL的新手来说也相当容易学习。数组和枚举PostgreSQL 因
转载
2024-07-03 23:19:29
89阅读
PostgreSQL数据库管理工作中,定期vacuum是一个重要的工作. vacuum的效果： 1.1释放,再利用 更新/删除的行所占据的磁盘空间. 1.2更新POSTGRESQL查询计划中使用的统计数据 1.3防止因事务ID的重置而使非常老的数据丢失。第一点的原因是PostgreSQL数据的插入,更新,删除操作并不是真正放到数据库空间.如果不定期释放空间的话,由于数据太多,查询速度会巨降
转载
2024-07-24 11:41:49
83阅读
