概述最近在准备写一个爬虫的练手项目，基本想法是把某新闻网站的内容分类爬取下来，保存至数据库，再通过接口对外输出(提供后台查询接口)。那么问题就来了，python到底是怎么去操作数据库的呢？我们今天就来研究下。准备我这边数据库使用的是mysql5.7，python去操作mysql数据库需要使用到pymysql模块。安装pymysql很简单，可以使用pip，pip install pymysql也可以
转载
2023-06-18 15:14:05
52阅读
python中要操作数据库，要使用该数据库在python中对应的驱动库，本文介绍python操作mysql数据库1.首先安装pymysql 2.导入库3.建立连接4.建立游标5.发起请求6.得到结果7.关闭游标、连接import pymysql
import yaml
from pymysql.cursors import DictCursor
from con
转载
2023-06-16 15:55:12
68阅读
# Python数据库新增行数据
在Python中，我们可以通过使用合适的库和模块来实现数据库的操作。本文将教会新手开发者如何使用Python添加行数据到数据库中。
## 整体流程
下面是一张展示整个流程的表格：
| 步骤 | 动作 |
| --- | --- |
| 1 | 导入所需的库和模块 |
| 2 | 连接到数据库 |
| 3 | 创建游标 |
| 4 | 编写SQL查询语句 |
原创
2023-09-16 19:19:24
135阅读
大数据管理系统：浅析并行数据库优缺点，
并行数据库是指那些在无共享的体系结构中进行数据操作的数据库系统。这些系统大部分采用了关系数据模型并且支持SQL语句查询，但为了能够并行执行SQL的查询操作，系统中采用了两个关键技术：关系表的水平划分和SQL查询的分区执行。
水平划分的主要思想就是根据某种策略将关系表中的元组分布到集群中的不同节点上，这些节点上的表结构是一样的，这样就可以对元组并行
转载
2023-07-13 17:01:10
188阅读
Python操作Excel插入删除行1. 前言2. 使用openpyxl3. 使用xlwings3.1. 删除行: range.api.EntireRow.Delete()3.2. 插入行: sheet.api.Rows(row_number).Insert()1. 前言由于近期有任务需要，要写一个能够处理Excel的脚本，实现的功能是，在A表格上其中一列，对字符串进行分组和排序，然后根据排序好的
转载
2023-08-04 09:38:49
68阅读
### Python统计Postgres的数据库行数
#### 简介
在实际开发中，我们经常需要统计数据库中表的行数。本文将介绍如何使用Python统计Postgres数据库的行数，帮助刚入行的小白快速掌握这个常见的任务。
#### 整体流程
下面是整件事情的流程图：
```mermaid
stateDiagram
[*] --> 输入数据库信息
输入数据库信息 --> 建立
原创
2024-01-12 08:46:06
105阅读
我们在写代码的时候，经常会操作数据库，增删改查，数据库有很多类型，关系型数据库和非关系数据库，这里咱们介绍一下python怎么操作mysql、redis和mongodb。一、操作mysqlpython3中操作mysql数据需要安装一个第三方模块，pymysql,使用pip install pymysql安装即可，在python2中是MySQLdb模块，在python3中没有MySQLdb模块了，所
转载
2023-07-27 14:25:25
61阅读
一 、数据库表设计原则1，数据库命名原则：英文字母，多个单词间用下划线’_’，单词尽量简洁、见名知意 2，数据库表命名原则：英文字母，多个单词间用下划线’_’，单词尽量简洁、见名知意3，数据库表字段类型：尽量用int型，固定长度用char，使用varchar的范围尽量贴合实际，能用tinyint就不要用int和smallint，最好给字段设置默认值，默认值不为null；4，数据库表字段索引：主键
转载
2023-11-03 11:40:12
354阅读
数据库介绍数据库：简而言之，数据库就是一个存储数据的地方。关系型数据库系统将数据间的关系以数据库表的形式加以表达，并将数据存储在表格中，以便于查询。常用关系型数据库：Oracle：在大型项目中使用，例如：银行、电信等传统行业项目MySQL：主要用在Web 项目，这是目前使用最广泛数据库，目前互联网企业用的都是mysqlSQL Server：这个是微软的数据库SQLite：轻量级数据库，主要应用在移
转载
2024-01-08 18:37:42
106阅读
由于最近需要学习Python爬虫相关的知识，所以就先从Python基础、Linux基础开始进行了学习，下面主要是总结了常见的Linux的命令行。最后为了巩固学到的东西，尝试写了个自动备份的Python小demo。1.Linux基本命令1.1 对终端的操作命令gnome-terminal 打开终端Ctrl+d 关闭终端1.2 清除屏幕的命令clear (或者Ctrl+L)1.3 进入和退出文件和文件
转载
2024-10-11 14:54:34
37阅读
select基本查询语句使用oracle中scott用户中的表进行的基本查询语句select * from emp;--列出职位为MANAGER的员工的编号，姓名--select empno,ename from emp where job = 'MANAGER';--like模糊查询我也不懂SELECT * FROM EMP WHERE ENAME LIKE'%*_%'ESCAPE'*';--找
转载
2024-05-31 23:35:25
24阅读
rel="File-List" href="file:///C:%5CDOCUME%7E1%5CZHANGD%7E1%5CLOCALS%7E1%5CTemp%5Cmsohtml1%5C03%5Cclip_filelist.xml">
并行数据库系统（Parallel Database System）是新一代高性能的数据库系统，是在MPP和集群并行计算环境的基础上建立的数据库系统。
转载
2023-08-27 20:50:21
253阅读
首先，要创建一个完整的数据管理系统，不是一蹴而就的，一定要要一步一步的来，不断完善，最终方能达到自己想要的结果，所以我在这里也是一点一点分步来做的。创建数据库，数据库属性在这里用的是默认（不推荐使用这种偷懒的做法）1 --创建数据库，使用默认配置
2 create database 某银行客户管理系统
3 go 创建表，共四个，分别是：客户信息，银行卡信息，业务类型，交易记录 1 use 某
转载
2023-10-23 22:00:34
344阅读
不要因为走的太远，而忘记为什么出发。1. 基础知识数据库管理系统(DBMS)：位于用户与操作系统之间的一层数据管理软件。主要功能：数据定义功能（DDL）；数据组织、存储和管理；数据操纵功能（DML）；数据库的事务管理和运行管理；数据库的建立和维护功能；其他功能。数据库系统（DBS）:由数据库、数据库管理系统（及其开发工具）、应用系统、数据库管理员构成。数据管理技术三个阶段：人工管理、文件系统、数据
转载
2023-08-12 17:42:10
341阅读
银行数据仓库体系实践（1）--银行数据仓库简介 大家好，我是leo，一个ITer，在银行从事系统开发多年。对银行系统架构特别是数据仓库/ODS等数据类系统有一定的经验积累，准备将之前的一些经验整理成文，一来为自己工作做个总结梳理，二来也希望能和大家互相讨论，共同学习，探讨新技术、新架构以及趋势。以下是第一部分简介。银行数据仓库简介 &n
转载
2023-08-30 22:15:33
222阅读
# Python中使用select语句查询数据库有多少行数据
在数据库操作中，我们经常需要查询数据库中有多少行数据。在Python中，我们可以使用select语句来实现这一功能。本文将介绍如何使用Python连接数据库，并使用select语句查询数据库中有多少行数据。
## 连接数据库
在Python中，我们可以使用`sqlite3`模块来连接SQLite数据库。首先，我们需要导入`sqli
原创
2024-03-07 06:20:21
125阅读
MySQL是一款常用的数据库管理系统。这里简单归纳两个词，一个是数据库（DataBase,DB），另一个是数据库管理系统（DataBase Management System,DBMS）。数据库是什么？当然是用来存储数据的，你存入银行的钱，在银行管理系统里就是数据，当很多存款人往银行存钱，就形成很多很多的数据，这些很多的数据统称为数据库。为了方便你存钱和取钱，于是就需要一个良好的管理系
转载
2023-11-12 19:06:50
202阅读
数据仓库作为全行数据中心能高效支持全行或全公司的统计 、数据分析工作，除了稳定的ETL架构、高效的数据处理能力，流畅的开发管理流程，还需要有全面的数据管理体系，确保提供的数据准确性和高质量。数据管理主要有数据标准，元数据和数据质量3方面。那数据治理是指对没有规范或者不符合规范的数据进行清理并建立标准和规范，那也是从这3方面着手。那这三方面的数据
转载
2023-07-31 19:15:21
711阅读
查看SQL Server数据库各表数据行数以及数据大小，使用如下sql语句，全选执行 方式一： declare @table_spaceused table (name nvarchar(100),rows int,reserved nvarchar(100),data nvarchar(100), ...
转载
2021-09-24 16:31:00
427阅读
2评论
背景某医院信息科接到CIS系统磁盘空间不足告警，通过排查发现tempdb的日志文件暴增，已经涨到了130G左右，并且还在持续增长中。需要我们紧急排查原因。现象登陆到服务器里，确实看到了如上所说，D盘空间仅剩14.5G，并且tempdb的日志文件已经达到了130G 登录到SQL专家云，通过趋势分析进行回溯，在1月22日上午8点40分之前，tempdb日志文件的总大小（蓝线）一直
转载
2024-04-28 14:18:06
43阅读
