1 chunkers=pd.read_csv('dd.csv',chunksize=10000)
2
3 tot=pd.Series([])
4
5 for piece in chunkers:
6
7 tot=tot.add(piece['dfcol'].value_counts(),fill_value=0)#迭代计数
8
9 tot=tot.order(ascending=Fal
转载
2023-06-06 11:13:05
63阅读
# 使用Python的to_csv方法进行分块写入
在数据分析和数据科学的过程中，经常需要将数据保存为CSV（Comma-Separated Values）格式。Pandas库是Python中处理数据的强大工具，其中的`to_csv`方法广泛用于将DataFrame写入CSV文件。但是，当数据量很大时，一次性写入可能会导致内存溢出或者运行缓慢。这时，可以利用`chunksize`参数进行分块写入
一、协程介绍协程：是单线程下的并发，又称微线程，纤程。英文名Coroutine。一句话说明什么是协程：协程是一种用户态的轻量级线程，即协程是由用户程序自己控制调度的。需要强调的是：Python的线程属于内核级别的，即由操作系统控制调度(如单线程遇到IO或执行时间过长就会被迫交出CPU执行权限，切换其他线程运行)单线程内开启协程，一旦遇到IO，就会从应用程序级别(而非操作系统)控制切换，从此来提升效
转载
2023-07-10 13:36:03
216阅读
为何使用游标：使用游标(cursor)的一个主要的原因就是把集合操作转换成单个记录处理方式。用 SQL 语言从数据库中检索数据后，结果放在内存的一块区域中，且结果往往是一个含有多个记录的集合。游标机制允许用户在 SQL server 内逐行地访问这些记录，按照用户自己的意愿来显示和处理这些记录。使用游标的步骤：（1）说明游标 用DECLARE语句为一条SELECT语句定义游标：EXEC SQL D
目录1、上传文件 2、验证码 一、上传文件首先了解一下 request.FILES ：字典 request.FILES 中的每一个条目都是一个UploadFile对象。UploadFile对象有如下方法：1、UploadFile.read():从文件中读取全部上传数据。当上传文件过大时，可能会耗尽内存，慎用。2、UploadFile.multiple_chu
转载
2023-10-16 17:47:34
327阅读
Python常用函数/方法记录一、 Python的random模块：导入模块：import random 1. random()方法：如上如可知该函数返回一个【0,1）(左闭右开)的一个随机的浮点数。若要控制范围为【min，max)可采用 min+(max-min)*random.random()如下所示，返回20~30之间的随机浮点数： 2. choice
转载
2024-06-12 21:15:54
39阅读
Spring 在哪些情况下会出现循环依赖错误？哪些情况下能自身解决循环依赖，又是如何解决的？本文将介绍笔者通过本地调试 Spring 源码来观察循环依赖的过程。1. 注解属性注入首先本地准备好一份 Spring 源码，笔者是从 Github 上 Clone 下来的一份，然后用 IDEA 导入，再创建一个 module 用于存放调试的代码。 调试模块目录
本次调试有三个类，A、B 通过注
本系列是对Python for Data Analysis第三版的整理，个人目的仅是进一步熟悉Python以及学习NumPy、pandas等库。 忽略了原书的大部分API介绍，仅保留了部分基础API。 作者提供了在线电子版https://wesmckinney.com/book，以及相关代码https://
sharding设计须考虑的几个因素Sharding Key的选择 在片键的选择上，最好是能够在字段中选择混合型的片键，大范围的递增健、和随机分布的健组合，如按月份递增、按用户名随机。 递增的sharding key &nbs
转载
2024-06-21 13:43:16
130阅读
在本章和下一章里，我们将研究两种文件类型实例：Excel 文件和 PDF，并给出几条一般性说明，在遇到其他文件类型时可以参考。处理 Excel 比上章讲的处理 CSV、JSON、XML 文件要难多了，下面以 UNICEF(联合国儿童基金会) 2014 年的报告为例，来讲解如何处理 Excel 数据。相关文章：一、安装 Python 包要解析 Excel 文件，需要用第三方的包 xlrd。我们用 p
转载
2023-07-14 17:55:54
98阅读
Oracle or ORACLE?
有人肯定要问这个单词的大小写也存在区别吗？
事实是还真的有不少的差别！
在常用术语"ORACLE server"中使用全部大写的字母，"ORACLE server"表示甲骨文数据库服务器，引申过来纯大写的"ORACLE"也代表其数据库服务器。
而首字母O大写其他小写的"Oracle"一般在表示Oracle甲骨文有限公司"Oracle Corp"时使用，引
原创
2011-05-04 19:09:25
3347阅读
https://deadzq.github.io/oracle/Oracle.html 我的oracle笔记1 https://deadzq.github.io/oracle/Oracle2.html oracle触发器 数据库就是用户存放数据,访问数据,操作数据的存储仓库 用户的各种数据被存放在数
原创
2021-07-08 13:46:40
4469阅读
点赞
Oracle Active DataGuard Oracle to Oracle
原创
2019-02-01 10:28:15
3138阅读
点赞
环境介绍：
两台装有Solaris10的虚拟机，主机名为GG01和GG02 ,对应的IP为192.168.1.91和192.168.1.92。目前已经安装了oracle database 10g软件，数据库已处于运行状态。GG01上的数据库实例是GGDB01，而GG02上的数据库实例是GGDB02。网上好多类似文档中的数据
推荐
原创
2011-04-29 13:37:47
6228阅读
点赞
6评论
案例（1）就假设我修改了一条数据：update people set name='Fusnow' where name='old fusnow';那我需要做的事情包括：在redo log buffer生成redo信息（包括对表的redo，undo的redo，索引什么的就不考虑了）在buffer cache里修改name='Fusnow'，修改undo
原创
2013-05-10 09:29:07
3280阅读
现象描述：
在oracle 10g/11g版本引进的oracle集群软件oracle clusterware，如果需要在服务器上重新安装Oracle clusterware(crs)，首先必须把Oracle clusterware(crs)删除干净。
告警信息：
因Oracle clusterware(crs
原创
2012-01-11 17:50:16
5751阅读
而补漏，不为晚矣；视图的概念视图是基...
原创
2023-07-19 16:01:40
263阅读
01.{Oracle题目}你判断下面语句，有什么作用？(选择1项) GRANT update ON inventory TO joe WITH GRANT OPTION; A)一个系统权限被授予用户JOE B) 一个对象权限被授予用户JOE C) 用户JOE被授予在这个对象上的所有权限 D) 一个系统权限和一个对象权限被授予用户JOE02.{Oracle题
转载
2013-09-28 08:50:00
2470阅读
2评论
Oracle SQL的优化规则：
[color=blue][b]尽量少用IN操作符，基本上所有的IN操作符都可以用EXISTS代替[/b][/color]
用IN写出来的SQL的优点是比较容易写及清晰易懂，但是用IN的SQL性能总是比较低的，从ORACLE执行的步骤来分析用IN的SQL与不用IN的SQL有以下区别：
ORACLE 试图将其转换成多个表的连接
原创
2023-02-06 17:07:51
434阅读
故障分类一 数据库挂起故障1 由于ARCHIVE挂起导致数据库挂死2 NIT文件中SGA区设置太大，导致内存不够用，数据库和系统都挂死3 由于临时表空间无法扩展导致数据库被挂起4由于未打补丁导致RMAN备份时将数据库挂起故障分类二 数据库功能/性能异常5由于BLOB类型的表记录数太多操作又太频繁导致数据库效率急差6由于未对特大表（达
原创
2013-07-26 09:35:28
1743阅读
