在智能电网领域中，数据工程到底是如何实施的呢？本文将以IBM的Itelligent Utility Network产品为例阐述智能电网中的数据工程，它是IBM声称传统电网向智能电网转变的整体方案
前言 另一方面，如今是一个数据爆炸的时代，电力领域也不例外。随着大量高级传感器、智能量测系统投入使用，大量
转载
2023-06-08 14:41:24
201阅读
智能电网领域的大数据应用 白云飞 新疆库尔勒中泰石化有限责任公司摘 要： 基于智能电网与大数据的理论，探讨了智能电网中大数据的应用特点。以此为切入点，分析大数据在智能电网领域中的应用，提升智能电网应用大数据处理技术的质量。关键词： 智能电网; 大数据; 项目规划;作者简介： 白云飞，新疆库尔勒中泰石化有限责任公司，研究方向：电工技术。;收稿日期：2019-07-10基金： 新疆科技企业科技创新课题
6月15日，从江苏南通供电公司信通公司传来好消息，大数据在配网规划中的应用项目大大提升了南通电网规划效率，并获得国网江苏省电力公司科学进步三等奖。南通供电公司尝到了先进计算及大数据联合试验带来的甜头。此前，国家电网公司先进计算及大数据技术联合实验室—南通试验中心在南通成立。该中心积极参与全球能源互联网研究院等机构组织的智能电网先进计算与系统、智能电网优先控制、智能电网大数据工程等方面的基础性、前瞻
典型业务场景在电力行业项目甚至大多数工业项目中，都会涉及到对传感器等设备的采集数据进行存储和处理这一典型的业务场景，具体流程为：将传感器的采集数据汇集到前置的汇集器前置的汇集器将实时数据数据传输到数据处理中心数据处理中心对传输过来的实时数据进行实时的清洗和告警将实时数据和告警、计算数据一并存入持久化存储对持久化存储中的数据进行多维分析与数据挖掘对持久化存储中的数据进行可视化展示如图所示： 可用技术
在当前的互联网领域，大数据的应用已十分广泛，尤其以企业为主，企业成为大数据应用的主体。大数据真能改变企业的运作方式吗?答案毋庸置疑是肯定的。随着企业开始利用大数据，我们每天都会看到大数据新的奇妙的应用，帮助人们真正从中获益。大数据的应用已广泛深入我们生活的方方面面，涵盖医疗、交通、金融、教育、体育、零售等各行各业。毫无疑问，大数据的市场前景广阔，对各行各业的贡献也将是巨大的。目前来看，大数据技
转载
2023-08-09 09:53:02
88阅读
电网为每家每户的用电提供了保障，随着电网的建设，我们的基础设施也越来越完善。为增进大家对电网的认识，本文将对大数据在智能电网中的应用以及电网调度运动的基本功能予以介绍。如果你对电网具有兴趣，不妨继续往下阅读哦。一、大数据在智能电网的应用1、电力大数据平台的整体构架在电力大数据平台上，数据越是丰富、准确、细致，智能电网系统越能发挥真正的实质性作用。我国智能电网大数据的整体框架主要包括三层，分别是数据
转载
2023-08-30 13:29:24
65阅读
人工智能物联网时代，数据量呈现指数级增长，其中文本、音视频等非结构数据的占比已超过85%，未来将进一步增大。“大数据”这个概念大约是从2011年开始火起来的，如果从Apache Hadoop项目的正式启动算起，海量数据的分布式存储、管理和计算技术已有10年的历史。物联网大数据应用每个行业都有其特定的业务逻辑及核心痛点，这些往往不是大数据的通用技术能够解决的。日志分析、用户行为分析、舆情监控、精准营
转载
2023-07-28 10:13:17
0阅读
# 大数据分析与智能电网
在信息技术迅猛发展的今天，大数据分析与智能电网之间的联系日益紧密。智能电网是利用先进的通信和信息技术，对电力系统进行自动化和智能化管理的电网。而大数据分析在智能电网中起着至关重要的作用，能够提高电力系统的效率、可靠性和安全性。
## 什么是大数据分析？
大数据分析是指通过复杂的算法和统计学原理，对大量的数据进行提取、整理和分析，以提取有价值的信息。这些数据来自于不同
最近很多人跟我讨论物联网和大数据，但他们大都还对这两个技术分类认识不是很清晰。在这里我结合我们的一些案例对这两个概念做一些阐述。物联网是一个完整的概念，不仅包括远端的传感器数据采集、传输、存储和展示，还包括对采集的传感器历史数据的分析，以及基于分析结果所产生的决策、反馈和控制动作。相对于传统的人的认知方式，物联网相当于增强了人的“五官“的识别能力，使人能够获取到原本很多无法直接获取的信息。而基于物
1.1 数据集本案例中的数据来自于爱彼迎（Airbnb）网站2018-2019年度的多伦多市的真实数据。数据集中包含listings数据集，约有2万条数据，记录着所有的房屋信息，包括价格在内的几十项信息字段。数据集中的另一个数据集是calendar，包含约650万条的租房交易数据，拥有每一天每一所住房的入驻信息。1.2 数据分析思路梳理常规数据分析，数据字段载入和常见数据ETL四板斧的清洗处理方法
转载
2023-08-07 21:46:07
478阅读
大数据真的太神奇了，真的可以让改变一个企业的运营吗?答案是肯定的。大数据目前是当下最火热的词了，你要是不知道大数据这个概念，都不好意思在众人面前开口了。然而实际上很多人都对大数据的应用模糊不清。现在就让我们从下面几个大数据应用案例来了解下最真实的大数据故事把，并鲜明得了解大数据在生活当中实际应用的情况。金融大数据 理财利器:大数据在金融行业应用范围较广，典型的案例有花旗银行利用IBM沃森电脑为财富
文章目录1、 Leaf-segment号段模式1.1 数据库配置1.2 导入并修改leaf项目1.3 Leaf-segment双buffer模式1.4 Leaf segment监控1.5 优缺点2.Leaf-snowflake2.1 Leaf-snowflake的启动过程2.2 优缺点 目前主流的分布式ID生成方式，大致都是基于数据库号段模式和雪花算法（snowflake），而美团（Leaf）
转载
2023-08-24 17:10:38
274阅读
互联网业务数据分析?Chap1 数据指标体系与建模方法?一、常用的数据指标数据可以分为三类：用户数据、行为数据、业务数据(描述业务本身的发展)1.用户数据1.1 DAU MAUDAU（Daily Active User）：单日活跃用户量，反应产品短期用户活跃度一个自然日
Tips： 跨时区的产品，就是考虑24hMAU（Monthly Active User）：单月活跃用户量，反应产品长期
腾讯
http://hr.tencent.com/position_detail.php?id=21467&keywords=%E6%95%B0%E6%8D%AE%E5%88%86%E6%9E%90&tid=87&lid=0http://hr.tencent.com/position_detail.php?id=20633&keywords=%E6%95%B0%E6
转载
2023-07-16 16:40:26
68阅读
电网企业在运行中每分每秒都会产生海量的数据信息，有增长快且类型多的特点。随着时间节点的递增，电网系统内的数据源节点也会出现不断增长的趋势，长此以往，不仅是现在的数据技术处理不了发展需求，而且会导致产生并堆积更多管理模式上的问题。问题太多，就不去一一列举，在这里就总结5点普遍化的问题：1、报表统计人为干预多报表统计结果存在人为干预现象，报表结果准确性无法保证，影响生产经营分析决策。2、
大数据技术会摄取大量数据，这会给数据库安全带来重大风险，这可能会导致数据泄露，比如信用卡信息、银行信息和各种其他个人信息，这些信息的被盗可能会造成毁灭性的后果。这些数据泄露可能导致终端用户不信任企业。这凸显了对可扩展的大数据工具的需求，这将减少这些数据盗窃。下面可以利用大数据来解决安全问题的方法： 安全的分布式计算框架 Spark、Hadoop、MPI等分布式计算框架存在相当大的数据泄漏风
OLTP与OLAPOLTP（On-Line Transaction Processing）:联机事务处理过程也称为面向交易的处理过程，其基本特征是前台接收的用户数据可以立即传送到计算中心进行处理，并在很短的时间内给出处理结果，是对用户操作快速响应的方式之一。OLTP是传统的关系型数据库的主要应用，主要是基本的、日常的事务处理。数据量少，DML频繁，并行事务处理多，但是一般都很短。OLAP（On-L
蒋凡摘要：介绍了在城市物流配送领域的数据化和智能化改造过程中，如何面对大数据标准化的挑战，并从调度系统和开放平台两方面入手，提出了提高单次配送效率和节省多次配送成本的标准化解决方案。案例为物流大数据标准化技术提供了可供参考的分析思路、实施案例和创新经验。关键词：城市物流；O2O；大数据；标准化中图分类号：TP319 文献标识码：
转载
2023-08-08 14:16:38
488阅读
一、天气案例：细粒度介绍计算框架（1）需求：找出每个月气温最高的2天（2）思路每年每个月最高2天1天多条记录？进一部思考：年月分组温度升序key中要包含时间和温度呀！MR原语：相同的key分到一组，通过GroupCompartor设置分组规则（3）实现具体思路自定义数据类型Weather：包含时间包含温度自定义排序比较规则自定义分组比较：年月相同被视为相同的key那么reduce迭代时，相同年月的
转载
2023-08-31 13:08:58
54阅读
做 大数据分析 的三大作用，主要是：现状分析、原因分析和 预测分析 。什么时候开展什么样的数据分析，需要根据我们的需求和目的来确定。利用大数据分析的应用案例更加细化的说明做大数据分析方法中经常用到的几种理论模型。以营销、管理等理论为指导，结合实际业务情况，搭建分析框架，这是进行大数据分析的首要因素。 大数据 分析方法论中经常用到的理论模型
转载
2023-09-15 16:44:43
188阅读
