51CTO博客>热门标签>如何应对大数据

如何应对大数据

全部文章近期文章热门文章标签简介

【如何应对大数据】内容共 240 条

原创如何应对超大数据库在线迁移、归档和超大数据备份？

1、超大数据库的在线迁移问题和归档问题随着信息的大爆炸，互联网各种业务的发展，超大、超级大的数据库都已经出现，先说一下迁移问题，oracle的迁移有很多种方案，迁移T级数据目前有XTTS等官方推荐的一些方案，PB级...

java

阅读 123 评论 0 点赞 0

mob604756f19185 397 天前
转载什么是大数据，怎么理解和应对大数据时代

什么是大数据，怎么理解和应对大数据时代在大数据与深度学习中蝶化的人工智能。当代人工智能离不开大数据和深度学习算法。我们先来了解什么是大数据，大数据的本质是什么，在大数据时代我们应该如何应对？当...

数据

大数据

人工智能

结构化

大数据时代

阅读 63 评论 2 点赞 0

mb5fdb0fbba4f73 1801 天前
原创如何利用大数据征信应对花样翻新的金融诈骗？

前不久，支付宝公布了用户2017年的年度账单，正当大众乐呵呵的将支付宝年度账单在朋友圈刷屏时，某知名律师发文指出，账单首页内一行特别小的字“我同意《芝麻服务协议》”存在风险。支付宝和芝麻信用，通过...

大数据

数据

互联网金融

支付宝

大数据平台

阅读 39 评论 0 点赞 0

刘旷v 281 天前
转载如何应对云端数据存储故障

即使云计算能够提供随用随取的资源，但是也会存在云端数据存储的突发故障。解决这类问题的原理很简单，不要把鸡蛋放在同一个篮子里。但是在云的时代，这还可能吗？Amazon提供了一个针对这种问题的建议：“将工作负载...

存储

阅读 397 评论 0 点赞 0

avril021 1889 天前
转载如何应对云端数据存储故障

亚马逊云端资料储存服务Amazon S3（Amazon Simple Storage Service），在美国时间2月28 日上午发生故障一度中断，连带使数千个采用Amazon S3服务的网站受到波及，包括软件系统服务、新闻媒体、政府机构等网站皆...

云存储

阅读 345 评论 0 点赞 0

shelinab 1889 天前
原创数据中心如何应对数据海啸

数据量增长的速度有如一场海啸，迅速地吞噬着全球数据中心的各种存储设备和器件，数据中心耗费巨资不断购入大量存储设备，以便尽量去满足不断增长的数据量存储需求，这给数据中心带来了极大的成本压力，降低了数据中...

java

阅读 122 评论 0 点赞 0

mob60475705a319 366 天前
转载使用ShardingJdbc应对大数据量的案例（一）

作者简介：胡宗棠，中移（苏州）软件技术有限公司，云计算软件高级研发工程师，从事公有云产品平台研发、架构设计；目前专注于大型分布式系统的高并发、高可用设计。曾就职于蚂蚁金服支付宝，甲骨文中国研发中心。...

其他

阅读 113 评论 0 点赞 0

程序猿DD 309 天前
原创盛夏来临，数据中心如何应对

转眼间又要进入盛夏，持续的高温天气即将来临，即使是祖国最北方的黑龙江日间温度也会超过30℃，地表温度超过40℃。面对这样的高温天气，很多行业都要积极面对，做好防御措施，数据中心当然也不例外，而且数据中心面...

java

阅读 66 评论 0 点赞 0

mob60475705a319 364 天前
转载 Meetup 回顾｜EMQ X + TDengine，如何联手应对海量的物联网大数据

小 T 导读：8 月 20 日，EMQ X 与 TDengine 首聚，联合举行了一次线上 Meetup。下面我们就来回顾一下本期精彩内容吧。配套PPT下载，请关注本公众号，后台回复「0820」。主持人：桑树多，涛思数据产品经理分享嘉...

mqtt

emq x

物联网

tdengine

大数据

阅读 53 评论 0 点赞 0

TDengine 69 天前
原创 Hadoop迎来3.x时代，昔日大数据霸主如何应对云计算的挑战？

储的三个演进方向存储最主要是向三个方向演进：Scalability、Cloud、Machine Learning。Scalability 主要是指 Hadoop 的分布式文件系统 HDFS 仍然有提高扩展性的需求和空间，后面会详细展开讲。Cloud 也是一个非常重...

java

阅读 71 评论 0 点赞 0

mb5fdb0a1b25659 421 天前
原创 大数据，轻松应对海量数据存储与分析所带来的挑战

文章目录一、前言二、Spark2.1 Spark架构2.2 Spark核心组件2.3 Spark编程模型2.4 Spark计算模型2.5 Spark运行流程2.6 Spark RDD流程2.7 Spark RDD2.7.1 RDD 的创建方式2.7....

big data

spark

大数据

原力计划

数据

阅读 76 评论 0 点赞 0

程序员毛奇志 191 天前
原创 大数据，轻松应对海量数据存储与分析所带来的挑战

文章目录一、前言二、Spark2.1 Spark架构2.2 Spark核心组件2.3 Spark编程模型2.4 Spark计算模型2.5 Spark运行流程2.6 Spark RDD流程2.7 Spark...

big data

spark

大数据

原力计划

数据

阅读 19 评论 0 点赞 0

程序员毛奇志 136 天前
原创 大数据钱景如何？

我这个人总是后知后觉，进入 Android 也有点机缘巧好，当时马上毕业找工作，投的都是 Java EE 的，只是 Android 也学了点皮毛，简历带了一笔 Android，当时我都不知道 iPhone 手机，也不知道有 iOS 开发，之所以能找...

java

阅读 788 评论 0 点赞 0

mob604757037cf3 367 天前
转载谈谈如何理解“大数据”

谈谈如何理解“大数据” 大数据(Big Data)，字面意思是“海量数据”，简单讲就是所涉及的数据量规模巨大到无法通过目前的主流技术和工具来处理，这里的“处理”涵盖了很多层含义：提取、存储、管理、...

数据

大数据

商业

大数据时代

海量数据

阅读 31 评论 0 点赞 0

mb5fe55a1c73221 2298 天前
原创如何处理大数据

优化：表分区，索引分区 (优化①粗略的进行表分区，优化②为精确数据分区)为什么要表分区？当一个表的数据量太大的时候，我们最想做的一件事是什么？将这个表一分为二或者更多分，但是表还是这个表，只是将其内容存...

大数据

如何处理

阅读 699 评论 0 点赞 0

zdx墨涵 2284 天前
转载如何设计大数据架构？

福利！廖雪峰最新研磨的实战宝典《如何将大数据开发做到优秀》首次开放了，内容出自开课吧 vip 课程“大数据高级开发实战班”，为帮助大家特殊时期职场走得更加顺畅，现决定将这套价值 788元的体系化学习宝典免费...

课程

阅读 65 评论 0 点赞 0

wx5d4ae5ce87c49 310 天前
原创 大数据资源如何管理

Hadoop集群资源管理器是什么？它是如何为上层应用提供资源管理和调度的呢？我们一起来看Apache Hadoop YARN的引入，为集群在利用率、资源统一管理和数据共享等方面带来的巨大好处。从开发人员来讲提交作业（应用）到...

Hadoop

资源管理

大数据

YARN

大数据时代

阅读 1882 评论 0 点赞 1

caosheng03 1976 天前
原创 大数据如何采集数据？大数据的数据从何而来？

大数据一直都是一个比较神秘的行业，近年来因为大数据杀熟才被多的普通人所了解，那么你有没有想过大数据不论是开发还是分析，里面的数据都是从何而来的呢？ 1.通过自有产品收集简单...

Java

大数据

数据分析

采集数据

阅读 429 评论 0 点赞 0

戏精程序媛 274 天前
转载如何应对职场转型？

人在职场，免不了要遇到业务转型的问题，如何应对？最近，自己在招聘、招生和职业咨询过程中，发现受这种问题困扰的年轻人很多，而且，许多人思路并不是非常清晰，有些...

职场

休闲

转型

阅读 376 评论 0 点赞 0

jecicco 4545 天前