Logo

  • 雪夜凋零

    发布于:2017-08-01 11:06:39

    5

    HBase在阿里搜索中的应用实践
    HBase作为淘宝全网索引构建以及在线机器学习平台的核心存储系统,是阿里搜索基础架构的重要组成部分。本文我们将介绍HBase在阿里搜索的历史、规模,应用的场景以及在实际应用当中遇到的问题和优化。
    精选文章 3414人阅读 评论(4) 收藏(0)
  • 雪夜凋零

    发布于:2017-07-18 08:36:24

    9

    亿级推广流量仍能精准推荐?解读核心算法的应用实践
    阿里妈妈,是一个想让天下没有难做的营销的大数据平台,它拥有阿里巴巴集团的核心商业数据。在这里,每天有超过50亿的推广流量完成超过3亿件商品的推广展现,覆盖高达98%的网民,实现数字媒体(PC端+无线端+互联网电视端)的一站式触达。 在这些鲜亮的数据背后,是什么样的核心算法在起作用?它如何保证商家的产品得到最有效的推荐?本文将给大家详解阿里妈妈 CTR 预估核心算法 MLR 的研发背景和应用实践。
    精选文章 311人阅读 评论(1) 收藏(0)
  • cs312779641

    发布于:2017-06-29 17:58:32

    9

    大数据平台一键安装OS【搭建脚本篇】
      定制化大数据平台一键安装OS大数据平台一键安装OS系列大数据平台一键安装OS【定制化OS镜像制作】搭建脚本篇脚本命名随便,只要能看懂就行镜像包说明os1.1.iso 用于安装服务端和客户端操作系统hdp.iso 用于安装hdp服务1.架构图:服务端客户端2.原理分析安装系统-安装本地yum源-安装http源-安装并配置ntp服务-配置秘钥-安装jdk-安装mysql-编译安装amba
    精选文章 1715人阅读 评论(0) 收藏(6)
  • cs312779641

    发布于:2017-06-29 16:13:11

    11

    大数据平台一键安装OS【定制化OS镜像制作】
       定制化 大数据平台一键安装OS大数据平台一键安装OS系列大数据平台一键安装OS【搭建脚本篇】定制化OS镜像制作1.操作环境操作环境:VMware Workstarion 9 and vSphere client系统:CentOS -6.8-x86_64工具:gconf-editor anaconda repodata createrepo mkisofs rsync2.主
    精选文章 6000人阅读 评论(7) 收藏(1)
  • tty之星

    发布于:2017-06-21 09:44:52

    5

    MySQL大数据的优化以及分解存储
    MySQL大数据的优化以及分解存储
    精选文章 894人阅读 评论(2) 收藏(9)
  • zhaisj

    发布于:2017-05-04 11:21:57

    2

    数据驱动安全架构升级---“花瓶”模型迎来V5.0(二)
    “花瓶”模型v5.0在安全理念上变化很大,主要是网络抽象出虚拟层,内容安全从网络层中剥离,认证和授权从应用系统中剥离,适应虚拟化IT基础架构,符合源信息加密的发展趋势。模型v5.0在部署架构上,吸纳了大数据技术,首先将大数据处理技术引入,处理海量安全数据,其次采用基于大数据的关联分析技术,对用户网络行为、业务合规性关联分析;引入威胁情报技术,应对高级威胁攻击。可以说:模型v5.0着实落实了“数据驱动安全”的新安全理念,将安全保障方案设计,提升到网络安全防护建设的新阶段。
    精选文章 1025人阅读 评论(0) 收藏(0)
  • 叶蓬

    发布于:2017-04-13 23:37:37

    1

    Gartner:自建大数据安全分析平台恐难逃失败厄运!
    就在2017年4月11日,Gartner的著名分析师Anton Chuvakin在其Gartner官方博客上称“企业和组织如果打算自建安全数据湖或者定制自己的大数据安全分工具的话,那么基本上肯定会失败”!Anton以自己在跟客户沟通中了解到的信息作为佐证,说包括一些财富50强在内的企业在几年前自建的所谓安全分析项目耗费了大量资源,但收效甚微。有的客户表示“我宁愿希望我们从未听说过Hadoop这个东
    精选文章 1970人阅读 评论(0) 收藏(1)
  • jackwxh

    发布于:2017-02-21 13:53:10

    5

    美团大数据平台架构实践
    今天给大家介绍的内容主要包括以下四个部分首先是介绍一下美团大数据平台的架构,然后回顾一下历史,看整个平台演进的时间演进线,每一步是怎么做的,以及一些挑战和应对策略,最后总结一下,聊一聊我对平台化的看法。    谢语宸是来自美团的大数据构建平台的架构师。他在QCon2016北京站分享了一些整体上构建大数据平台的方法,除了聚焦在某一个点上的还有构建整体的大数据,以及各种各样技术的应
    精选文章 1143人阅读 评论(2) 收藏(7)
  • 51CTO编辑部

    发布于:2016-12-30 14:44:53

    1

    挨踢部落第二期:大数据在医疗领域的应用和实践
    挨踢部落是为核心开发者提供深度技术交流,解决开发需求,资源共享的服务社群。基于此社群,我们邀请了业界技术大咖对开发需求进行一对一突破,解除开发过程中的绊脚石。以最专业、最高效的答复为开发者解决开发难题。
    精选文章 416人阅读 评论(1) 收藏(3)
  • 51CTO编辑部

    发布于:2016-12-30 14:39:48

    0

    挨踢部落第一期:Spark离线分析维度
    活动说明:挨踢部落是为核心开发者提供深度技术交流,解决开发需求,资源共享的服务社群。基于此社群,我们邀请了业界技术大咖对开发需求进行一对一突破,解除开发过程中的绊脚石。以最专业、最高效的答复为开发者解决开发难题。话题关键词: 大数据  spark  数据分析  数据画像部落阵容:徐韬,龙珠直播大数据主管;王劲,数果科技 联合创始人;面向对
    精选文章 373人阅读 评论(0) 收藏(3)
  • hellojackyleon

    发布于:2016-10-29 16:17:19

    5

    大数据Hadoop快速入门
    1、Hadoop生态概况Hadoop是一个由Apache基金会所开发的分布式系统集成架构,用户可以在不了解分布式底层细节情况下,开发分布式程序,充分利用集群的威力来进行高速运算与存储,具有可靠、高效、可伸缩的特点Hadoop的核心是YARN,HDFS,Mapreduce,常用模块架构如下2、HDFS源自谷歌的GFS论文,发表于2013年10月,HDFS是GFS的克隆版,HDFS是Hadoop体系中
    精选文章 802人阅读 评论(2) 收藏(3)
  • 王清培

    发布于:2016-10-16 19:33:24

    1

    ElasticSearch大数据分布式弹性搜索引擎使用—从0到1
    阅读目录:背景安装下载elasticsearch servicewrapper 包elasticsearch servicewrapper开源包的配置小bugservicewrapper安装chkconfig -add 加入linux启动服务列表查找、下载rpm包 、执行rpm包安装配置elasticsearch专属账户和组设置elasticsearch文件所有者切换到elasticsearch专
    精选文章 1223人阅读 评论(0) 收藏(0)
  • xjsunjie

    发布于:2016-05-05 16:28:04

    1

    企业混合云的VERITAS数据保护方案
    鉴于数据安全和合规的要求,企业数据中心在目前混合云架构下,对公共云和私有云上的业务系统做数据备份是一个必然面对的趋势。
    精选文章 2203人阅读 评论(0) 收藏(0)
  • youerning

    发布于:2015-12-19 16:44:48

    11

    大数据时代里,运维工程师的自我修养i
    其实运维工程师手里拥有大量资源,但是无论上级或者运维工程师本人却不予重视,一方面是是因为编程的一定门槛,再者就是画地为牢,不过像我这样的运维工程师,应该可能也不太像个传统的运维工程师了吧,毕竟最本质的职责是对于系统的维护,以及故障处理等,在本文的数据再利用的三个方面,我想大多数同行觉得第一层利用就远远足够了,不过随着时代的发展,数据爆发式的增长的今天,我们真的能对自己手上的大量资源,不闻不问么。
    精选文章 7372人阅读 评论(5) 收藏(4)
  • 泪雨画晴

    发布于:2015-06-20 01:22:04

    20

    转变--------大数据的抉择之路
    我的转变.
    精选文章 2466人阅读 评论(6) 收藏(1)
  • 客居天涯

    发布于:2014-11-19 10:08:08

    0

    大数据备份和恢复应用案例--通过分区表备份和恢复数据
    大数据备份和恢复应用案例--通过分区表备份和恢复数据海量数据备份和恢复方案     对于OLAP的数据库的业务特点,是将批量的数据加载入库,然后对这些数据进行分析处理,比如报表或者数据挖掘,最后给业务提供一种决策支持;另外,这类数据库的数据实时性非常高,一旦这些数据处理完毕后,就很少再次使用(有时,也需要对这类数据进行查询)。 对于OLAP数据库的备份和恢复
    精选文章 809人阅读 评论(0) 收藏(0)
  • 李晨光

    发布于:2014-09-03 16:14:47

    14

    大数据时代的全能日志分析专家--Splunk安装与实践
    大数据时代的全能日志分析专家--Splunk安装与实践0.背  景随着大家对网络安全意识的提高,企业网管理人员,必须对IT基础设置进行监控及安全事件的管理,管理数据的数量和种类非常巨大,那么就需要有一款能否分析各种日志数据的工具,经过长期实践,为大家推荐Splunk这么一款全能型分析工具。1.Splunk简介Splunk是一款功能强大的、记录详细的日志分析软件,Splunk是基于原始日志
    精选文章 6118人阅读 评论(12) 收藏(1)
  • bingyang87628

    发布于:2014-08-25 10:05:28

    7

    职场思考----大数据人才到底值钱在什么地方?
        周未跟一做人才外包服务朋友聊天,提到自己正在学习大数据技术的时候。他直接就说到他现在有需求,但就是招不到合适的人才。然后提到说现在大数据人才的价值,收入,待遇方面。可以说基本上将近到IT行业的顶级了。不由得,就开始思考,大数据人才的价值到底在什么地方?大数据思维    个人感觉,这是首先第一个需要有的。因为我们现阶段生活在一个数据爆炸的时代,掌握良好
    精选文章 2523人阅读 评论(5) 收藏(1)
  • 张振伦

    发布于:2014-08-21 18:19:40

    0

    大数据和云计算的鞍马情-【软件和信息服务】2014.08
    自从VMware在2013年的全球用户大会上推出vSphere Big Data Extention(BDE)以来,大数据这匹骏马越来越受到大家的追捧。当然BDE主要针对是Hadoop的大数据应用,其实大数据不仅仅是Hadoop,即使只算Hadoop也还有不同的发布版本。但是无论Hadoop的哪个版本或者哪个大数据平台,都蜂拥开始追随云计算,就像好马配好鞍一样重要,那怎样的云计算平台才是大数据的好鞍呢?
    精选文章 340人阅读 评论(0) 收藏(0)
  • 张振伦

    发布于:2014-07-17 09:20:16

    2

    大数据的道德拷问-【软件和信息服务】2014.07
    大数据的价值几乎已被所有商家认可,也被很多学者热捧,但一个“幽灵”,大数据的“幽灵”正在我们身边潜伏。
    精选文章 592人阅读 评论(1) 收藏(0)
写博文