51CTO博客开发See you next year CA马哥教育LinuxChris On the way陈cc何cy邓俊阳韩立刚廖冠南博客show you knowledge心情依旧雷纳科斯博客xlowsHadoopzengzhaozheng 的BLOG美团技术团队菜光光的博客竹叶青 的专栏MIKE老毕的海贼船董的博客实践检验真理17的博客NoSQLFanYARON\'SBinospace专注
```#coding=utf-8import MySQLdbconn= MySQLdb.connect( host='localhost', port = 3306, user='root', &
每秒2万条一分2*60=120万一小时 120*60=7200万每条按1K计算72000000*1K=70312.5Mb=68.6645508Gb硬盘一个月 69G*24*31=51336G=50T每数据备份三份： 50T*3=150T数据冗余20%： 150*0.2=30T文件系统：3T总共硬盘：150+30+3=183T规划 20台服务器每台5个硬盘，每个硬盘2T每台内存： 128G
```hadoop_HOME="/opt/cloudera/parcels/CDH-5.6.0-1.cdh5.6.0.p0.45/bin/../lib/hadoop" for f in $hadoop_HOME/hadoop-*.jar; do hadoop_CLASSPATH=${hadoop_CLASSPATH}:$f
http://db-engines.com/en/ranking 查看数据库排名http://db-engines.com/en/ranking
近期Comyn老师的Python视频推出之后，大家一直在讨论者pyenv这个软件的应用问题，简单写一篇基本用法，给大家做下简单介绍：目录：一、pyenv介绍二、centos6.4上安装配置pyenv三、使用pyenv安装python四、pyenv的基本应用五、pip安装与配置六、使用pip安装python相关软件一、pyenv介绍项目地址：https://github.com/yyuu/pyenv
linux zip命令 zip -r myfile.zip ./* 将当前目录下的所有文件和文件夹全部压缩成myfile.zip文件,－r表示递归压缩子目录下所有文件.2.unzip unzip -o -d /home/sunny myfile.zip 把myfile.zip文件解压到 /home/sunny/ -o:不提示的情况下覆盖文件； -d:-d /h
查看内核、操作系统、cpu信息查看操作系统版本查看计算机名查看cpu信息查看硬件所有信息查看环境变量查看活动用户查看内存使用量和交换区使用量查看指定用户信息查看系统运行时间，用户数，负载查看各分区使用情况 查看指定用户信息 查看系统所有用户 查看系统所有组 查看所有进程 实时显示进程状态 查看网络信息lsof查看所有已经建立的连接&nbs
Linux 允许多个用户使用不同的终端同时登陆，Linux finger命令为系统管理员提供知道某个时候到底有多少用户在使用这台Linux主机的方法。使用 列出所有启动的系统服务 查看当前用户的计划任务
spring for apache hadoop 1.0发布取代而非补充，Spark Summit 2014精彩回顾【原创】hadoop集群监控工具ambari安装使用Apache Ambari管理Hadoop在Apache Hadoop中使用Rhino项目进行数据加密－Steven Ross专访英特尔重定义Hadoop核心：优化CPU英特尔Hadoop应对大数据“芯” 应用Mesa：Google
为什么零基础自学编程者，大多半途而废？运维新手们，别再问需不需要学PYTHON了！！！、
51cto介绍openstack 尝试安装 openstack官网
csdn博客关注大数据~ 新浪博客黄崇远-技术博客 about云storm入门教程汇总
姜冰博客：binospace阿里封神博客：专注海量数据yaron's space博客：记录学习过程的点点滴滴hadoop博客：胖子哥的大数据之路IT行业尖兵，主要从事金融支付、大数据和系统架构，金融大数据行业专家，开源社区倡导者。 jacksu 关注大数据技术从这篇博客中发现的：专访QQ大数据团队，谈分布式计算系统开发 nosql博客：nosqlfan关注nosql相
博客：liping博文：hadoop关于处理大量小文件的问题和解决方法 博文：hadoop无法解决的问题博客：Idmer 数据挖掘者从数据中获取价值！欢迎探讨一切关于数据挖掘、商业智能、商业分析、行业应用方面的问题……博文：数据挖掘中易犯10大错误博文：数据挖掘学习和研究的一些指导性建议汇总
hbase 博客：搜索技术博客 淘宝 关注技术搜索淘宝博文：hbase技术介绍博客：量子恒道官方博客 ued 淘宝其它技术博客博客：taobaoued 淘宝UED官方博客UED,User Experience Design.为你呈现的，是
使用的工具：三台linux、hadoop-1.1.2、jdk1.7.0_45、Xmanager Enterprise 4、eclipse、目标统计：pv、uv对日志字段进行分析每行记录有5部分组成：访问ip 2.访问时间 3.访问资源 4.访问状态 5.本次流量 先对日志进行清理mapreduce程序package hmbbs
读这个网站演示效果。区块引用 Blockquotes代码> ## 这是一个标题。 > > 1. 这是第一行列表项。 > 2. 这是第二行列表项。 > > 给出一些例子代码： > > &nb
和java或c++一样，scala也可以有任意多的构造器。不过，scala类有一个构造器比其它所有构造器都更为重要，它就是主构造器。除了主构造器之外，类还可以有任意多的辅助构造器。 有两点需要注意：辅助构造器的名称为this。(在java或c++中，构造器的名称和类名相同--当你修改类名时就不那么方便了。)每一个辅
当将scala字段标准为@BeanProperty时，会自动生成get/set方法。import scala.reflect.BeanProperty class Counter_3 { @BeanProperty var name: String = "hello" }
在java中把属性私有，然后提供公有方法来访问。public void setAge(int newValue) { if(newValue > age){ age=newValue; } }之所以说getter和setter方法比公有字
构造映射不可变的Map[String,Int]val scores = Map("Alice" -> 10, "Bob" -> 3, "Cindy" -> 8)可变的映射 val scores_1 = scala.collectio
求和 print(Array(1, 7, 2, 9).sum)结果19要使用sum方法，元素类型必须是数值类型：要么是整形，要么是浮点数或者BigInteger/BigDecimal。print(ArrayBuffer("Mary", "had", "a", "little", "lamb").
for(...)yield循环创建了一个类型与原始集合相同的新集合。 val a1 = Array(2, 3, 5, 7, 11) val result = for (elem <- a1) y
&n
http://www.scala-lang.org/ 这是scala的官网http://twitter.github.io/scala_school/ scala_school学校
集合 list set tuple map访问数据应该是下划线1，2，如hostPort._1。下标是从1开始的。package cn.chinahadoop.scala class Basic5
case class(多用在模式匹配中) 构造器中的每一个类型都为val，不建议用var 不用new就可以直接产生对象(为什么？apply方法)package cn.chinahadoop.scala class Basic5 { } //默认为val case cl
推荐一本书 scala编程语言，有电子版，比较厚。包(package com.xx.data)支持嵌套，下层可以访问上层作用域中的名称可串联顶部标记包对象包可见性包在任何地方都可以引入，作用域至该语句所在块的末尾重命名引入成员(xx=>yy)隐藏方法(xx=>_)自动引入(java.lang._ scala._ Predef.)/** * play *
Copyright © 2005-2023 51CTO.COM 版权所有 京ICP证060544号
