1.数据储存:磁盘(SAN.NAS.DAS)专门将数据储存于磁盘阵列 分布式储存构架(HDFS)。 2.系统:Linux 只有Linux系统可以承载大数据的应用。 3.CPU是运算核心。 一.方法 1、map-reduces的数据处理集群 :它是将海量数据按照一定的方式,修改为键值关系(key-value)。 HDFS+map-reduces = Hadoop集群(运行于Linux上的一个高性能集群)。 算法: 2、通过数学(统计学)+Python=算法 3、数据可视化 开发--计算机语言 BASIC早期的机械语言 C语言(高级语言):C++ :系统开发、驱动开发(写板子)、 (驱动程序:需要通过指令来交流,需要转换各个厂家设备之间的指令集,让厂家设备之间互通。) 前端 :JS php css html JAVA 工具:脚本语言--shell perl python 数据库:MySQL nosql 二.操作系统简介 操作系统做什么的;平台--承上启下 (上:应用 ;下:硬件设备resource) 硬件设备平台的三大部件:CPU、存储器、I/O设备。 硬件设备平台的五大部件:(运算器,控制器,存储器,输入设备,输出设备) CPU:所有的运算 内存:向CPU提供数据(cpu只能向内存读取数据),重启系统,内存中的数据将会丢失,cpu读取内存中指定(需要的数据),这个过程,我们叫做寻址;(物理地址,逻辑地址) IO设备:网卡(适配器sdapter):以太网Ethernet(在数据链路层) 磁盘 (IDE\SAS\SSD)机械盘IDE,SAS;固态盘SSD 知识扩展: osi七层模型 应用层--QQ 表示层--指令转换 会话层--session建立会话 传输层--通过端口区分应用 网络层--IP 数据链路层--MAC地址 ipconfig /all 物理层--提供具体的物理设备(硬件设备) 【下层为上层提供服务】 TCP/IP的四层模型 应用层 传输层 网络层 主机到主机层
操作系统,本身就是一个软件程序,但是。它并不直接对客户提供应用,而是为其他应用提供硬件资源; 操作系统分为:用户空间和内核空间。