摘要：云计算是分布式计算,并行计算和网格计算的发展,给人类生活,生产方式和商业模式带来根本性改变,是当前全社会的热点之一.云存储是从云计算概念上延伸发展出来的一个新的概念,它是指通过集群应用,网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统.随着云计算技术与云存储技术的广泛应用,其存在的安全问题不断突显
转载
2024-05-27 19:23:02
26阅读
从今天开始，做一个云盘。不知道什么时候才可以完成任务。
原创
2013-11-22 20:12:28
587阅读
Hadoop云盘项目总结0. 项目介绍介绍视频：
基于Hadoop搭建HA高可用网盘系统 搭建过程： 我的搭建过程 小组成员的搭建过程 项目地址待完善后会发出来 技术栈:HDFS、Sqoop、Flume、Ganglia、Azkaban、Zookeeper、Redis、Nginx、Docker、Vue-Cli **实现功能：**使用 Hadoop 搭建 HA 集群实现网盘系统，前端采用
转载
2024-05-08 09:17:24
6阅读
基于hadoop-2.8.5下的云环境搭建一、Hdfs搭建过程（By 傩傩）1、准备2、编写dockerfile3、构建镜像4、根据构建好的镜像创建并进入容器5、修改配置6、启动集群7、检查8、打包（可选操作）二、yarn配置（By Ninght）1.基本参数配置1>.yarn.resourcemanager.hostname2>.yarn.resourcemanager.addre
转载
2024-07-17 18:07:05
150阅读
云计算的几大形式云计算服务类型
基础设施即服务（IaaS） - 提供硬件设备 ：例如 个人搭建网站不需要再去租服务器，买数据库，可在云平台上付费购买空间及相应服务。
eg. Google app engine ; Amazon Web Services (AWS) ; 阿里云；新浪云软件即服务（SaaS） - WebService ： 各系统之间可以相
转载
2023-08-11 13:22:58
120阅读
阿里云安装部署Oracle11g 在云计算时代是很方便的，可靠的IAAS，PAAS和SAAS平台可以帮助用户将已有或正在研发的项目迁移到云计算平台。环境准备：购买阿里云ECS服务器计费方式：可选包年包月，建议业务量较多的的，数据库要一直在线的，选包年包月。地域选择：和你的应用服务器，最好是在同一个可用区（访问速度最快），也可以同一地域，不同可用区，用于多机房部署的情况。CPU内存： 根据实际需要选
转载
2023-12-08 17:20:59
674阅读
云服务器搭建伪分布式hadoop实现远程连接环境配置概述本文章基于腾讯云服务器环境进行安装部署hadoop3.1.3伪分布式环境， 前提是默认服务器已经配置好了JDK和SSH免密安装配置1.下载压缩包可以去官网下载，也可领取我的百度云链接文件 链接：https://pan.baidu.com/s/1424B3OYg35A47b-R3CIZ0Q 提取码：12342.解压进入压缩包路径进行解压：tar
转载
2024-01-10 12:12:46
58阅读
目录1.配置host2.设置共享文件夹3.安装mysql4.在eclipse中安装并新建Dynamic Web Project5.Tomcat安装6.进行jar包的拷贝7.代码编写7.1 index.jsp7.2 head.jsp7.3 UploadServlet.java7.4 HdfsDAO.java7.5 DeleteFileServlet.java7.6 DownloadServlet.
转载
2024-07-18 06:54:04
123阅读
这里写自定义目录标题先来看一下效果：普通人需要掌握的知识：需要的软件支持第一步下载webdav-aliyundriver的包第二步下载Java运行环境JDK1：首先下载JDK2：安装JDK3：配置环境4：验证安装是否成功第三步 运行webdav-aliyundriver包然后，然后，最后一步就要完成了：挂载实现注意！！！所有的包 先来看一下效果：普通人需要掌握的知识：会安装软件、用鼠标键盘即可！
转载
2023-09-27 18:59:15
352阅读
安装环境jdk1.8+centos7+hadoop-2.8hadoop安装包：链接：https://pan.baidu.com/s/1k0VNJS-dOTM01pJf5JdE7A 提取码：ebm8 复制这段内容后打开百度网盘手机App，操作更方便哦一．安装环境：jdk1.8+hadoop-2.8.0+centos7二．虚拟机网络配置三．JDK安装下载并安装：$sudo yum insta
转载
2023-07-13 14:32:39
355阅读
前提：熟悉Linux系统操作，掌握基本的Linux命令注意：安装路径中不能有任何中文字符和空格！我安装的是ubuntu14，用户名是ubuntu，机器名是ubuntu，hadoop的版本是hadoop-2.7.1.tar.gz一、在Ubuntu下创建hadoop用户组和用户1、 将hadoop用户添加到系统用户ubuntu@ubuntu:~$ sudo addgroup hadoop
转载
2024-01-26 10:11:28
129阅读
HDFS设计目标1）硬件错误是常态，数据保存需要冗余。2）数据批量读取，Hadoop擅长数据分析而不是事务处理。3）大规模数据集。4）简单一致醒模型，降低系统复杂度，文件一次写入多次读取，）“数据就近”原则分配数据节点。HDFS体系结构NameNodeDataNodeSecondayNameNode事务日志映像文件 NameNode文件系统命名空间记录
大数据和云计算是何关系?关于大数据和云计算的关系人们通常会有误解。而且也会把它们混起来说，分别做一句话直白解释就是：云计算就是硬件资源的虚拟化;大数据就是海量数据的高效处理。大数据、hadoop及云计算之间到底是什么关系呢?
大数据开发入门 课程：hadoop大数据与hadoop云计算，Hadoop最擅长的事情就是可以高效地处理海量规模的数据，这样Hadoop就和大数据及云计算
转载
2023-09-10 07:57:46
55阅读
hadoop网盘的最终效果见下面，可以实现简单的文件上传、删除、下载功能，不同用户可以登录到自己的页面进行管理。一、准备的安装包资源（1）hadoop1.1.2安装包（2）bootmetro一个CSS开元框架，用来提高web前端的开发效率（3）mysql的Jdbc驱动包（4）上传组件（5）mysql安装包（我的电脑是x64，x86系统的请下载对应版本即可） 二、搭建hadoop集群环境教
Hadoop是由ASF(Apache SoftwareFoundation)源于Lucene的子项目Nutch所开发的开源分布式计算平台，可以构建具有高容错性、可伸缩性、低成本、和良好扩展的高效分布式系统，允许用户将Hadoop部署在大量廉价硬件设备所组成的集群上，为应用程序提供一组稳定可靠的接口，充分利用集群的存储和计算能力，完成海量数据的处理。由于Hadoop优势突出，得到了众多企业和个人的青
转载
2023-08-11 13:19:17
131阅读
云计算云计算（Cloud Computing）是基于互联网的一种计算方式，通过这种方式，共享的软硬件资源和信息可以按需提供给计算机和其它设备。分布式计算（Distributed Computing）、并行计算（Parallel Computing）、效用计算（Utility Computing）、网络存储（Network Storage Technologies）、虚拟化（Virtualizati
转载
2023-11-02 08:44:37
29阅读
1. 介绍Commonservice-system是一个大型分布式、微服务、面向企业的JavaEE体系快速研发平台，基于模块化、服务化、原子化、热插拔的设计思想，使用成熟领先的无商业限制的主流开源技术构建。 采用服务化的组件开发模式，可实现复杂的业务功能。提供驱动式开发模式，整合内置的代码生成器，将JavaEE开发效率提高5倍以上，减少50%的代码开发量，解决80%的重复工作，让开发者更关注业务逻
转载
2023-10-09 08:15:39
98阅读
现如今，面向企业的移动办公与存储的网盘系统有着广泛的市场需求，随着企业对网盘需求的不断提高，传统的网盘技术在性能、用户共享、安全性、可扩展性等方面已经力不从心并存在诸多的缺陷。最新的云存储技术，为网盘行业带来了新的革命。云存储是构架在高速分布式存储网络上的数据中心，它将网络中大量不同类型的存储设备通过应用软件集合起来协同工作，形成一个安全的数据存储和访问系统，适用于各大中小型企业数据资料存储、备份
@[TOC]1、前言自云存储概念兴起已经有段时间了，各互联网大厂也纷纷加入战局，一时间公有云盘遍地开花。但一段时间后，公有云盘潜在的安全问题也暴露出来，原有的共有云盘用户纷纷转为搭建私有云盘，也带动了群晖等一众私有云盘供应商的发展。可群晖硬件动辄数千，让个人消费者难以招架，是否能将个人电脑改造为私有云盘呢？答案自然是肯定的，今天我们就为大家介绍，如何使用Cpolar与Cloudreve，在个人Wi
原创
2023-09-12 13:06:44
481阅读
随着互联网的高速发展以及国家政策扶持，我国云计算行业发展迅猛，云计算人才也成为稀缺人才。众所周知，云计算和开源是相爱相生的关系，借助开源社区的力量，云计算技术迅速占领市场，不过常用的云计算开源工具有哪些呢?1、Kubernetes过去两年Kuberentes已成为火爆的开源项目之一，相信在未来Kuberentes的势头会更劲，其拥有大量的扩展工具，其优势在于：1)通过基于角色的访问控制可以更好地支
转载
2023-10-07 12:43:05
81阅读
