HDFS文件操作你可以把一个大数据集（100TB）在HDFS中存储为单个文件，而大多数其他的文件系统无力实现这一点。虽然该文件存在多个副本分布在多台机器上来支持并行处理，你也不必考虑这些细节。 HDFS （Hadoop Distribution File System）文件系统到底是一个怎样的文件系统？并不是一个Unix文件系统，不支持像ls和cp这种标准的Unix文件命令，也不支持如
转载
2024-01-21 11:55:53
42阅读
这次参加了软酷网的hadoop开发院为期四天的培训，怎么说呢，感觉￥6999 不太值，不做测试呗！~...
原创
2022-11-22 00:04:24
73阅读
今天第一天到新校址去上课，一路上还是比较顺利．
今上的oracle ，老师先把以前的ＳＱＬ语句复习了一下，有好长一段时间没有看了，前面的知识忘记了好多．真是对不起老师呀！
接下来一段时间，先把ＳＱＬ语句复习一下，在数据库上还是要多花点工夫，数据库也是比较重要的．
以前学过的东西，有空还是要去翻一下，特别是和后面的学习有关联的．
温故而知新，一定会有新的收获！
好好
原创
2008-05-28 21:34:48
641阅读
1评论
先把linux命令敲熟练，搭建linux下各种服务，遇到问题可以在google百度搭建服务后，理解每个服务的完整配置和优化，拓展思维积累shell编程
原创
2016-12-01 15:12:41
519阅读
我是张文强，我于2016年8月报名参加了由Alex老师主讲的python网络培训班，希望能够通过学习后实现由网络工程师转行为运维开发工程师的目标。经过4个月的努力之后，我对python领域有了新的认知：python不只能写出强大的脚本帮助运维提高工作效率，而且还能开发出牛逼的web系统，目前我通过在51CTO学习后，已经在工作中开发出了自己的第一个系统并投入使用，受到了老板的表扬。在培训期间，爱：
原创
2016-12-16 15:34:36
2517阅读
前端学习感想首先，任何技术实际都是从零基础开始的，不管是直接学习还是通过相近经历的转行。所以不需要因零基础担心。 其次，一定要做好准备，一项技术的学习，意味着你各方面资源不同程度的消耗：时间、工具、资金，甚至融入相关交流圈子的准备。在这个准备过程中，最好是带有一个强硬的规划：“我要在多长时间达到能够实现什么样的水平”，这个是我一直分享的重点，因为我们工种的特殊性，如果没有这个规划，人都会越来越懒
转载
2017-05-16 14:57:22
956阅读
如果一个DBA只知道数据库，他要说自己很厉害，我是不信的。 数据库跑在操作系统上，如果不能很好地掌握与理解操作系统，怎么能管好数据库； 操作系统跑在服务器上，如果对服务器不了解，怎么能管好数据库； 数据存在存储上，如果对存储一窍不通，调优怎么会靠谱； 访问需要TCP/IP网络，如果对网络知之甚少，相
转载
2017-08-22 10:23:00
84阅读
2评论
//书非借不能读也，今早从图书馆新书阅览室借来《Hadoop in Action》，最长借期7天。整理读书笔记并留下电子版以供以后方便复习。
Hadoop是一个开源的框架，可编写和运行分布式应用处理大规模数据。专为离线处理和大规模数据分析而设计，避免耗时的数据传输问题，适合一次写入，多次读取。
特性：方便、健壮、可扩展、简单。
MapReduce
转载
2023-12-15 10:48:50
54阅读
软件开发
原创
2023-08-01 23:42:18
23阅读
最近刚拿到HCIE的面试PASS通知，心情很复杂。回顾下自己的HCIE学习之路，在这途中有欢笑，有艰辛，也有更对的收获。在刚出学校之后，一直希望从事网络相关行业，但是由于人际环境，及其他因素，导致自己并不清楚这一行，到底是需要学习哪些知识，刚开始就进的甲方做网络运维工程师，但是当时基本全是华三的设备，基本有问题直接打乙方电话就解决。慢慢自己在甲方待业感觉学习不到什么知识，有些混日子的感觉。这或许就
原创
2018-08-31 11:52:37
3210阅读
点赞
算法是什么很多人可能都听过算法，可能也实现过一些算法，如果问他什么是算法，可能也很难的准确的说出来。确实，给一个事物下定义是很难的，因为总会有没有覆盖的点。当然了，百科已经有明确的说明了，想温习的可以自己去看。不过我还是喜欢这个概念：解决问题的方法步骤，虽然不精准，但是容易理解。比如让你求解1+2+3+4+...+99999999+100000000=?最笨的方法从头加到尾，
原创
2022-03-24 18:58:12
143阅读
去年6月，开始打算认真的看一个大框架的源码， 当时选择了看webpack... https://juejin.im/post/5bf7c2186fb9a049fd0f7e8a 主要在看的是这里的系列文章， 从tapable开始看.. 学习过程的一路中， 不知不觉，7、8个月过去了， 一直到今天，终于
原创
2021-09-05 10:25:49
154阅读
1.浏览器是按照书写的顺序来解析javascript代码的，因此css文件需要放在前头，但是通过事件调用的代码对位置没有什么要求2.在页面上输出内容可以使用document.write()，如果需要输出html标签的话，直接在代码里用双括号括起来就行了，例如document.write("<inputtype='text' value='点我'>");3.prompt(str1,str
在学习hadoop之前，我就明确了要致力于大数据行业,成为优秀的大数据研发工程师的目标，有了大目标之后要分几步走，然后每一步不断细分，采用大事化小的方法去学习hadoop。下面开始叙述我是如何初学hadoop的。 hadoopHadoop学习两步走:linux学习、hadoop学习。在接触hadoop之前我有java基础，为此我的计划是首先学习Linux,然后学习hadoop生态系统,
转载
2023-11-23 10:11:04
175阅读
一周感想
原创
2019-07-28 18:12:43
692阅读
Gray Hat Python Python Programming for hackers and reverse engineers Python灰帽子：黑客与逆向project师的Python编程之道 几乎相同两周之前看到了这本书，心情非常是激动啊，下定决心一定要好好看看。 好了一个星期的边看
转载
2017-04-22 19:59:00
174阅读
2评论
今天看到QQ群里有人发一张很有意思的图片。
就是一群农民工，在路边等活的那种，上面摆着牌子，说可以做网站，写程序。
虽说搞笑，也反应出了，很多IT从业者，生活状态并不是太好。
其实对这个问题，我是这样看的：
伴随着互联网的发展。IT人才的短缺现象将会越来越严重。据保守估计，目前中国市场对IT软件人才的需求每年超过150万人。IT技术人员的极度短缺，迫使许多公司不得不提供高薪才能聘请到符合要
原创
2011-08-03 18:33:23
772阅读
我是一个学机械类专业的大一萌新，我从小就比较喜欢去制造一些东西，然后我又比较喜欢编程，同时这两个专业之间并不冲突，甚至可以说相辅相成，很多编程创作出来就是用来操作机器的，编程本身的创作与机器也是密不可分，学校安排的大一课程里面就有C语言的学习，但是学校似乎不是很重视，又加上疫情的原因，课程安排很紧，而且老师讲课的速度很快，导致我一时间接受不了。我希望可以通过我自己的努力将C语言学好，并且在学好自己
原创
2021-02-03 11:55:38
421阅读
# Hadoop电商数仓实训感想
在进行Hadoop电商数仓实训的过程中，我深刻体会到了大数据技术在电商领域的重要性和实际应用。电商行业每天产生海量数据，如何高效地处理和分析这些数据是一个亟待解决的问题。而Hadoop的分布式处理能力为我们提供了理想的解决方案。
## 数据仓库与Hadoop的结合
在实训中，我们首先学习了数据仓库的基本概念。数据仓库是一个集成、主题导向、稳定的、历史数据的集
学习Python的这几天来，觉得Python还是比较简单，容易上手的，就基本语法而言，但是有些高级特性掌握起来还是有些难度，需要时间去消化。Python给我最大的印象就是简洁，这也正是我为什么不太喜欢Java的原因之一。一、Python简介 Python是一种用来编写应用程序的高级程序设计语言。Python实现强势逆袭，而且我相信，随着时间的推移，国内Pytho
