老男孩python的博客_JavaScript,PHP,Asp,Mysql,jQuery,HTML5,Html/CSS,微信开发(8)

学习Python前景怎么样？

随着近几年Python的飞速发展，应用范围逐步趋于广泛，后端开发、前端开发、爬虫、金融量化分析、人工智能、自动化运维、自动化运维、大数据，Python都有涉及。Python相对其他编程语言来讲，语法较简单，就算没有任何编程基础，我们也可以学习和掌握Python编程开发，是新时代的宠儿!因此参加Python工程师培训机构的人越来越多。Python有很多吸引程序员的功能，它易学，面向对象，字节码编译，

Python前景

原创 2018-10-24 15:42:42 477 阅读

常用十大python机器学习库

1. PipenvPipenv 是 Kenneth Reitz 的业余项目，旨在将其他软件包(例如 npm 和 yarn)整合到 Python 里。它不需要安装 virtualenv, virtualenvwrapper，不用管理 requirements.txt 文件，并且不用确保依赖版本的可复现性。通过 Pipenv，你可以在 Pipfile 中指定依赖项。该工具可生成一个 Pipfile.l

python

机器

学习库

原创 2018-10-24 15:41:11 1288 阅读

Kafka存储机制是什么？

kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment。所谓的分区其实就是在kafka对应存储目录下创建的文件夹，文件夹的名字是主题名加上分区编号，编号从0开始。一、segment所谓的segment其实就是在分区对应的文件夹下产生的文件。一个分区会被划分成大小相等的若干segment，这样一方面保证了分区的数据被划分到多个文件中保证不会

Kafka存储机制

原创 2018-10-23 15:58:16 205 阅读

Kafka存储机制是什么？

kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment。所谓的分区其实就是在kafka对应存储目录下创建的文件夹，文件夹的名字是主题名加上分区编号，编号从0开始。一、segment所谓的segment其实就是在分区对应的文件夹下产生的文件。一个分区会被划分成大小相等的若干segment，这样一方面保证了分区的数据被划分到多个文件中保证不会

Kafka存储机制

原创 2018-10-23 15:58:10 288 阅读

Kafka数据可靠性解析

一、AR在Kafka中维护了一个AR列表，包括所有的分区的副本。AR又分为ISR和OSR。AR = ISR + OSR。AR、ISR、OSR、LEO、HW这些信息都被保存在Zookeeper中。1.ISRISR中的副本都要同步leader中的数据，只有都同步完成了数据才认为是成功提交了，成功提交之后才能供外界访问。在这个同步的过程中，数据即使已经写入也不能被外界访问，这个过程是通过LEO-HW机制

Kafka数据

原创 2018-10-23 15:57:25 319 阅读

用 Python 快速实现 FTP 服务器

可以利用 Python 的 Pyftpdlib 模块快速搭建FTP 服务器实现文件上传下载功能，以下是具体做法：安装 Pyftpdlib 模块$ sudo pip install pyftpdlib通过 Python 的 -m 选项将 Pyftpdlib 模块作为一个简单的独立服务器来运行，假设我们需要共享目录 /Users/Edu/Oldboy，只需要以下这个命令行就可以轻松实现：$ cd /U

Python

原创 2018-10-23 15:56:30 425 阅读

网络爬虫处理异常的种类

每个程序都不可避免地要进行异常处理，爬虫也不例外，假如不进行异常处理，可能导致爬虫程序直接崩掉。以下是网络爬虫出现的异常种类。URLError通常，URLError在没有网络连接(没有路由到特定服务器)，或者服务器不存在的情况下产生。HTTPError首先我们要明白服务器上每一个HTTP 应答对象response都包含一个数字“状态码”，该状态码表示HTTP协议所返回的响应的状态，这就是HTTPE

网络爬虫

原创 2018-10-22 14:24:15 398 阅读

什么是爬虫？

世界上80%的爬虫是基于Python开发的，学好爬虫技能，可为后续的大数据分析、挖掘、机器学习等提供重要的数据源。什么是爬虫？网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。其实通俗的讲就是通过程序去获取web页面上自己想要的数据，也就是自动抓

爬虫

原创 2018-10-22 14:23:06 594 阅读

大数据分析编程语言有哪些？

在巨大的数据集中进行筛选的最好工具是什么?以下是总结的十大合适大数据处理的编程语言。1. R语言R语言是数据科学的宠儿，R语言有着简单而明显的吸引力，使用R语言，只需要短短的几行代码，你就可以在复杂的数据集中筛选，通过先进的建模函数处理数据，以及创建平整的图形来代表数字，它被比喻为是Excel的一个极度活跃版本。2. Python如果说R语言是一个神经质又可爱的高手，那么Python是它随和又灵活

大数据分析

原创 2018-10-22 14:22:15 373 阅读

Hadoop如何工作？

Hadoop主要是分布式计算和存储的框架，其工作过程主要依赖于HDFS分布式存储系统和Mapreduce分布式计算框架，以下是其工作过程：阶段 1用户/应用程序可以通过指定以下项目来向Hadoop（hadoop作业客户端）提交作业以获取所需的进程：分布式文件系统中输入和输出文件的位置。java类以jar文件的形式包含map和reduce函数的实现。通过设置作业的不同参数来配置作业。阶段 2Hado

Hadoop

原创 2018-10-19 14:05:32 344 阅读

Python数据分析库有哪些？

Python之所以这么流行，这么好用，就是因为Python提供了大量的第三方的库，开箱即用，非常方便，而且还免费哦，学Python的同学里估计有30%以上是为了做数据分析师或者数据挖掘，所以数据分析相关的库一定要熟悉，那么常用的Python数据分析库有哪些呢？1.NumPyNumPy是Python科学计算的基础包，它提供：1).快速高效的多维数组对象ndarray；2).直接对数组执行数学运算及对

Python数据分析库

原创 2018-10-19 14:04:53 455 阅读

常用Python机器学习库有哪些？

现在人工智能非常火爆，机器学习应该算是人工智能里面的一个子领域，而其中有一块是对文本进行分析，对数据进行深入的挖掘提取一些特征值，然后用一些算法去学习,训练,分析,甚至还能预测，那么Python中常用的机器学习库有哪些呢？1.NLTK自然语言处理里面赫赫有名的就是NLTK全称叫自然语言工具包(Natural Language Tookit),里面包含了大量的函数模块,可以获取语料库，字符串的处理，

Python机器学习库

原创 2018-10-19 14:04:13 571 阅读

常用Python爬虫与Web开发库有哪些？

Python爬虫和Web开发均是与网页相关的知识技能，无论是自己搭建的网站还是爬虫爬去别人的网站，都离不开相应的Python库，以下是常用的Python爬虫与Web开发库。1.爬虫库beautifulsoup4、urllib2、lxml和requests是学习Python爬虫必备的库，必须要掌握，当然有的同学说爬网页不是也可以用正则表达式吗，确实可以但是会很不方便,因为bs4和lxml都有便捷的接

Python爬虫

原创 2018-10-19 14:03:22 147 阅读

如何学习Python数据爬虫

现行环境下大数据与人工智能的重要依托还是庞大的数据和分析采集，就如淘宝、京东、百度、腾讯级别的企业能够通过数据可观的用户群体获取需要的数据。而一般企业可能就没有这种通过产品获取数据的能力和条件。因此，利用爬虫，我们可以解决部分数据问题，那么，如何学习Python数据爬虫能？1. 学习Python基础知识并实现基本的爬虫过程一般获取数据的过程都是按照发送请求-获得页面反馈-解析并且存储数据这三个

学习Python

原创 2018-10-19 14:02:35 120 阅读

十大编程语言优缺点对比

python作为一门高级编程语言，它的诞生虽然很偶然，但是它得到程序员的喜爱却是必然之路，以下是Python与其他编程语言的优缺点对比：1. Python优势：简单易学，能够把用其他语言制作的各种模块很轻松地联结在一起。劣势：速度较慢，且有一些特定情况下才会出现(无法重现)的 bug2. C/C++C/C++优势：可以被嵌入任何现代处理器中，几乎所有操作系统都支持 C/C++，跨平台性非常好劣势：

编程语言

原创 2018-10-18 16:51:34 446 阅读

什么是大数据？

大数据不仅仅是一个数据，它是大数据集的集合，不能使用传统的计算技术来处理，宏观上来讲，它不仅包括需处理的数据，还包括各种工具、技术和框架。大数据涉及由不同设备和应用程序产生的数据，主要包括以下几个领域：黑匣子数据：它是直升机，飞机和喷气机等的组件。它捕捉飞行机组的声音，麦克风和耳机的录音，以及飞机的性能信息。社会媒体数据：Facebook和Twitter等社交媒体保存着全球数百万人发布的信息和

大数据

原创 2018-10-18 16:50:09 471 阅读

Hadoop框架介绍

Hadoop是一个用Java编写的Apache开源框架，允许使用简单的编程模型跨计算机集群分布式处理大型数据集。Hadoop框架工作的应用程序在跨计算机集群提供分布式存储和计算的环境中工作。Hadoop旨在从单个服务器扩展到数千个机器，每个都提供本地计算和存储。Hadoop框架包括以下四个模块：Hadoop Common: 这些是其他Hadoop模块所需的Java库和实用程序。这些库提供文件系统和

Hadoop框架

原创 2018-10-18 16:49:19 839 阅读

Python语言的优点及优势

python作为一门高级编程语言，它的诞生虽然很偶然，但是它得到程序员的喜爱却是必然之路，Python入门简单，相比于其他语言，初学者很容易入门，除此之外，Python还具有以下优点：1. 简单：Python奉行简洁主义，易于读写，它使你能够专注于解决问题而不是去搞明白语言本身。2. 免费：Python是开源软件。这意味着你不用花一分钱便能复制、阅读、改动它，这也是Python越来越优秀的原因——

Python语言

原创 2018-10-17 15:09:08 209 阅读

Python和Java有什么区别？

作为世界上使用范围最广的编程语言，Java难免总是被拿来跟Python比较，而且，在编程语言的各种对战中，Python 与Java也是打得最热烈的。1. Java必须显式声明变量名，而动态类型的Python不需要声明变量。2. Python是一种语法简单的功能强大的语言，能够通过编写脚本就提供优秀的解决方案，并能够快捷地部署在各个领域。3. Java可以创建跨平台的应用程序，而Python几乎与当

Python

原创 2018-10-17 15:07:46 1617 阅读

Python和PHP哪个有前景？

Python、PHP和其他编程语言一样，都有各自的优缺点，受欢迎程度取决于其是否迎合了时代的发展，不同的编程语言有其不同的特点，适应不同的场景，以下是Python和PHP的对比！1. 从开发的角度来看，PHP是面向web的语言，而Python是多用途语言，也可以用于web开发。2. 虽然Python没有PHP那么多引以为豪的框架，但个情况很快会改变(目前最好用的是Django和Flask)。3.

Python

原创 2018-10-17 15:06:58 2118 阅读

Python和C#学哪个更好些？

Python是一种跨平台语言。无论是在Windows、Linux、Unix还是Mac Os系统，我们都可以使用Python。甚至在Linux、Unix及Mac OS系统内已经集成了Python。语法简洁优美, 简单，易学。拥有强大的标准库及第三方库。Python的使用范围极广。C#是微软公司推出的一种功能强大的高级编程语言，能够迅速、高效地完成Windows平台上的项目开发，被称为未来语言！Pyt

Python

原创 2018-10-17 15:06:08 1334 阅读

Python和Ruby学哪个更好些？

Ruby 和 Python十分相似，有很多共同点，但也有一些不同之外，以下是Python和Ruby的对比：1. Python和Ruby都是面向对象的语言，都是动态和灵活的。二者的主要区别在于他们解决问题的方式。Ruby提供了不同的方法，而Python通常只有一个，这既是优势也劣势。2. 最流行的Ruby框架是Ruby-on-Rails，跟Python的Django极其相似且同等高效，不过，如果开发

Python

原创 2018-10-17 14:53:50 117 阅读

Python和Cython有什么关系？

Cython是Python的一个超集，结合了Python的易用性和原生代码的速度，可以编译成C语言，产生的性能提升可以从几个百分点到几个数量级，具体取决于手头的任务。使用Cython，你可以避开Python的许多原生限制，或者完全超越Python，而无需放弃Python的简便性和便捷性。Python代码可以直接调用C模块。这些C模块可以是通用的C库或专门为Python工作的库。Cython生成第二

Python

原创 2018-10-16 14:56:23 266 阅读

Python和Cython有什么关系？

Cython是Python的一个超集，结合了Python的易用性和原生代码的速度，可以编译成C语言，产生的性能提升可以从几个百分点到几个数量级，具体取决于手头的任务。使用Cython，你可以避开Python的许多原生限制，或者完全超越Python，而无需放弃Python的简便性和便捷性。Python代码可以直接调用C模块。这些C模块可以是通用的C库或专门为Python工作的库。Cython生成第二

Python

原创 2018-10-16 14:56:17 340 阅读

常用Python数据类型转换方法

Python 支持四种不同的数值类型，分别是整型、长整型、浮点型和复数，这些类型的数据有各自的特点，在使用过程中也可以进行类型转换，具体转换方法如下：int(x [,base ]) 将x转换为一个整数 long(x [,base ])

Python数据类型

原创 2018-10-16 14:55:33 570 阅读

Python名称空间使用方法

名称到对象的映射。命名空间是一个字典的实现，键为变量名，值是变量对应的值。各个命名空间是独立没有关系的，一个命名空间中不能有重名，但是不同的命名空间可以重名而没有任何影响。通俗讲：名称空间就是存放名字的地方，三种名称空间，（之前遗留的问题x=1，1存放于内存中，那名字x存放在哪里呢？名称空间正是存放名字x与1绑定关系的地方）一、名称空间分类1. 全局命名空间（ Global）：每个模块加载执行时创

Python名称空间

原创 2018-10-16 14:54:52 281 阅读

Hadoop之hdfs架构详解

HDFS，Hadoop分布式文件系统，它是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，适合那些有着超大数据集的应用程序。HDFS的设计特点是：1. 大数据文件，非常适合上T级别的大文件或者一堆大数据文件的存储，如果文件只有几个G甚至更小就没啥意思了。2. 文件分块存储，HDFS会将一个完整的大文件平均分块存储到不同计算器上，它的意义在于读取文件时可以同时从多个主

Hadoop

原创 2018-10-16 14:54:09 167 阅读

Hadoop核心由哪几部分构成？

Hadoop是一个能够对大量数据进行分布式处理的软件框架，以一种可靠、高效、可伸缩的方式进行数据处理，其有许多元素构成，以下是其组成元素：1. Hadoop Common ：Hadoop体系最底层的一个模块，为Hadoop各子项目提供各种工具，如：配置文件和日志操作等。2. HDFS：分布式文件系统，提供高吞吐量的应用程序数据访问，对外部客户机而言，HDFS 就像一个传统的分级文件系统。可以创建、

Hadoop

原创 2018-10-16 14:52:40 4942 阅读

经典Python面试题之数据库和缓存

1. 列举常见的关系型数据库和非关系型都有那些?2. MySQL常见数据库引擎及比较?3. 简述数据三大范式?4. 什么是事务?MySQL如何支持事务?5. 简述数据库设计中一对多和多对多的应用场景?6. 如何基于数据库实现商城商品计数器?7. 常见SQL(必备)8. 简述触发器、函数、视图、存储过程?9. MySQL索引种类10. 索引在什么情况下遵循最左前缀的规则?11. 主键和外键的区别?1

Python面试题

原创 2018-10-15 17:52:00 164 阅读

经典Python面试题之前端和框架

1. 谈谈你对http协议的认识。2. 谈谈你对websocket协议的认识。3. 什么是magic string ?4. 如何创建响应式布局?5. 你曾经使用过哪些前端框架?6. 什么是ajax请求?并使用jQuery和XMLHttpRequest对象实现一个ajax请求。7. 如何在前端实现轮训?8. 如何在前端实现长轮训?9. vuex的作用?10. vue中的路由的拦截器的作用?11. a

Python面试题

原创 2018-10-15 17:51:17 497 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

老男孩python的博客