51CTO首页
内容精选
博客
学堂
精培
企业培训
CTO训练营
开源基础软件社区
元宇宙大会
AISummit人工智能大会
移动端
公众号矩阵
博客
免费课程 课程排行 直播课 软考学堂
精品班 厂商认证 IT技术 2022年软考 PMP项目管理
在线学习 企业服务
CTO训练营 技术经理研习营 LeaTech峰会
文章 资源 问答 开源课堂 专栏 直播

蒙塔卡洛求圆周率

蒙特卡洛法（MonteCarlomethod），也称统计模拟方法，是二十世纪四十年代中期由于科学技术的发展和电子计算机的发明，而被提出的一种以概率统计理论为指导的一类非常重要的数值计算方法。是指使用随机数（或更常见的伪随机数）来解决很多计算问题的方法,与它对应的是确定性算法。蒙特·卡罗方法在金融工程学，宏观经济学，计算物理学（如粒子输运计算、量子热力学计算、空气动力学计算）等领域应用广泛。下面我们

Java
原创 点赞0 阅读215 收藏0 评论0 2020-12-31

金融领域Python已取代Excel成为最流行的生产力工具

如果您想证明自己是入门级银行家或交易员，通常情况下，您必须了解Excel中的财务建模的全部知识。但现在，Excel有些Out了，尤其是在交易大厅，映入眼亮的交易员都在敲Python代码野村证券（Nomura）副首席数字官马修·汉普森（MatthewHampson）在上周五的伦敦QuantConference上发表讲话说：“Python已经取代了Excel。”“您已经可以穿越交易大厅，看到人们在编写

Java
原创 点赞0 阅读123 收藏0 评论0 2020-12-31

textstat:文本可读性计算包

Python网络爬虫与文本数据分析textstat是python的文本可读性计算包，可以计算文章层面、段落层面·句子层面的文本的音节统计syllable_count词汇数统计lexicon_count句子数统计sentence_count各种可读性算法目前支持的语言有英语en、德语de、西班牙语es、法语fr、意大利语it、荷兰语nl、波兰语pl、俄语ru，目前不支持中文呢。可读性计算方法有The

Java
原创 点赞0 阅读1575 收藏0 评论1 2020-12-31

代码不到40行的超燃动态排序图

出处https://colab.research.google.com/github/pratapvardhan/notebooks/blob/master/barchart-race-matplotlib.ipynb需要使用vpn,我已经将该文件放到项目中，大家可在文末获得下载方式这种图在国外叫做BarChartRace，通过这个图可以察公司沉浮，观国家兴衰。我使用了统计局网站提供的各国航空客运

Java
原创 点赞0 阅读179 收藏0 评论0 2020-12-31

Python爬虫快速入门

周末这两天我又接着之前的劲儿《Python快速入门》，将python爬虫相关的知识点做了梳理，录屏、剪辑、上传到B站。由于在公共区域录制，偶尔会有点吵，不过95%上的时间音质是很不错的。内容方面做了两大方面的更新：定位解析库由原来的bs4，转为现在的pyquery库增加了几个实战案例，如boss直聘、天涯论坛、大众点评等。剪辑视频配上烟袋斜街bgm，品茶学爬虫，爽～内容目录近期文章文本数据分析文章

Java
原创 点赞0 阅读257 收藏0 评论0 2020-12-31

使用sklearn预测共享单车出行情况

近期文章文本数据分析文章汇总(2016-至今)免费视频课《Python快速入门》python爬虫与文本数据分析系列课当文本分析遇到乱码(ง'⌣')ง怎么办？Loughran&McDonald金融文本情感分析库使用分析师报告中含有的情感信息预测上市公司股价变动当pandas遇上数据类型问题如何理解pandas中的transform函数利用mlxtend进行数据关联

Java
原创 点赞0 阅读226 收藏0 评论0 2020-12-31

当文本分析遇到乱码(ง'⌣')ง怎么办？

做文本分析经常遇到数据乱码问题，一般遇到编码问题我们无能为力，都是忽略乱码的文本。text=open(file,errors='ignore').read()但是这样会遗失掉一些信息，那到底怎么治文本分析时经常为非作歹的妖魔鬼怪？心里默念python大法好！ftfy（fixestextforyou）可以为我们整理的乱码数据。安装!pip3installftfy==5.6乱码(ง'⌣

Java
原创 点赞0 阅读223 收藏0 评论0 2020-12-31

昨天被举报了

一个人呆在寒冷的大东北，现在呆在办公室一两个小时就会四肢发凉，人凉了就想吃点好东西。对大邓来说KFC挺不错，今晚独自一人吃掉了一个鸡腿堡、一份大薯和一份鸡米花。抚摸着渐渐隆起的小腹，慢悠悠的走回位于哈工大科学园的办公室，路上一直回味着美味，这种感觉真好～但是回到办公室，看到公众号提示我违规诱导用户点击广告。WTF！？XXX举报我诱导用户点击尾部广告，美味带来的好心情散去大邓核查了最近的公众号文章末

Java
原创 点赞0 阅读72 收藏0 评论0 2020-12-31

使用分析师报告中含有的情感信息预测上市公司股价变动

今天在github上找到一个股价预测的项目，感觉该项目对很多会计金融领域的同学很有帮助。项目:Stock-Price-Predictions作者:PrinceKumar,SimonJones,AmratanshSharm,LorenaBustamante链接:https://github.com/amratansh/Stock-Price-Predictions译者:大邓本文目录摘要分析发现项目E

Java
原创 点赞0 阅读158 收藏0 评论0 2020-12-31

当pandas遇上数据类型问题

原文:OverviewofPandasDataTypes作者:ChrisMoffitt链接:https://pbpython.com/pandas_dtypes.html译者:大邓当我们做数据分析时，确保自己使用的是正确的数据类型，这一点很重要。而在pandas中，一般情况下会根据我们导入的数据，自动分配最合适的数据类型。但是有时候pandas也会犯错，这时候我们就需要diy自定义数据类型。本文主

Java
原创 点赞0 阅读157 收藏0 评论0 2020-12-31

Arrow日期时间处理库

Arrow是python中最友好的日期时间库，诸如对日期时间数据的创建、操纵、格式化、转化，arrow都可以搞定，而且接口对普通人来说很友好。为什么不使用python内置模块，而是使用Arrrow？python标准化库和其他第三方库都有提供日期时间处理操作，但是从应用角度来说，不够好用太多的库，选择困难。诸如datetime,time,calendar,dateutil,pytz等等太多的数据类型

Java
原创 点赞0 阅读477 收藏0 评论0 2020-12-31

利用mlxtend进行数据关联分析

guan大数据挖掘最深入人心的一个故事应该是“啤酒与尿布”，这个规律就是用关联分析发现的。今天我们就来点关联分析，刚刚学到的，现学现分享

Java
原创 点赞0 阅读187 收藏0 评论0 2020-12-31

​tabulate：好看的字符串表格库

写公众号文章dataframe运行的结果直接复制粘贴到公众号格式会乱，今天看到一个tabulate库可以解决这个问题。tabulate参数tabulate(data,headers,showindex,tablefmt,colalign,numalign,stralign,floatfmt)data传入的数据headers字段名，参数可以是firstrow，也可以是指定的列名列表showindex

Java
原创 点赞0 阅读360 收藏0 评论0 2020-12-31

​tabulate：好看的字符串表格库

写公众号文章dataframe运行的结果直接复制粘贴到公众号格式会乱，今天看到一个tabulate库可以解决这个问题。tabulate参数tabulate(data,headers,showindex,tablefmt,colalign,numalign,stralign,floatfmt)data传入的数据headers字段名，参数可以是firstrow，也可以是指定的列名列表showindex

Java
原创 点赞0 阅读294 收藏0 评论0 2020-12-31

如何理解pandas中的transform函数

transform函数一直没懂，直到看到这篇文章UnderstandingtheTransformFunctioninPandas,假设我们有下面的销售数据，有三个不同的订单id（10001，10005和10006）,每个订单id又含有多个产品。importpandasaspddf=pd.read_excel("sales_transactions.xlsx")df问题每个订单中各个单品费用分布及

Java
原创 点赞0 阅读125 收藏0 评论0 2020-12-31

Prophet: 时间序列预测库

prophet是facebook开源的python预测库，该库的api设计与sklearn很像，也是分为fit方法和predict方法。prophet库可以帮助我们进行SaturatingForecastsTrendChangepointsSeasonality,HolidaysEffectsMultiplicativeSeasonalityUncertaintyIntervalsOutliers

Java
原创 点赞0 阅读369 收藏0 评论0 2020-12-31

PyTorch版《动手学深度学习》PDF 版开源了

内容简介一位北大的老哥把他翻译成了Pytorch版https://github.com/ShusenTang/Dive-into-DL-PyTorch源项目由于写的是markdown,我在此基础上生成了PDF版本,方便大家阅读以及解决github上公式显示不全的问题.pdf下载地址https://github.com/OUCMachineLearning/OUCML/blob/master/BOO

Java
原创 点赞0 阅读306 收藏0 评论0 2020-12-31

pip安装问题解决办法

pip安装问题解决办法原创大邓大邓和他的Python2019-10-12python第三方库资源绝大多数是存放在国外的，而且pip默认访问到资源地址是国外站。如果遇到特殊时期，网络不稳定，使用pip安装库，十有八九安装失败。解决办法就是让pip默认访问国内站。设置方法：打开命令行，输入pip3configsetglobal.index-urlhttps://pypi.tuna.tsinghua.e

Java
原创 点赞0 阅读309 收藏0 评论0 2020-12-31

免费课《Python快速入门》

最近一段时间，我按照章节录制《python快速入门》，视频由22段小视频，总时长128分钟。新视频教程特点：使用jupyternotebook剪辑视频配上欢快的bgm，学起来悦耳赏心重要的地方加字幕提示章节目录观看方式B站账号：邓旭东HIThttps://www.bilibili.com/video/av44384851/

Java
原创 点赞0 阅读121 收藏0 评论0 2020-12-31

一行pandas代码生成哑变量 原创 大邓 大邓和他的Python 2019-10-08 一、

一、数据importpandasaspddf=pd.read_csv('data.csv',usecols=['Name','Info'])df.head()二、任务现在我想生成A、B、C、D的哑变量三、技术实现在pandas操作步骤如下：先选中pd.DataFrame中的需要操作的Info列，得到pd.Series类型数据将pd.Series转化为pd.Series.str使用pd.Series

Java
原创 点赞0 阅读134 收藏0 评论0 2020-12-31

如何用pandas对excel中的文本数据进行操作

excel进行数据的操作最便捷的库是pandas，但是如何使用pandas对excel中的文本进行清洗，这是一个很技巧性的工作。之前常见的思路是操作结果保存到新的excel文件中，这会让代码可读性和清洗速度大大降低，这很不pythonic，所以今天分享pandas的文本数据处理技巧。pandas中有Series和DataFrame两种数据结构，Series是一种数组，DataFrame是一种表（每

Java
原创 点赞0 阅读122 收藏0 评论0 2020-12-31

文本数据分析文章汇总(2016-至今)

从2016年开始分享python相关文章，公众号从初期主要分享爬虫内容，逐渐过渡为主要分享文本数据分析。今天将这三年来都文本数据相关都文章汇总，共有大概80+（含转载）篇。一直兜售的课程《python爬虫与文本分析》，其中文本分析部分的内容全部取材自以下80+篇。爬虫的教程网络上有很多，入门的文本分析内容较少，大家可以结合我的《python爬虫与文本分析》课程的目录对下面的内容进行收藏和学习。文章

Java
原创 点赞0 阅读921 收藏0 评论1 2020-12-31

生成自己QQ、微信的彩色动态图二维码

昨天在B站看到【一行代码！生成自己QQ、微信的动态图二维码】，上网查了下myqr发现挺好玩的，我也自己录制了个自己的gif动图作为微信动态二维码素材。现在开始实验吧，首先我们先安装!pip3installmyqrmyqr中用到的参数我录制的动态图我的微信二维码二维码解析后得到的字符串words参数传入的是大邓微信二维码对应的字符串。在这个网站https://jiema.wwei.cn/上传我的微信

Java
原创 点赞0 阅读916 收藏0 评论0 2020-12-31

为什么我建议自己的研究生学点编程

2019·国庆·杭州|Python爬虫与文本分析工作坊&课题申报高级研修班在过去的两年间，Python一路高歌猛进，成功窜上“最火编程语言”的宝座。惊奇的是使用Python最多的人群其实不是程序员，而是数据科学家，尤其是社会科学家，涵盖的学科有经济学、管理学、会计学、社会学、传播学、新闻学等等。大数据时代到来，网络数据正成为潜在宝藏，大量商业信息、社会信息以文本等非结构化、异构型数据格式存

Java
原创 点赞0 阅读371 收藏0 评论0 2020-12-31

用python进行金融市场文本数据的情感计算

推荐阅读计算社会经济学国务院政府工作报告(1954—2017)文本挖掘及社会变迁研究文本大数据分析在经济学和金融学中的应用：一个文献综述中文金融领域情感词典构建PyQuery:爬虫界最简洁优雅的库之前我依据一篇论文中的中文金融情感词典CFSD(chinesefinancialsentimentdictionary)，中文金融领域情感词典构建，整理成csv文件的情感词典。现在我们找点财经类新闻文本数

Java
原创 点赞0 阅读889 收藏0 评论1 2020-12-31

中文金融领域情感词典构建

Python爬虫与文本分析工作坊&课题申报高级研修班这篇文章是公众号关注者郝童鞋今早发给我的，在此谢谢郝童鞋。文章基于简单算法和人工判断，使用多阶段剔除法，构建了中文金融情感词典CFSD（ChineseFinancialSentimentDictionary），这个词典能帮到那些想用文本分析研究会计金融领域的中文文档的研究者。CFSD词典有1489个负面词，1108个正面词。并且简单讨论了

Java
原创 点赞0 阅读1845 收藏0 评论2 2020-12-31

理解实例方法、类方法、静态方法

Python爬虫与文本分析工作坊&课题申报高级研修班python中的高级语法有类和装饰器，今天我们学习一下实例方法、类方法和静态方法的区别。其中类方法和静态方法分别用了装饰器中的classmethod和staicmethod关键词。在此之前我们先要理解实例和类的区别。比如人类是一种类，而刘慈欣是人类中的一员，刘慈欣就是一个类的实例。实例方法实例是类的具体例子，那么调用实例先要初始化，这里也

Java
原创 点赞0 阅读311 收藏0 评论0 2020-12-31

PyQuery: 爬虫界最简洁优雅的库

简洁的PyQuery库pyquery库是jQuery的Python实现，能够以jQuery的语法来操作解析HTML文档，易用性和解析速度都很好。特别适合进行访问和解析网页数据。PyQuery库官方文档https://pythonhosted.org/pyquery/index.html本文章节：初始化为PyQuery对象常用的CCS选择器伪类选择器查找标签获取标签信息高级方法一、初始化为PyQue

Java
原创 点赞0 阅读740 收藏0 评论0 2020-12-31

国务院政府工作报告(1954—2017)文本挖掘及社会变迁研究

魏伟,郭崇慧,陈静锋.国务院政府工作报告(1954—2017)文本挖掘及社会变迁研究[J].情报学报,2018,37(4):406-421.计算社会经济学文本大数据分析在经济学和金融学中的应用：一个文献综述【视频课】Python爬虫与文本数据分析2019·国庆·杭州|Python爬虫与文本分析工作坊每个人(公司、政府)都会有自己表达方式，比如口头禅为例，小的时候经常"卧槽"，稍

Java
原创 点赞0 阅读667 收藏0 评论0 2020-12-31

计算社会经济学

2019·国庆·杭州|Python爬虫与文本分析工作坊&课题申报高级研修班很久之前听过计算社会学（ComputationalSociety），8月底回中南大学从一位师兄那里看到一篇文章名叫社会计算经济学（ComputationalSocioeconomics）,是一篇发表在PhysicsReports(影响因子28.295)的综述性文章，但是未来这篇文章说不定是社会计算经济学这门学科的奠基

Java
原创 点赞0 阅读256 收藏0 评论0 2020-12-31
  • 1
  • 2
  • 3
  • 4

Copyright © 2005-2022 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 意见反馈 了解我们 全部文章
在线客服 网站地图 热门标签
友情链接
开源基础软件社区 51CTO学堂
51CTO