文献搜索对于广大学子来说真的是个麻烦事，如果你的学校购买的论文下载权限不够多，或者不在校园内，那就很头痛了。幸好，我们有Python制作的这个论文搜索工具，简化了我们学习的复杂性2020-05-28补充：已用最新的scihub提取网，目前项目可用，感谢@lisenjor的分享。2020-06-25补充：增加关键词搜索，批量下载论文功能。2021-01-07补充：增加异步下载方式，加快下载速度；加强
转载
2023-08-06 21:08:57
80阅读
之前这篇文章（路人乙小明：用entrez eutilities来查pubmed文献）提过如何利用entrez eutilities查找文献。当时在最后面获取论文摘要和题录的部分直接用了text的模式。最近觉得用xml模式能获得更加细致的数据。比如我如果只想获得题目，杂志，一作，doi这几个信息，如果直接用text获取摘要，然后再用regex就比较容易出错，但是xml就不会有这样的问题
转载
2023-08-08 12:03:11
125阅读
PubMed是国际上公认的最具权威的生物医学文献数据库，检索文献用Pubmed，一般人都知道。不过嗵嗵还是会经常收到读者关于Pubmed和文献检索各种各样的问题，今天咱们就一次性解决问题，把Pubmed的基本、高级和精准检索功能做个梳理，大家各取所需吧。**********基本检索功能**********在靠近页面上部的地方，首先映入我们眼帘的，即是供我们输入所需查询内容的检索框。在检索框中输入查
转载
2023-10-25 19:17:19
73阅读
文章目录一、写在前面二、准备工作三、开始爬取四、效果展示 一、写在前面马上要毕业了兄弟们，毕业论文是个麻烦事，论文要的资料得一条一条去网上查看，那多浪费时间，咱直接写个爬虫，批量下载慢慢看，不舒服？二、准备工作使用软件 Python和pycharm就可以了，版本的话都行，只要你别用python2。模块requests #模拟请求
Selenium # 浏览器自动化操作win+r打开搜索框，
转载
2023-07-07 22:11:18
133阅读
PubMed为科研路上必不可少的数据库，今天传授PubMed高手常用的7个技巧，让你快速找到自己想要的文献。1，获取全文技巧Pubmed提供的文献大多是摘要，并不提供文献全文服务。对于文献列表中显示的PMC Full text 图标的文章，可以直接到PMC 中去阅读网页版的全文，或者在网页版全文阅读页面找到PDF 下载链接进行下载。另外，LinkOut-more resources这里也可以链接到
转载
2023-09-15 11:01:55
193阅读
文献搜索工具 Python: 一步步搭建你的搜索引擎
前言：
在当今信息爆炸的时代，获取学术文献变得越来越重要。一个好的文献搜索工具不仅能提高工作效率，还能帮助研究人员快速找到所需的资源。Python 的丰富库支持让我们能够轻松实现这个目标。在本文中，我将详细介绍如何构建一个文献搜索工具所需的各个环节，包括背景定位、参数解析、调试步骤、性能优化、排错指南和最佳实践。
## 背景定位
随着科学研
写在前面其实这个工具在年初的时候使用过，最近翻看自己以前的笔记时候又看到了。我觉得这款工具是很不错的文献检索工具，具体的操作以及参数也比较简单。搜索指定关键词就可以查到相关的文献名称、摘要(CN/EN)以及DOI号等信息。对于了解相关领域/关键词的文献还是很有帮助。安装 PyPubMed# 要求Python环境 Python3.6+
pip3 isntall pypubmed
#若安装速度太慢
转载
2023-11-12 22:52:23
129阅读
此处有几种选择可以达到目的：(1)官网上匹配筛选条件(注：匹配快速，但是下载下来的数量受到限制，每次只能下载10000条数据，甚至更少。)可以看到，我需要的数据是有三十多万条，但是每次只能下载10000条，那我岂不是要手动n次。。很明显，在大批量下载文献的情况下，官网不是很友好。由于我不喜欢用R写代码，所以我写一半还是换了Python，熟练R的小伙伴可以自行根据指南走通需求。(3)重量级库来了，P
转载
2023-07-29 10:39:03
68阅读
事隔几天，终于已经接近尾声。今天给大家分享一下python的爬虫知识，若分享的不好，还望海涵。 前言：前期对于urllib、re、BeautifulSoup 这三个库的用法，已经在文章中说明，更多的则是理论基础，实践才是真知。因此，此次主要讲解如何利用我们刚才的几个库去实战。一、确定爬虫目标：任何网站皆可爬取，就看你要不要爬取而已。本次选取的爬取目标是当当网，爬取内容是 以 Pytho
转载
2023-09-04 22:27:39
328阅读
# 如何使用Python搜索文献
## 引言
在科学研究中，文献是获取和分享知识的重要途径。为了找到相关的文献，我们通常需要使用合适的搜索工具和方法。Python是一种功能强大的编程语言，它提供了许多库和工具，可以帮助我们进行文献搜索和处理。本文将介绍如何使用Python搜索文献，并给出一个实际问题的解决方案。
## 实际问题
假设我们正在研究人工智能领域的最新进展，并且我们对GAN（生成对抗
原创
2023-10-22 03:41:24
95阅读
在互联网上的各类网站中，无论大小，基本上都会有一个搜索框，用来给用户对内容进行搜索，小到站点搜索，大到搜索引擎搜索。从简单的来说，搜索功能确实很简单，一个简单的 select 语句就可以实现数据的搜索。而从复杂的来看，无论是搜索的精度还是搜索的效率，都是有很深的研究范围的。对于简单的搜索功能来说，一个 select 查询语句也足够使用，但在稍微复杂一点的搜索
转载
2023-10-20 14:49:42
64阅读
目录前言一、准备工作二、爬取步骤1. 引入库2. 发送请求拿到页面 3.定位到章节URL ４.拼接URL拿到章节内容 5.存储各章节内容完整代码 前言 这次爬虫任务是从诗词名句上爬取《三国演义》整本小说的内容，每一章的内容都给它下载下来。我们使用的是 BeautifulSoup 这个模块。一、准备工作 首先我们要安装 lxml 和 bs4，并
转载
2023-10-16 23:09:58
191阅读
官方文档：://whoosh.readthedocs.io/en/stable/ pypi：://pypi.python.org/pypi/Whoosh/#downloads安装pip install WhooshWhoosh是一个纯python的全文搜索库Whoosh官方文档介绍如下，Whoosh is a library of classes and functions f
转载
2024-02-28 22:36:01
44阅读
给定一个或多个搜索词，如“高血压 患者”，从已有的若干篇文本中找出最相关的(n篇)文本。 理论知识文本检索（text retrieve）的常用策略是：用一个ranking function根据搜索词对所有文本进行排序，选取前n个，就像百度搜索一样。显然，ranking function是决定检索效果最重要的因素，本文选用了在实际应用中效果很好的BM25。BM25其实只用到了一些基础的统计和文
转载
2023-11-07 22:35:48
4阅读
目录初识 selenium网页分析代码实现踩过的坑 最近有小伙伴后台跟我说，临近毕业，写毕业论文需要上知网查找大量的文献，但是一篇一篇看文献信息以及文献摘要又有点麻烦，能不能让我写一个爬虫去批量获取文献相关信息我一听好家伙，当初我写毕业论文的时候也是饱经查阅文献的折磨，深知那种痛苦但是知网作为国内知名的文献数据库之一，有着极其复杂的反爬虫机制，例如动态JS、iframe、验证码等等，不是说想爬就
转载
2023-12-05 21:35:52
0阅读
1.在Word中安装插件 找到noteexpress的快捷方式，然后右键单击，选择【打开文件位置】，找到他的按章文件夹
1)urllib2+BeautifulSoup抓取Goolge搜索链接近期，参与的项目需要对Google搜索结果进行处理，之前学习了Python处理网页相关的工具。实际应用中，使用了urllib2和beautifulsoup来进行网页的抓取，但是在抓取google搜索结果的时候，发现如果是直接对google搜索结果页面的源代码进行处理，会得到很多“脏”链接。看下图为搜索“titanic james
转载
2024-01-12 00:44:09
27阅读
八月已经过了一半，答辩完之后，sci小论文也刚写完，今天难得休息。今天就来填上个月的坑，power bi做文献爬虫。这里先解释一下原理，首先使用学术搜索引擎搜索关键词，然后翻页下载所有的标题，作者，出版年份，引用次数，最后将下载完的数据用powerquery清洗，powerpivot建模，powerview可视化。词云的制作使用的是powerbi的可视化插件完成的，非常简单。另外，为了从词云中剔除
文献检索（学术搜索）方式1：谷歌 要想能用骨骼通过修改系统C:\Windows\System32\drivers\etc\h*o*s*t*s(文件名应该去掉*，没办法)，覆盖现有h*o*s*t*s即可。批处理文件如下点击打开链接，具体操作内附操作方法，然后任意浏览器，通过台湾接口https://www.google.com.tw/和香港接口https://www
原创
2022-12-28 13:44:06
269阅读
文章目录一、软件下载二、NoteExpress的使用1、导入本地文献文件，并且更新题录2、设置word的插件3、在word中用NoteExpress导入文献 一、软件下载下载地址 此处本人选择的是个人版，似乎刚注册完有一个月的会员可以送二、NoteExpress的使用1、导入本地文献文件，并且更新题录1、新建数据库 2、然后右击题录，导入文件 3、导入文件后，选中所有文件，然后更新题录，更新有自
转载
2024-07-24 19:11:13
1143阅读
