scrapy+mongodb报错 TypeError: name must be an instance of str

原创

RoyFans 2022-08-23 16:44:24 博主文章分类：python ©著作权

©著作权归作者所有：来自51CTO博客作者RoyFans的原创作品，请联系作者获取转载授权，否则将追究法律责任

经过各种排查，最后找到原因，在settings文件中配置文件大小写写错了，在pipelines中

mongo_db=crawler.settings.get('MONGODB_DB'),
get 获取的是'MONGO_DB',而在settings 配置文件中我配置成 MONGODB_db,
最后修改成全部大写，问题解决。都是不小心惹的祸

上一篇：Python 爬虫的工具列表大全

下一篇：CentosYUM源报错 Invalid release/repo/arch combination

提问和评论都可以，用心的回复会被更多人看到评论

发布评论

相关文章

爬虫框架Scrapy

答案很简单，四步：新建项目 (Project)：新建一个新的爬虫项目明确目标（Items）：明确你想要抓取的目标制作爬虫（Spider）：制作爬虫开始爬取网页存储内容（Pipeline）：设计管道存储爬取内容好的，基本流程既然确定了，那接下来就一步一步的完成就可以了。1.新建项目（Project）在空目录下按住Shift键右击，选择“在此处打开命令窗口”，输入一下命令：其中，tutorial为项目

ide Shell Python
str() 和 int() 在 python 中是否耗时

Python 是一种通用的编程语言，它提供了各种数据类型来处理不同类型的数据。Python 中常用的两种数据类型是字符串（str）和整数（int）。但是，在性能方面，重要的是要考虑这些数据类型的时间消耗。选项 1：使用 timeit 模块Python 中的 timeit 模块允许我们测量小段 Python 代码的执行时间。我们可以使用这个模块来比较 str 和 int 操作的时间消耗。imp

字符串 Python Time
TypeError: Failed to fetch dynamically imported module

这个错误表明在尝试动态导入一个模块时发生了TypeError。具体来说，是因为浏览器无法获取到指定的模块文件。这可能是由于文件路径错误、服务器配置问题、网络问题或者模块不存在等原因造成的。解决方法：检查模块路径：确保你尝试动态导入的模块路径正确无误。在这个例子中，路径是/@/views/component/，确保这个路径在你的项目结构中是正确的，并且文件确实存在。服务器配置：如果你的项目在服务器上

服务器服务器配置缓存
报错解决——TypeError: LoadLibrary() argument 1 must be str, not None

在使用 pip install 的时候报错说TypeError: LoadLibrary() argument 1 must be str, not None 报错原因新的 Anaconda 增加了一个condabin 目录，是新增的依赖文件，需要将该目录加入到环境变量解决方法将 condab

环境变量解决方法
Python报错：TypeError: the JSON object must be str, bytes or bytearray, not ‘dict‘

当我尝试运行以下代码，来练习使用json.loads()和json.dumps（）函数时，系统给我报出了这个错误。import jsondata = {"a":1,"b":2,"c":3}j = json.loads(data)print(j)TypeError: the JSON object must be str, bytes or

json 字符串 json对象
使用conda报错TypeError: LoadLibrary() argument 1 must be str, not None

使用conda报错TypeError: LoadLibrary() argument 1 must be str, not None解决方法打开cmd输入conda.bat activate输入conda install requests成功

bug anaconda conda pip 解决方法
TypeError: the JSON object must be str, not 'TextIOWrapper'

我用的是python3,我的加载代码是:# 读取数据 with open('dict_author

json python 参考文献
python TypeError: list indices must be integers, not str

## 解决“python TypeError: list indices must be integers, not str”的步骤当我们在使用Python编程时，经常会遇到各种各样的错误。其中一个常见的错误是“TypeError: list indices must be integers, not str”。这个错误通常是由于我们错误地使用了字符串作为列表的索引引起的。在本文中，我将引导你

字符串 python Python
TypeError: tuple indices must be integers or slices, not str

TypeError: tuple indices must be integers or slices, not str

python 开发语言解决方法字符串元组
python TypeError: startswith first arg must be str or a tuple of str, not bytes

我使用创建了虚拟环境，安装依赖的时候会报错如下我的环境。

python 开发语言官网环境变量
Django报错TypeError join() argument must be str or bytes, not 'dict'如何解决？

Exception Value: join() argument must be str or bytes, not 'dict'

字段 django
python TypeError: list indices must be integers or slices, not str

# 解决“python TypeError: list indices must be integers or slices, not str”错误---## 介绍在Python中，当我们在访问列表或数组的元素时，如果使用了字符串作为索引，就会出现“TypeError: list indices must be integers or slices, not str”错误。这个错误的原

字符串数组数组元素
Python错误TypeError: write() argument must be str, not bytes

小记一下，今天使用open打开文件的时候出现了下面的错误。注：我用的是Python3.6.1版本。TypeError: write() argument must be str, not bytes网上搜索才发现原来是文件打开的方式有问题。之前文件打开的语句是：filehandle = open(WAV_FILE, 'w')然后使用二进制方式打开就没有这个问题：f...

python typeerror write() str not bytes
TypeError: sequence item 0: expected str instance, int found

背景：想要将一个纯数字的列表转换为一个数字字符串。''.join(nums)结果报错：TypeError: sequence item 0: expected str instance, int found才想起来，想要拼接的话得是字符串类型，转换一下。''.join(map(str, nums))...

字符串 IT
成功解决TypeError: tuple indices must be integers or slices, not str

成功解决TypeError: tuple indices must be integers or slices, not str目录解决问题解决思路解决方法解决问题TypeError: tuple indices must be integers or slices, not strfor row in cur: #每行规范输出 p...

解决方法元组字符串
解决TypeError: sequence item 0: expected str instance, int found

ist包含数字，不能直接转化成字符串。解决办法：print(" ".join('%s' %i for i in list1))即遍历list的元素，把他转化成字符串。这样就能成功输出1 2 3 1了。

python 字符串
Beautiful使用中TypeError: list indices must be integers or slices, not str

一个列表，需要先循...

取值全栈工程师 Python
[报错] TypeError: run() argument after * must be an iterable, not int

在使用多线程时，会调用多线程类中的run()函数，这个函数需要传入一个可迭代对象，当我们的参数只有一个整数时，单独的整数不可迭代，所以报错；

多线程迭代元组 iterable
docx2txt TypeError: write() argument must be str, not bytes

最近在做一个从doc文件中提取图片的实验，可是报了一个错误TypeError: w

python 图片格式 desktop
scrapy 导入mongodb 报错

## 如何使用Scrapy导入MongoDB### 介绍在这篇文章中，我将向你展示如何使用Scrapy将爬取的数据导入到MongoDB中。 Scrapy是一个强大的web爬虫框架，而MongoDB是一个流行的文档数据库。将这两者结合起来，可以帮助你高效地爬取和存储数据。### 流程图```mermaiderDiagram Scrapy ||--|| MongoDB : 导入

ide 数据数据导入
sqlserver java占位符查询慢

Python 是一种高级编程语言，它可以轻松地与各种数据库进行交互，其中包括 MySQL 数据库。MySQL 是一种开源的关系型数据库管理系统，被广泛应用于各种应用程序和网站的后端。在本文中，我将介绍如何使用 Python 操作 MySQL 数据库，并提供一些代码示例。安装 MySQL Connector在开始使用 Python 操作 MySQL 数据库之前，我们需要安装一个 Python MyS

数据库 mysql 学习小白学python MySQL
java JTable 监听表格变化

该文是我连接oracle的总结，特别适合于程序开发人员与oracle菜鸟如何配置才能使客户端连到数据库：要使一个客户端机器能连接oracle数据库，需要在客户端机器上安装oracle的客户端软件，一的例外就是java连接数据库的时候，可以用jdbc thin模式，不用装oracle的客户端软件。加入你在机器上装了oracle数据库，就不需要在单独在该机器上安装oracle客户端了，因为装oracl

java JTable 监听表格变化 java 验证tns name 客户端 oracle sql
android viewmodel使用livedatabus

架构库版本：1.0.0 Alpha 2 - June 2, 2017像Activity，Fragment这类应用组件都有自己的生命周期并且是被Android的Framework所管理的。Framework可能会根据用户的一些操作和设备的状态对Activity或者Fragment进行销毁和重构。作为开发者，这些行为我们是无法干预的。所以Activity或Fragment中的一些数据也会随着销毁而丢失

数据生命周期 UI
python函数放在什么位置

Python进阶(二)----函数参数,作用域一丶形参角度:*args,动态位置传参,**kwargs,动态关键字传参*args: 动态位置参数. 在函数定义时, * 将实参角度的位置参数聚合在一起解决实参传递多个位置参数,用*args全部接收,得到元组类型的数据#定义一个动态位置参数 def eat(*args): print(args) # 得到元组数据 prin

python函数放在什么位置 python 作用域名称空间内存地址
python 作业分配算法

学号:S201625005 姓名：梁勋联系电话：13126734215 运行环境：MacOS serria 10.12.4 Beta (16E163f) 程序语言：Python3 分析设计：有n份作业分配给n个人去完成，每人完成一份作业。假定第i个人完成第j份作业需要花费cij时间，cij>0,1≦i,j≦n。试设计一个回溯算法，将n份作业分配给n个人完成，使得总花费时间最少。

python 作业分配算法 python3 回朔法最优解初始化

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯