是念的博客_ubuntu,python,mysql

Python去除中文文本中的特殊字符

【代码】Python去除文本中的特殊字符。

python

开发语言

细粒度

模态

相似度

原创 8月前 70 阅读

Python调用文心一言的API

然后就可以开开心心的使用文心一言的API了。

python

文心一言

人工智能

参考文献

paddle

原创 10月前 343 阅读

anaconda安装python 3.11

【代码】anaconda安装python 3.11。

1024程序员节

python

sqlite

linux

原创 10月前 418 阅读

[Paddle-pipelines] AttributeError: partially initialized module ‘charset_normalizer‘

我分析了一下是pdfminer引起的，可能是安装的版本的包的问题。

paddle

解决方法

microsoft

github

原创 10月前 1216 阅读

[Mac] 安装paddle-pipelines出现 ERROR: Failed building wheel for lmdb

【代码】[Mac] 安装paddle-pipelines出现 ERROR: Failed building wheel for lmdb。

macos

paddle

Developer

解决方法

xcode

原创 10月前 196 阅读

[elasticsearch]使用postman来查询数据

最近需要debug程序，debug的时候需要查找elasticsearch里面的数据是否正确。第一步建立一个post请求，并按照图下的方式填上ur和

elasticsearch

postman

lua

用户名

post请求

原创 10月前 87 阅读

【mteb[beir]】Fetching trec_eval from https://github.com/usnistgov/trec_eval/archive/v9.0.8.tar.gz.

我发现我使用的是百度源来安装的，大概是百度源的问题。

mteb

beir

百度

python

github

原创 10月前 150 阅读

[DeepSpeed]RuntimeError: output tensor must have the same type as input tensor

最近在跑chatglm2的sft的时候出现了下面的错误，我的运行方式是bf16, deepspeed zero3，因为担心fp16会有很多的nan.

deepspeed

python

解决方法

运行方式

原创 10月前 398 阅读

[peft]ImportError: cannot import name ‘is_npu_available‘ from ‘accelerate.utils‘

卸载后重新安装就可以了。

python

llm

git

解决方法

重新安装

原创 10月前 475 阅读

[Spacy]No matching distribution found for spacy-pkuseg＜0.1.0,＞=0.0.27

【代码】[Spacy]No matching distribution found for spacy-pkuseg＜0.1.0,＞=0.0.27。

spacy

python

解决方法

参考文献

原创 11月前 170 阅读

Python统计多个文件夹的文件的数目

【代码】Python统计多个文件夹的文件的数目。

python

linux

原创 2023-09-08 10:37:52 74 阅读

python的tril，pad，block_diag在LLM上的使用

我发现LLM的输入里面atte

python

开发语言

人工智能

ci

二维

原创 2023-07-29 16:29:06 137 阅读

python sum拼接list

【代码】python sum拼接list。

python

list

原创 2023-07-23 00:13:31 84 阅读

[leetcode] 518. 零钱兑换ii

目标数为背包容量，硬币数值代表物品容量，但是这里求的是方法数，并不

leetcode

算法

职场和发展

背包问题

带符号

原创 2023-07-22 08:02:09 49 阅读

[git][remote rejected] ben1 -＞ ben1 (permission denied)

我猜想是因为没有输入用户名和密码的缘故。

git

github

用户名

原创 2023-07-01 09:40:28 39 阅读

[torch] torch profiler使用示例

我给的示例是chatglm的，有需要的可以换成其他的模型，原理是一样的。

pytorch

人工智能

python

CUDA

示例代码

原创 2023-06-24 00:34:13 526 阅读

[transformers]在trainer中使用torch.profiler.profile

今天需要在transformers的trainer的API中使用profile，然后分析模型的性能，但是trainer的封装度比较高，不太好修改，其实可以使用callback的方式完成profile的性能监控。

pytorch

深度学习

人工智能

实例化

CUDA

原创 2023-06-24 00:34:08 446 阅读

【正则表达式】正则表达式符号.*? 非贪婪，遇到开始字符和结束字符就进行截取

【代码】【正则表达式】正则表达式符号.*?非贪婪，遇到开始字符和结束字符就进行截取。

正则表达式

bc

字符串

原创 2023-06-10 05:21:24 131 阅读

[anaconda] CondaValueError: prefix already exists

直接手动删除后，重新创建.

python

开发语言

虚拟环境

解决方法

原创 2023-06-03 00:51:07 456 阅读

[PaddlePaddle]HuggingFace上的Pytorch模型转PaddlePaddle模型示例

最近需要把HuggingFace上的Pytorch模型转换成Paddle的模型，总体思路是，只需要做一些小的映射就行了。下面我提供一个通用的示例，方便大家平时自己转模型和代码，主要思路就是对其中的Linear进行转置就可以了。有的人会说模型的代码需要怎么变呢？其实只需要把Torch对应的API替换成PaddlePaddle的API就行了，不用做过多的改变，注意一些写法

pytorch

paddlepaddle

深度学习

paddle

API

原创 2023-05-28 00:45:58 810 阅读

[Paddle-Pipelines] TypeError: issubclass() arg 1 must be a class

我的Python版本是3.8.16，其他的就没有什么特别的了，Google了好久才知道原来是版本的问题。

paddle

python

开发语言

bc

Google

原创 2023-05-28 00:45:47 519 阅读

[paddlenlp] 基于ernie 3.0的静态图导出

最近需要导出ernie 3.0的静态图，所以写了一个导出的示例，分享出来，方便大家来参

python

开发语言

nlp

paddle

github

原创 2023-04-29 06:07:22 321 阅读

[scikit-learn]ImportError: dlopen: cannot load any more object with static TLS

【代码】[scikit-learn]ImportError: dlopen: cannot load any more object with static TLS。

scikit-learn

python

机器学习

paddle

ci

原创 2023-04-22 07:30:08 739 阅读

ubuntu 18.04 SUMO的安装教程

然后就可以开开心心的跑DQN，PPO等程序了哈，是不是很简单。

ubuntu

linux

服务器

执行程序

python

原创 2023-04-08 09:15:21 562 阅读

[pytorch] Dataloader和Dataset的基本使用示例

数据的读取部分不太统一，所以需要靠大家自己来实现啦。

pytorch

python

人工智能

数据

代码示例

原创 2023-04-08 09:12:53 88 阅读

[python]随机按照比例划分图像数据集为训练集和测试集

我的根目录是Images，其中TigerHead是类别名，下面的jpg是该目录的图片。

python

深度学习

机器学习

数据集

Image

原创 2023-04-01 07:29:22 459 阅读

[强化学习]Invalid MIT-MAGIC-COOKIE-1 keyFXApp::openDisplay: unable to open display :0.0

然后就很烦，我是用visual studio code远程连接，然后运行的，后面发现我没有开图形

ubuntu

linux

git

ci

图形化界面

原创 2023-04-01 07:29:16 276 阅读

[paddlenlp] typeerror: type tuple cannot be instantiated； use tuple() instead

具体原因未知，所以导入paddlenlp的包的时候，不建议用*进行全部导入。

python

机器学习

开发语言

paddle

解决方法

原创 2023-03-25 12:14:39 188 阅读

[Gradio] 更新Dropdown里面的默认值

最近需要用到Gradio的dropdown的控件，但是里面的默认值需要随着

vue.js

前端

javascript

默认值

控件

原创 2023-03-25 12:14:34 1297 阅读

[scikit-learn]使用随机森林来识别恶意软件

【代码】[scikit-learn]使用随机森林来识别恶意软件。

scikit-learn

随机森林

python

git

Test

原创 2023-03-20 10:17:59 141 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客