51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

Python笔记

pip 安装

pip 安装

厉飞雨 阅读(350) 评论(0) 赞(16)

pip: command not found ### python 2.7 wget https://bootstrap.pypa.io/pip/2.7/get-pip.py ### python3 wget https://bootstrap.pypa.io/get-pip.py 安装pip python get-pip.py ![](...

pip 相关

pip 相关

厉飞雨 阅读(221) 评论(0) 赞(15)

永久更换源 ```text pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple ``` Writing to C:\\Users\\71574\\AppData\\Roaming\\pip\\pip.ini ![](http://static.51tbox.com/st...

Tokenization Pipeline

Tokenization Pipeline

厉飞雨 阅读(259) 评论(0) 赞(17)

我们在使用 transformers 时,需要使用自己的数据来构建 tokenizer。这里我们使用 tokenizer 库,该库可以帮我们更加轻松的构建不同类型的 Tokenizer。安装命令如下: ``` pip install tokenizer ``` 训练一个分词器,我们需要经过以下几个步骤的工作: 1. normalization 2. pre-tokeniz...

Using Transformers – pipeline

Using Transformers – pipeline

厉飞雨 阅读(346) 评论(0) 赞(23)

Transformer 通常有数树百万、甚至数百亿的参数,训练和部署这些模型是一项复杂的工作。此外,由于几乎每天都会发布新模型并且每个模型都有自己的实现,使用它们并不是一件容易的事。Transformers 库提供了简单、统一的接口来加载、训练、保存这些模型。Transfomers 库支持 tensorflow 和 pytorch 两种深度学习框架。 1. pipline...

Anaconda以及Pip配置清华镜像源

Anaconda以及Pip配置清华镜像源

厉飞雨 阅读(398) 评论(0) 赞(20)

<p>Anaconda是一个开源的Python发行版本,用来管理Python相关的包。</p> <p>最近换了新电脑,在使用Anaconda安装Python包时,系统会自动从默认源下载安装包,但是由于网络访问限制或网络连接速度较慢等原因,会导致安装失败或安装速度较慢。</p> <p>因此,为了提高安装速度和稳定性,一些...

pip 常用命令与国内源配置

pip 常用命令与国内源配置

厉飞雨 阅读(428) 评论(0) 赞(17)

> pip默认源存在速度慢的问题,本文介绍pip命令添加国内源的方法。 ### pip常用命令 {#pip常用命令} #### 安装包 {#安装包} #### 更新包 {#更新包} #### 卸载包 {#卸载包} #### 列出已安装软件 {#列出已安装软件} #### 某个包详细信息 {#某个包详细信息} ### 国内源配置 {#国内源配置} #### ...