bert 环境搭建之PytorchTransformer 安装
创始人
2024-04-16 18:22:37
0

这两天跑以前的bert项目发现突然跑不了,报错信息如下: 

Step1 transformer 安装

RuntimeError: Failed to import transformers.models.bert.modeling_bert because of the following error (look up to see its traceback):
module 'signal' has no attribute 'SIGKILL'

通过查找信息发现我的transformer 版本太高了 已经4.24了(前几天做了OpenAI的东西,结果把transformer升级了,所以每做一个项目,最好重新建立一个环境),

所以我想把transformer降到3.0。于是直接pip install transformer ==3.00,但是又失败了。失败信息如下:

error: can't find Rust compiler
      
    If you are using an outdated pip version, it is possible a prebuilt wheel is available for this package but pip is not able to install from it. Installing from the wheel would avoid the need for a Rust compiler.
简单看了一下就是没有Rust

所以,我又上官网安装了 Rust (安装 Rust - Rust 程序设计语言 (rust-lang.org)),以为这次肯定成功,然后又pip install transformer ==3.00,结果又报错:

this version of Cargo is older than the `2021` edition, and only supports `2。

到这里我想了一下,以前安装transformer 没有那么麻烦,至少肯定没有用到Rust, 所以我猜测我的python=3.9也是太高了,所以又重新建立python=3.7的环境。

直接pip install transformer ==3.00 终于成功了!

Step2 Pytorch 安装

理论上很简单直接,官方Start Locally | PyTorch

conda install pytorch torchvision torchaudio pytorch-cuda=11.6 -c pytorch -c nvidia

复制这段文字安装,但是发现实在太慢了,后来又用网上介绍的用清华镜像,但是这样安装速度也不是很快,而且下载Pytorch 没有GPU ,具体原因为啥不知道,理论上是可以的。

所以最后直接找到 https://download.pytorch.org/whl/torch/

下载了适合的版本,这样下载很快们都是10M/S

 写这篇文章主要问题就是记住这个下载的网址

相关内容

热门资讯

《山东省医疗纠纷预防和处理办法... 近日,山东省政府网站发布《山东省医疗纠纷预防和处理办法》(以下简称《办法》),依法高效预防和处理医疗...
国常会审议通过《供水条例(草案... 李强主持召开国务院常务会议,审议通过《供水条例(草案)》和《中华人民共和国药品管理法实施条例(修订草...
四川路桥:严格执行国家法律法规... 有投资者在互动平台向四川路桥提问:“请问公司是否针对员工生育或育儿设有相关的福利或激励政策?如有,什...
李强主持召开国务院常务会议,审... 据央视新闻,李强主持召开国务院常务会议,审议通过《供水条例(草案)》和《中华人民共和国药品管理法实施...
《济南市城市更新条例》2026... 大众网记者 刘帅 济南报道 城市更新,是城市高质量发展的“必答题”,更是关乎民生福祉的“民生卷”。 ...
证监会:着力健全REITs信息... 证监会印发《关于推动不动产投资信托基金(REITs)市场高质量发展有关工作的通知》。其中提到,维护市...
追踪报道——“去哪儿网”总部在... 来源:大众日报 在去哪儿网购买的机票却在航司官网查不到,用户向平台注册地北京当地法院起诉却被驳回,按...
思创医惠最新公告:收到杭州市公... 思创医惠(300078.SZ)公告称,公司收到杭州市公安局出具的《移送审查起诉告知书》,公司等涉嫌欺...
2025年A股IPO律师事务所... 文/瑞财经 刘治颖 2025年A股IPO市场收官,全年格局正式落定。 最新数据统计显示,截至12月3...