安装python torch、transformer、记录

阿里云国内75折 回扣 微信号:monov8
阿里云国际,腾讯云国际,低至75折。AWS 93折 免费开户实名账号 代冲值 优惠多多 微信号:monov8 飞机:@monov6

由于安装总是出现各种奇怪问题现总结帮助以后环境搭建

anaconda promt 命令框

国内常用镜像源

  • 清华大学 https://pypi.tuna.tsinghua.edu.cn/simple/
  • 阿里云http://mirrors.aliyun.com/pypi/simple/
  • 中国科学技术大学 http://pypi.mirrors.ustc.edu.cn/simple/
  • 华中科技大学http://pypi.hustunique.com/
  • 豆瓣源http://pypi.douban.com/simple/
  • 腾讯源http://mirrors.cloud.tencent.com/pypi/simple
  • 华为镜像源https://repo.huaweicloud.com/repository/pypi/simple/

在base中创建需要的环境

  • 创建需要的环境并指定需要的版本
    1. 查看环境目录conda env list
    2. 创建环境并指定python版本conda create --name peculiar python=3.6.9
    3. 激活环境conda activate peculiar
    4. 查看pip版本pip show pip 或者 conda list
      最好更新下pip版本避免出现问题: pip install --upgrade pip
    5. 安装pytorch: 参考链接
      个人觉得下载文件后安装也可以而且不容易出错
    6. 安装transformers
      如果使用 pip install transformers 安装出现问题如
        ERROR: Failed building wheel for tokenizers
      Failed to build tokenizers
      ERROR: Could not build wheels for tokenizers, which is required to install pyproject.toml-based projects
      
      解决方法:指定transformers版本
      一般用transformers版本3.4.0
      报错HuggingFace 报错 ImportError: cannot import name ‘HfApi‘
      命令行
      conda install -c huggingface transformers # 对于python 3.9.13版本
      pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ transformers==3.4.0  #可能出错
      
      测试transformers安装是否成功 python
      	from transformers import pipeline
      	print(pipeline('sentiment-analysis')('we love you'))
      	# 会有一个下载操作
      
  • tree-sitter安装
  • sklearn安装
    sklearn安装需要需要先安装
    • Numpy

    • Scipy

    • matpolotlib

      接着安装sklearn这里需要注意的是在Anaconda中sklearn叫做scikit-learn并且在安装scikit-learn前还需要安装其他一些依赖并且最好是按顺序下载
      conda install numpy
      conda install pandas
      conda install scipy
      conda install matplotlib
      conda install scikit-learn==0.20.0
      

阿里云国内75折 回扣 微信号:monov8
阿里云国际,腾讯云国际,低至75折。AWS 93折 免费开户实名账号 代冲值 优惠多多 微信号:monov8 飞机:@monov6
标签: python