💻
QMMMS的笔记
博客
  • QMMMS的笔记
  • agent
    • MCP的背景、原理和开发
    • Agent 历史与背景
    • Agentic Workflows
    • 环境检查与基础工具
    • Tool Call
    • 工具与运行时的值
    • temp
    • 处理 Tool Call error
    • trick
  • algorithm
    • 线性结构
    • 二叉树
    • 图
    • 查找
    • 排序
    • 动态规划
    • 优化方法
    • 数学
    • 迁移至Java
  • computer_composition
    • 系统总线
    • 存储器
    • 输入输出系统
    • 计算机的运算方法
    • 指令系统
    • 补充
  • computer_network
    • 引入
    • 应用层
    • 传输层
    • 网络层(数据平面)
    • 网络层(控制平面)
    • 链路层
    • 常见问答
    • 实验
  • database
    • SQL实战
    • 关系代数
    • 数据库设计
    • 规范化
    • 数据库基本概念
    • 查询原理
    • 数据库恢复技术
    • 并发控制
  • dev_tools
    • Git
    • Nginx
    • Spring
    • LangChain
    • PyTorch Cheat Sheet
    • MyBatis
    • MySQL Cheat Sheet
    • MySQL 补充
    • Redis
    • Docker
    • RocketMQ
    • Chrome
  • linux
    • Linux基础命令与使用
    • 文件与权限
    • 文件与目录操作
    • 权限属性高级
    • 命令与文件的查找
    • 文件压缩和打包
    • vim编辑器
    • shell变量
    • 命令补充
    • 数据流重定向
    • 管道命令
    • shell脚本
    • 用户管理
    • 用户间交流
    • 计划任务
    • 进程管理
    • 软件管理
    • 认识系统服务
    • 运维常用命令
    • 常用命令
  • llm
    • 大规模语言模型概述
    • 分布式训练概述
    • 有监督微调概述
    • 强化学习与LLM
    • LLM评估概述
    • 大模型应用
    • 理解大模型
    • 量化
    • 预训练
    • 上下文学习
  • machine_learning
    • 引入
    • 大致正确学习
    • 一致收敛
    • 偏差还是过拟合?
    • 可学习的充要条件
    • 非均匀可学习性
    • 计算复杂性
  • mathematics
    • 概率与统计基础
    • 线性代数基础
  • operating_system
    • 操作系统基本概念
    • 进程和线程
    • 同步,互斥与死锁
    • 内存管理
    • 文件系统
    • I/O系统
    • 保护与安全
    • 《现代操作系统》
  • statistical_learning
    • 统计学习引入
    • 线性回归
    • 分类
    • 重抽样方法
    • 线性模型选择与正则化
    • 非线性模型
    • 基于树的方法
    • 支持向量机
    • 无指导学习
    • 马尔科夫链和蒙托卡罗方法简明理解
    • R语言速查
  • deep_learning
    • basic_concepts
      • 逻辑回归与损失函数
      • 神经网络
      • 正则化、预处理、权重初始化
      • 优化算法
      • 机器学习策略
      • 复习:从计算机视觉的角度
      • 卷积神经网络
      • 深度卷积网络示例
      • 计算机视觉任务
      • 循环神经网络
      • 自然语言处理任务
      • 注意力
      • Transformers 家族
      • 显卡扫盲
      • 强化学习概述
    • semi-supervise
      • 半监督学习简介
      • Consistency Regularization
      • Proxy-label Methods
      • Holistic Methods
      • Generative Models
      • Graph-Based SSL
      • Self-Supervision for SSL
      • Other SSL methods
  • programming
    • cpp
      • STL
      • C++基础
      • 内存管理
      • 面向对象
    • java
      • 环境和介绍
      • 注释
      • String
      • 面向对象思想
      • Object
      • 包
      • 访问权限修饰符
      • 初始化块
      • 接口
      • 内部类
      • 注解
      • 枚举
      • 集合框架
      • List
      • Map
      • 泛型
      • 迭代
      • IO与流
      • 序列化
      • 异常
      • Lambda
      • Stream流
      • Socket
      • 缓冲
      • 命名规范
      • 拆箱装箱
      • 值传递
      • 深拷贝
      • 反射
      • JVM
      • 并发编程基础
    • python
      • 并发编程
      • 环境管理
  • software_engineering
    • basic_concepts
      • 系统分析与设计概述
      • 规划
      • 需求分析与原型设计
      • 项目管理
      • 建模
      • 数据库设计
      • 架构
      • 配置管理
      • 测试管理
      • 安全
      • 编码原则
      • 微服务
      • 补充内容
    • software_testing
      • CMMI基础
      • PPQA与SQA
      • 软件测试基础
      • 黑盒测试
      • 白盒测试
      • 集成测试
      • 系统测试
      • 测开面试补充
由 GitBook 提供支持
在本页
  • 下载网络文件
  • curl
  • nohup
  • Anaconda
  • ssh
  • 服务器信息
  • 其他
在GitHub上编辑
  1. linux

常用命令

下载网络文件

wget是linux下一个从网络上自动下载文件的常用自由工具。它支持HTTP,HTTPS和FTP协议,可以使用HTTP代理。一般的使用方法例如:

wget http://www.linuxsense.org/xxxx/xxx.tar.gz

-c参数, 这个也非常常见, 可以断点续传, 如果不小心终止了, 可以继续使用命令接着下载,例如:

wget -c http://www.linuxsense.org/xxxx/xxx.tar.gz

-P:保存文件之前先创建指定名称的目录。

wget -P /home/myfile  http://releases.ubuntu.com/18.04/ubuntu-18.04.5-desktop-amd64.iso

-O:下载并自定义文件名保存。

wget -O wordpress.zip http://www.centos.bz/download.php?id=1080 

-b:后台下载

wget -b http://releases.ubuntu.com/18.04/ubuntu-18.04.5-desktop-amd64.iso
Continuing in background, pid 1840. 
Output will be written to `wget-log’. 

可以使用以下命令来察看下载进度:

tail -f wget-log

curl

语法:curl [option] [url]

常见选项:

-b/--cookie <name=string/file>    	 cookie字符串或文件读取位置
-c/--cookie-jar <file>               操作结束后把cookie写入到这个文件中
-C/--continue-at <offset>            断点续转
-o/--output                          把输出写到该文件中
-O/--remote-name                     把输出写到该文件中,保留远程文件的文件名
-#/--progress-bar                    进度条显示当前的传送状态

使用示例:

curl http://www.baidu.com
curl -O http://www.baidu.com/hello.sh
curl -# -o baidu.html http://www.baidu.com
curl http://www.baidu.com -c cookie.txt
curl http://www.baidu.com -b cookie.txt

因为服务器没有可视化的浏览器界面,如果一些数据需要登录才能下载,会很麻烦。解决方法是在本地浏览器上把cookie找出来(Chrome浏览器按 F12 + 应用 + 存储 + cookie)。有的时候 cookie 很多需要清洗成固定的格式(key1=val1;key2=val2)可以自己写个小程序来清洗:

import os
with open('cookie1.txt', 'r', encoding='utf-8') as f:  # 待清洗
    with open('cookie.txt', 'w', encoding='utf-8') as f2:  # 清洗后
        for line in f:
            line = line.strip()
            parts = line.split()
            print(parts[0], parts[1])
            f2.write(parts[0] + '=' + parts[1] + ';')

然后使用 curl -b 选项在服务器上下载数据。

curl -b "。。。。。" -O https://physionet.org/content/mimiciii/1.4/ADMISSIONS.csv.gz -#

nohup

nohup 是一个在 Unix 和类 Unix 操作系统上用来忽略挂断信号,从而让程序在后台持续运行的命令。它的名称代表"no hang up"(不挂起)。

使用 nohup 的基本语法如下:

nohup command [arg ...] &

其中,command 是你要运行的命令,arg 是命令的参数。& 符号表示将命令放入后台执行。

例如,要在后台运行一个长时间执行的脚本文件 script.sh,你可以这样使用 nohup:

nohup ./script.sh &

这将使 script.sh 在后台运行,并且不受挂断信号的影响。执行后,nohup 会在当前目录下生成一个名为 nohup.out 的文件,用于存储命令的输出。

  • 查看上一个命令的进程号:echo $!

  • 查看后台运行程序:ps aux

Anaconda

Anaconda 是一个用于科学计算的 Python 发行版,支持 Linux, Mac, Windows, 包含了众多流行的科学计算、数据分析的 Python 包。

类似于Ubuntu是Linux的发行版,你基本不会直接去使用Linux,而是选择一个发行版,如Ubuntu/CentOS/RedHat/Debian等,因为发行版已经提供了基础的组件、库和应用,使用非常简单方便。

所以,想要学习Python的同学,不要再纠结python2/python3等种种版本了,也不要再纠结各种包的管理和代码移植性问题了。这些统统交给Anaconda。

Miniconda和Anaconda都是基于Conda的包管理器和环境管理系统,它们之间的主要区别在于规模和默认安装内容。

  • Miniconda是一个精简版的发行版,只包含了Conda和必要的系统依赖项。它的下载文件相对较小,安装后只有基本的功能,用户可以根据需要手动安装所需的软件包和工具。

  • Anaconda则是一个完整的发行版,除了Conda和系统依赖项外,还包括了大量的预安装软件包、库和工具,例如Python解释器、科学计算库(如NumPy、SciPy)、数据处理工具、图形界面等。Anaconda的下载文件较大,安装后直接获得了广泛使用的科学计算和数据分析所需的资源。

查看 conda 版本:conda --version

基本命令:

  • 根据requirements.txt 创建环境conda create --name <env> --file requirements.txt

  • 创建名字是MulEHR 的conda环境:conda create -n MulEHR python=3.8

  • 配置和初始化bash,通常在创建后,激活前完成,初始化要重新启动shellsource ~/.bashrc:conda init bash

  • 激活环境:conda activate MulEHR

  • 要退出当前环境:conda deactivate

  • 查看所有环境:conda env list

  • 复制环境:conda create --name myclone --clone myenv

  • 删除环境:conda env remove --name myenv

在较新版本的Conda中,source activate和conda activate两者实际上是等效的,都用于激活环境。source activate是在较早的Conda版本中使用的语法,而conda activate是在更新的版本中引入的新语法,目的是更加简洁和一致。因此,在使用最新版本的Conda时,建议使用conda activate命令。

如果 conda create 有http连接失败,修改~/.condarc,改为以下内容:

channels:
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/msys2/
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/pro/
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/r/
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
  - defaults
show_channel_urls: true

在使用conda环境时,通常情况下,使用pip安装的包会安装在当前活动的conda环境中,而不会影响其他环境。每个conda环境都有自己独立的包安装路径和环境变量,因此在一个环境中安装的包不会对其他环境产生影响。

ssh

ssh-keygen -t rsa -f ~/.ssh/yourname.id_rsa
vi ~/.ssh/config
cat /home/work/.ssh/yourname.id_rsa.pub

服务器信息

  • 版本:cat /etc/issue

  • gpu:nvidia-smi 、nvitop

  • cpu:cat /proc/cpuinfo | grep name | cut -f2 -d: |uniq -c

  • 内存:free -h

  • 磁盘:df -h

其他

  • 端口占用:netstat -tlnp|grep 端口号

  • 最近某条命令:history |tail -100|grep "git push"

  • 查看防火墙状态: systemctl status firewalld

  • 递归查找文件:find /path/to/search -name "filename"

  • 在文件夹内,在特定深度下,统计文件大小:du -h --max-depth=N 目录名称

上一页运维常用命令下一页llm

最后更新于2个月前

Anaconda 安装包下载地址:https://www.anaconda.com/download。

Linux安装conda命令