记一次Windows WSL入站规则失效处理办法

2024-12-23

事件描述：

Windows WSL2 网络采用mirrored模式，在防火墙中定义入站规则后发现仍无法访问wsl内的端口

解决办法

定义规则时，允许边缘遍历

展开全文 >>

保持WSL后台在线

2024-10-29

默认情况下，当你关闭最后一个wsl终端后，wsl会直接退出。如果有服务要在后台运行，可以采取以下方法：

编写vbs脚本”init.vbs”
1
2
set ws = CreateObject("WScript.Shell")
ws.Run "wsl -d Debian", 0
其中 Debian请替换为你所要运行的实例名称
执行vbs脚本

可以直接双击执行，或wscript init.vbs
如果想开机启动wsl，搜索“任务计划程序”，创建任务，安全选项为“不管用户是否登录都要运行”，触发器为“在系统启动时”，操作为“启动程序”，然后找到你刚刚编写的脚本添加为启动该程序。

注意：不要修改vbs脚本的默认打开方式，例如用记事本打开，这样会导致任务计划程序为“用记事本打开vbs脚本”，而不是执行该脚本

展开全文 >>

NVIDIA报错汇总

2024-03-12

An error occurred while performing the step: “Building kernel modules”

一般是gcc版本不对，最新显卡驱动（2024-03-12）需要的gcc版本是gcc-12而Ubuntu 22.04默认是gcc-11，需要手动安装gcc-12

1
2
3

sudo apt install gcc-12
rm /usr/bin/gcc
ln -s /usr/bin/gcc-12 /usr/bin/gcc

RuntimeError: CUDA unknown error - this may be due to an incorrectly set up environment, e.g. changing env variable CUDA_VISIBLE_DEVICES after program start. Setting the available devices to be zero.

具体表现为torch找不到某个device，解决方式：
首先上nvidia开发者官网找到和显卡驱动对应的modprobe包，安装

1 2	sudo dpkg -i nvidia-modprobe_xxx.xx.xx-0ubuntu1_amd64.deb sudo modprobe -r nvidia_uvm && sudo modprobe nvidia_uvm

展开全文 >>

在终端使用各种代理的方法

2024-03-11

将终端设置为使用代理的环境

1 2	export ALL_PROXY=http://127.0.0.1:7890 # Clash用这个 export ALL_PROXY=socks5h://127.0.0.1:10808 # v2ray用这个

取消代理

1	unset ALL_PROXY

使用脚本：

# proxy.sh
# 开启系统代理
function proxy_on() {
        export http_proxy=http://127.0.0.1:7890
        export https_proxy=http://127.0.0.1:7890
        export no_proxy=127.0.0.1,localhost
        export HTTP_PROXY=http://127.0.0.1:7890
        export HTTPS_PROXY=http://127.0.0.1:7890 
        export NO_PROXY=127.0.0.1,localhost
        echo -e "\033[32m[√] 已开启代理\033[0m"
}

# 关闭系统代理
function proxy_off(){
        unset http_proxy
        unset https_proxy
        unset no_proxy
        unset HTTP_PROXY
        unset HTTPS_PROXY
        unset NO_PROXY
        echo -e "\033[31m[×] 已关闭代理\033[0m"
}

apt使用代理

1 2	sudo apt -o Acquire::http::proxy="socks5h://127.0.0.1:10808/" upgrade # 临时版 sudo apt -o Acquire::https::proxy="http://127.0.0.1:7890/" update

pip使用代理

1	pip install --proxy=http://127.0.0.1:7890 somepackage # 使用http代理

若要使用socks5代理，则需要先安装PySocks模块，可以用whl下载解决下载链接

1 2	pip install PySocks-1.7.1-py3-none-any.whl pip install --proxy=socks5h://127.0.0.1:10808 somepackage

展开全文 >>

单行命令记录 (长期更新)

2024-01-22

1
2
3

ifconfig eno1 | awk '/inet / {print $2}' # 直接获取网络接口eno1的ip地址，可以用来写脚本

sed -i 's/[>=<=~!]=.*//' requirements.txt # 快速删除requirements.txt中的版本号

展开全文 >>

WebSSH部署

2024-01-17

部署

参考如下仓库
直接使用docker进行部署

1	docker run -d -p 5032:5032 --log-driver json-file --log-opt max-file=1 --log-opt max-size=100m --restart always --name webssh -e TZ=Asia/Shanghai -e savePass=true jrohy/webssh

使用

访问 http://hostip:5032 即可，其中hostip即为部署docker的服务器ip

在北航校外可以访问 https://d.buaa.edu.cn
然后在最上方的访问栏选择http并输入hostip:5032即可访问校内SSH资源，并且可以借此传输大文件，传输带宽能达到20MB/s, 远强于跳板机

展开全文 >>

Windows磁盘检查后found.xxx内.chk文件恢复

2023-10-19

最近经常遇到磁盘错误，需要利用Windows的磁盘修复，具体操作为：右键需要恢复的磁盘分区->工具->检查
检查完成后发现分区根目录下出现found.000、found.001等文件夹，内部为一堆.chk文件。
参考知乎文章可知利用MIME可以获取到文件类型，以此猜测扩展名即可
脚本如下：

# chk_restore.py
import magic
import mimetypes
import os
import glob
import sys
import shutil

source_path = sys.argv[1] 
target_path = sys.argv[2]

os.makedirs(target_path, exist_ok=True)

file_list = glob.glob(os.path.join(source_path, "*.chk"))
for f in file_list:
    f_mime = magic.from_file(f, mime=True) # 获取MIME
    ext_name = mimetypes.guess_extension(f_mime) # 根据MIME猜测扩展名
    _, full_name = os.path.split(f)
    f_name, _ = os.path.splitext(full_name)
    rec_file = os.path.join(target_path, f_name+ext_name)
    print(rec_file)
    shutil.copyfile(f, rec_file)

用法：

1
2
3

pip install python-magic # For Linux
pip install python-magic-bin # For Windows
python chk_restore.py $source_path $target_path # 填入源文件夹和恢复文件夹即可

展开全文 >>

使用SSHFS挂载网络硬盘

2023-05-18

简介

SSHFS（SSH Filesystem）是一个基于FUSE的文件系统客户端，用于通过SSH连接远程目录。SSHFS使用的是SFTP协议，它是SSH的一个子系统，在大多数SSH服务器上默认启用

与其他网络文件系统（如NFS和Samba）相比，SSHFS的优势在于它不需要在服务器端进行任何额外的配置。要使用SSHFS，您只需要具有SSH访问远程服务器的权限。

使用网络文件分享，主要优势是在网速够快的情况下可以多台服务器共用一份数据，省去不同服务器之间传输的麻烦，也节省硬盘空间

安装

服务器端

无需任何额外配置，只需要安装好OpenSSH服务器即可

Ubuntu：

1	sudo apt install openssh-server # 系统管理员配置，普通用户无需配置

Windows 10/11：
Step1: 设置-应用-可选功能-添加可选功能-搜索“OpenSSH服务器”并安装
Step2: Win+R 打开运行窗口，输入services.msc 打开服务，找到”OpenSSH SSH Server”一项，打开并修改启动类型为“自动”

客户端

Ubuntu：

1	sudo apt install sshfs # 系统管理员配置，普通用户无需配置

Windows
安装三个软件：

sshfs-win：https://github.com/billziss-gh/sshfs-win/releases
winfsp：https://github.com/billziss-gh/winfsp/releases
SSHFS-Win Manager：https://github.com/evsar3/sshfs-win-manager/releases (GUI，可选)

使用

Ubuntu：
连接方法与scp的用法类似假设远程服务器为 usr@remoteip 端口为port，要挂载的路径为/home/usr/share，本地装载路径为/mnt/remote1(需要为空文件夹)

1	sshfs -p port usr@remoteip:/home/usr/share /mnt/remote1

注：如果Windows作为服务器，文件分享给Linux，其ssh的路径输入方法为把反斜杠改成但正斜杠，如果有空格或中文，可以给路径加上引号，如：

1	sshfs usr@remoteip:"C:/Users/user/远程分享" /mnt/remote1 #scp同理

此外也可以直接利用OpenSSH-config文件，使用代号以及免密登录，参见博客

取消连接：

1	fusermount -uz /mnt/remote1

Windows:
建议直接使用GUI界面打开SSHFS-Win Manager 配置SSH连接即可，参见博客

使用实例

可以直接服务器间共享数据集、代码等（互联带宽为10G的可以分享数据集，1G的建议只分享代码）

例如40901服务器和40902服务器之间，假设40901存放数据目录为/mnt/ssd0/dyf，有./code和./dataset两个文件夹，40902的目标目录为/home/dyf可以编写脚本在40902机器上执行：

1
2
3

#!/bin/bash
sshfs dyf@40901.buaamc2.net:/mnt/ssd0/dyf/code /home/dyf/code
sshfs dyf@40901.buaamc2.net:/mnt/ssd0/dyf/dataset /home/dyf/dataset

之后只要安装conda环境即可运行代码

展开全文 >>

ssh代理上网

2022-11-15

通过ssh -D命令建立socks5代理上网

本方法适用于机器可以连接内网，无法连接外网，但内网中有其他机器可以上外网的情况

step1: 建立ssh socks5代理

在上不了网的内网机器上输入如下命令，以1080端口为例，若已经被占用，可自行修改

1	ssh -ND localhost:1080 usr@serverip -p 22

参数解释：-N为后台运行， -D为建立socks5代理的关键命令 localhost:1080是本机以及需要监听代理的端口，usr@serverip -p 22即为能上网的机器及其ssh服务的端口，建议使用ip登录不要用域名，因为可能访问不了DNS服务器

step2：使用socks5代理上网

1. python使用socks5
首先在pypi上下载pysocks包，然后用pip进行安装
2. 使用socks5代理上网
以pip安装为例，安装pysocks后可以用–proxy参数进行代理上网

1	pip install numpy --proxy="socks5://127.0.0.1:1080"

命令行整体代理：

1	export ALL_PROXY=socks5://127.0.0.1:1080

有关更多其他应用使用socks5代理的方法，请自行搜索。部分命令不支持使用export命令走命令行全局代理，需要自行配置
温馨提示：wget使用socks5代理较为复杂，建议使用curl命令下载文件

PS. MC-2实验室2080服务器无法上网原因
本质原因是无线网卡被错误启动，需要禁用掉无线网卡，但无线网卡会自动重启，在服务器重启前没有找到可行方案，可以通过如下方式解决

1. 无法登录：解决方案是配置跳板机，使用207机房的其他机器如30901，30902，207，401跳转登录
2. 无法上网：先切换管理员账号禁用掉无线网卡sudo ifconfig wlp5s0 down，然后按照上面的步骤配置socks5代理，若发现网卡重新唤醒，继续禁用

展开全文 >>

Linux创建新用户

2022-10-15

1
2
3

useradd -d /home/yourname -m yourname #添加用户，指定家目录
passwd yourname	#设置密码
usermod -s /bin/bash yourname #设置bash为默认shell

若需要sudo权限

1
2
3

usermod -a -G sudo yourname	#添加用户组到sudo
usermod -a -G adm yourname	#添加用户组到admin
id yourname	#查看用户信息(id,用户组等)

若硬盘空间不够，可参考以下移动用户文件夹

mv /home/yourname /media/data/ #迁移用户文件夹
ln -s /media/data/yourname /home/yourname	#创建软链接
chown -R yourname:yourname /media/data/yourname	#授予访问目录权限
chmod 760 /media/data/yourname	#给该目录设权限

现建议直接把用户路径建立在硬盘下面，而非/home下

1	useradd -d /media/data/yourname -m yourname

快速添加用户脚本

#!/bin/bash
name=$1
pswd=$2
useradd -d "/home/$name" -m $name   # 可把/home/改成要建立账户的硬盘路径
usermod -s /bin/bash $name
echo -e "$pswd\n$pswd" | passwd $name

展开全文 >>