Huggingface
下载huggingface的文件
hf download xx/xx
从open-sora项目获得的经验
- For users from mainland China, try export HF_ENDPOINT=https://hf-mirror.com to successfully download the weights. (可以避免耗费VPN的流量额度,但是下载速度有点慢)
linux上使用export HF_ENDPOINT=https://hf-mirror.com
可以实现加速
方法二:开启官方加速库 hf_transfer
Hugging Face 官方提供了一个名为 hf_transfer
的库,它使用 Rust 编写,可以实现高速、并行的多线程下载,效果类似于 aria2
。镜像网站有限速
-
安装
hf_transfer
:pip install -U hf-transfer
- 开启加速功能: 通过设置另一个环境变量来启用它。
export HF_HUB_ENABLE_HF_TRANSFER=1
This line appears after every note.
Notes mentioning this note
Avs paper思路整理
基本构建思路:
多模型融合
模型种类
BLIP
CLIP
SLIP
LaCLIP (加强最后理解文字的表现能力)
BLIP2
Diffusion (在object上表现很好)
融合
相同模型的基础模型进行等权重融合,最后不同种类的模型按照给出的权重进行加权融合。
交互算法
Top-K
QRA算法
Diffusion扩散模型调研
在去年的TRECVID比赛中,我们使用的是2023年的stable-diffusion-v1-5。在实验中,感觉图片质量并不高,对于人物形状的处理还有待提升。于是萌发了调研最近新的可用模型的想法,供之后的实验使用。
Slrum使用
参考港科广HPC用户手册
分区名查看网站
申请卡之前最后使用screen和tmux等指令开启可恢复窗口,避免电脑断点无法连接
GPU占用率不满xx%超过9个小时会警告,每个月超过十个警告会停止用户使用权限。所以空闲或者睡觉的时候需要跑keepbusy.py占用
目前申请1卡大概等待5h