torch.cuda.OutOfMemoryError: CUDA out of memory. Tried to allocate 2.75 GiB (GPU 0; 22.38 GiB total capacity; 19.40 GiB already allocated; 2.23 GiB free; 19.43 GiB reserved in total by PyTorch) If reserved memory is >> allocated memory try setting max_split_size_mb to avoid fragmentation. See documentation for Memory Management and PYTORCH_CUDA_ALLOC_CONF 进程已结束,退出代码1

这个错误提示是因为你的程序尝试在GPU上分配2.75 GiB的内存，但是GPU上的内存已经被其他操作占用了大部分，导致内存不足。可以尝试以下方法来解决这个问题：

1. 减少模型的batch size或者降低模型大小，以减少内存占用量。
2. 使用更大的GPU，或者在多个GPU上并行训练模型。
3. 在训练时使用混合精度训练（mixed-precision training），可以减少内存占用。
4. 在PyTorch中设置max_split_size_mb参数，可以避免内存碎片化，从而减少内存占用。
5. 如果以上方法都无法解决问题，可以尝试使用更高效的算法或者优化模型结构来减少内存占用。