按照地址列表批量下载文件

时间: 2023-08-27 15:03:51 浏览: 37
好的,您可以使用 Python 的 requests 库来实现下载功能。以下是一个简单的示例代码: ```python import requests # 读取地址列表文件 with open('url_list.txt', 'r') as f: url_list = f.readlines() # 遍历地址列表并下载文件 for url in url_list: url = url.strip() # 去除字符串两端的空格和换行符 filename = url.split('/')[-1] # 提取文件名 try: # 发送 GET 请求并下载文件 response = requests.get(url) with open(filename, 'wb') as f: f.write(response.content) print(f'{filename} 下载完成') except requests.exceptions.RequestException as e: print(f'{filename} 下载失败:{e}') ``` 您只需要将地址列表保存到 `url_list.txt` 文件中,并将文件保存到与 Python 脚本相同的目录下,然后运行以上代码即可。需要注意的是,该示例代码只适用于下载小文件,如果需要下载大文件,建议使用 `stream` 方式下载,并分块写入文件,以避免内存占用过大。
相关问题

python批量通过aria2下载列表文件

你可以使用 `aria2p` 库来编写 Python 脚本批量下载 aria2 列表文件中的所有资源。以下是一个简单的示例代码: ```python import aria2p # 创建 Aria2RPC 对象 client = aria2p.Client(aria2p.APIOptions( host='<你的 aria2 服务器地址>', port=<aria2 服务器端口号>, secret='<你的 aria2 RPC 密钥>' )) # 读取 aria2 列表文件 with open('<aria2 列表文件路径>', 'r') as f: lines = f.readlines() # 批量添加下载任务 for line in lines: url = line.strip() if url.startswith('#') or not url: continue download = client.add(url) print('添加下载任务:', download.gid) # 等待所有下载任务完成 for download in client.get_downloads(): download.wait(10) print('下载任务完成:', download.gid) ``` 在代码中,我们首先通过 `aria2p` 库创建了一个 `Aria2RPC` 客户端对象 `client`,并传入了 aria2 服务器的地址、端口号和 RPC 密钥等参数。接着,我们读取了指定的 aria2 列表文件,并逐行解析其中的 URL,通过 `client.add()` 方法将其添加到下载队列中。最后,我们遍历所有下载任务,等待其完成,并输出下载任务的 gid。 你只需要将代码中的 `<你的 aria2 服务器地址>`、`<aria2 服务器端口号>`、`<你的 aria2 RPC 密钥>`、`<aria2 列表文件路径>` 替换成你自己的参数,并运行 Python 脚本即可。注意,为了让代码更加健壮,你可以在添加任务时对 URL 进行一些基本的校验,比如忽略以 `#` 开头的注释行和空行等。

python批量通过aria2下载列表文件 并保存到指定地址

要将下载的文件保存到指定地址,可以在添加下载任务时指定 `dir` 参数,即下载保存的目录。 以下是修改后的代码示例: ```python import os import aria2p # 创建 Aria2RPC 对象 client = aria2p.Client(aria2p.APIOptions( host='<你的 aria2 服务器地址>', port=<aria2 服务器端口号>, secret='<你的 aria2 RPC 密钥>' )) # 读取 aria2 列表文件 with open('<aria2 列表文件路径>', 'r') as f: lines = f.readlines() # 批量添加下载任务 for line in lines: url = line.strip() if url.startswith('#') or not url: continue filename = os.path.basename(url) download = client.add(url, {'dir': '<下载保存的目录>'}) print('添加下载任务:', download.gid, filename) # 等待所有下载任务完成 for download in client.get_downloads(): download.wait(10) print('下载任务完成:', download.gid) ``` 在代码中,我们在添加下载任务时,指定了 `dir` 参数,该参数指定下载保存的目录。你只需要将 `<下载保存的目录>` 替换成你自己想要保存的目录,即可将下载的文件保存到指定的目录中。 此外,我们还获取了 URL 中的文件名,并在输出时一同输出,以便于查看下载进度。

相关推荐

最新推荐

recommend-type

ssh(structs,spring,hibernate)框架中的上传下载

节下载文件部分。  2、业务层接口实现类  FileService的实现类为FileServiceImpl,其中save(FileActionForm fileForm)的实现如下所示:  代码 8 业务接口实现类之save() 1. … 2. public class FileServiceImpl 3...
recommend-type

iceberg-flink-runtime-1.15-1.1.0.jar

iceberg-flink-runtime-1.15-1.1.0.jar
recommend-type

2024-2030中国PID光致电离传感器与探测器市场现状研究分析与发展前景预测报告 Sample.pdf

QYResearch是全球知名的大型咨询公司,行业涵盖各高科技行业产业链细分市场,横跨如半导体产业链(半导体设备及零部件、半导体材料、集成电路、制造、封测、分立器件、传感器、光电器件)、光伏产业链(设备、硅料/硅片、电池片、组件、辅料支架、逆变器、电站终端)、新能源汽车产业链(动力电池及材料、电驱电控、汽车半导体/电子、整车、充电桩)、通信产业链(通信系统设备、终端设备、电子元器件、射频前端、光模块、4G/5G/6G、宽带、IoT、数字经济、AI)、先进材料产业链(金属材料、高分子材料、陶瓷材料、纳米材料等)、机械制造产业链(数控机床、工程机械、电气机械、3C自动化、工业机器人、激光、工控、无人机)、食品药品、医疗器械、农业等。 邮箱:market@qyresearch.com
recommend-type

zigbee-cluster-library-specification

最新的zigbee-cluster-library-specification说明文档。
recommend-type

管理建模和仿真的文件

管理Boualem Benatallah引用此版本:布阿利姆·贝纳塔拉。管理建模和仿真。约瑟夫-傅立叶大学-格勒诺布尔第一大学,1996年。法语。NNT:电话:00345357HAL ID:电话:00345357https://theses.hal.science/tel-003453572008年12月9日提交HAL是一个多学科的开放存取档案馆,用于存放和传播科学研究论文,无论它们是否被公开。论文可以来自法国或国外的教学和研究机构,也可以来自公共或私人研究中心。L’archive ouverte pluridisciplinaire
recommend-type

MATLAB遗传算法自动优化指南:解放算法调优,提升效率

![MATLAB遗传算法自动优化指南:解放算法调优,提升效率](https://help-static-aliyun-doc.aliyuncs.com/assets/img/zh-CN/8487939061/p208348.png) # 1. MATLAB遗传算法概述** 遗传算法是一种受生物进化启发的优化算法,它模拟了自然选择和遗传的过程。在MATLAB中,遗传算法工具箱提供了丰富的函数和类,用于创建和运行遗传算法。 **1.1 遗传算法的基本原理** 遗传算法的工作原理如下: - **初始化:**创建由随机个体组成的初始种群。 - **评估:**根据目标函数计算每个个体的适应度。 -
recommend-type

failed to register layer: ApplyLayer exit status 1 stdout: stderr: archive/tar: invalid tar header

很抱歉听到这个问题。这个错误通常是由于Docker镜像损坏或Docker存储库中缺少所需的图层引起的。您可以尝试以下几种方法来解决这个问题: 1. 清理Docker镜像和容器:使用命令“docker system prune”清理不再使用的Docker对象。 2. 检查Docker存储库:确保您正在使用可靠的Docker存储库,并检查是否存在所有必需的图层。 3. 重新下载Docker镜像:如果您确定问题是由于损坏的Docker镜像引起的,则可以尝试重新下载Docker镜像。 4. 更新Docker版本:如果您使用的是旧版Docker,则可能会出现此问题。尝试更新到最新版本的Docke
recommend-type

JSBSim Reference Manual

JSBSim参考手册,其中包含JSBSim简介,JSBSim配置文件xml的编写语法,编程手册以及一些应用实例等。其中有部分内容还没有写完,估计有生之年很难看到完整版了,但是内容还是很有参考价值的。
recommend-type

"互动学习:行动中的多样性与论文攻读经历"

多样性她- 事实上SCI NCES你的时间表ECOLEDO C Tora SC和NCESPOUR l’Ingén学习互动,互动学习以行动为中心的强化学习学会互动,互动学习,以行动为中心的强化学习计算机科学博士论文于2021年9月28日在Villeneuve d'Asq公开支持马修·瑟林评审团主席法布里斯·勒菲弗尔阿维尼翁大学教授论文指导奥利维尔·皮耶昆谷歌研究教授:智囊团论文联合主任菲利普·普雷教授,大学。里尔/CRISTAL/因里亚报告员奥利维耶·西格德索邦大学报告员卢多维奇·德诺耶教授,Facebook /索邦大学审查员越南圣迈IMT Atlantic高级讲师邀请弗洛里安·斯特鲁布博士,Deepmind对于那些及时看到自己错误的人...3谢谢你首先,我要感谢我的两位博士生导师Olivier和Philippe。奥利维尔,"站在巨人的肩膀上"这句话对你来说完全有意义了。从科学上讲,你知道在这篇论文的(许多)错误中,你是我可以依
recommend-type

MATLAB遗传算法大数据优化指南:应对海量数据挑战,挖掘数据价值

![MATLAB遗传算法大数据优化指南:应对海量数据挑战,挖掘数据价值](https://ask.qcloudimg.com/http-save/8934644/c34d493439acba451f8547f22d50e1b4.png) # 1. 遗传算法简介** 遗传算法(GA)是一种受进化论启发的优化算法,它模拟了生物体的自然选择和遗传过程。GA通过以下步骤迭代地搜索最优解: - **初始化:**随机生成一个种群,每个个体代表一个潜在的解决方案。 - **选择:**根据个体的适应度(目标函数值)选择适合繁殖的个体。 - **交叉:**将选定的个体配对并交换基因,产生新的个体。 - **