Как загрузить файл с веб-сервера в Python 3

Введение

Загрузка файлов с веб-сервера — обычная задача во многих программах проекты. Python предоставляет несколько библиотек для упрощения этого процесса, упрощая загрузку файлов по указанным URL-адресам.

Загрузка файла с помощью urlretrieve

import urllib.request

url = "http://example.com/file.jar"
urllib.request.urlretrieve(url, "file.jar")

Этот код использует функцию urlretieve для загрузки файла по URL-адресу и сохранения его локально как file.jar.

Загрузка файла для потоковой передачи

import urllib.request
import shutil

url = "http://example.com/file.jar"

with urllib.request.urlopen(url) as response, open("file.jar", "wb") as out_file:
    shutil.copyfileobj(response, out_file)

Этот код открывает файлоподобный объект с помощью функции urlopen и копирует содержимое в локальный файл с помощью Shutil.copyfileobj. Этот метод позволяет передавать большие файлы без сохранения всего файла в памяти.

Обработка сжатых файлов

import urllib.request
import gzip

url = "http://example.com/file.gz"

with urllib.request.urlopen(url) as response:
    with gzip.GzipFile(fileobj=response) as uncompressed:
        data = uncompressed.read()

Этот код открывает сжатый файл как файлоподобный объект с помощью класса gzip.GzipFile и считывает распакованные данные в переменную.