Gérer des fichiers volumineux à l'aide de PHP sans épuisement de la mémoire

La lecture et le traitement de fichiers volumineux en PHP peuvent être difficiles en raison des limitations de mémoire. La fonction file_get_contents() peut déclencher une erreur « Mémoire épuisée » lors du traitement de fichiers volumineux qui consomment plus de mémoire que ce qui est autorisé.

Comprendre l'allocation de mémoire

Lors de l'utilisation de file_get_contents( ), le fichier entier est lu et stocké sous forme de chaîne en mémoire. Pour les fichiers volumineux, cela peut dépasser la mémoire allouée et entraîner l'erreur.

Approche alternative : lecture de fichiers fragmentés

Pour éviter ce problème, envisagez d'utiliser des méthodes alternatives telles que comme fopen() et fread() pour lire le fichier en morceaux. Cela vous permet de traiter des sections plus petites du fichier à la fois, gérant ainsi efficacement l'utilisation de la mémoire. Voici une fonction qui implémente cette approche :

function file_get_contents_chunked($file, $chunk_size, $callback)
{
    try {
        $handle = fopen($file, "r");
        $i = 0;
        while (!feof($handle)) {
            call_user_func_array($callback, [fread($handle, $chunk_size), &$handle, $i]);
            $i  ;
        }
        fclose($handle);
        return true;
    } catch (Exception $e) {
        trigger_error("file_get_contents_chunked::" . $e->getMessage(), E_USER_NOTICE);
        return false;
    }
}

Exemple d'utilisation

Pour utiliser cette fonction, définissez un rappel qui gère le morceau et fournissez les paramètres nécessaires :

$success = file_get_contents_chunked("my/large/file", 4096, function ($chunk, &$handle, $iteration) {
    /* Do something with the chunk */
});

Considérations supplémentaires

Une autre optimisation consiste à éviter d'utiliser des expressions régulières complexes, qui peuvent consommer une mémoire importante lorsqu'elles sont appliquées à des entrées volumineuses. Pensez à utiliser plutôt des fonctions de chaîne natives telles que strpos, substr et exploser.