PHP-从目录中读取大量文件

2022-08-19 00:00:00 file-handling large-data php

我有一个包含大量图片(至少10000个文件)的文件夹,我需要使用php获取所有这些文件的名称。 问题是,当我使用scandir()时,我得到了关于内存限制的错误。 此外,我还尝试使用如下代码:

          $files = [];
          $dir = opendir($this->path);
          $i = 0;
          while(($file = readdir($dir)) !== false) {
              $files[] = $file;
              $i++;
              if ($i == 100)
                  break;
          }

这段代码运行良好,但它不是我需要的。当我尝试获取所有文件时,脚本仍然崩溃。

此外,我还想过以某种方式保存$dir中的指针状态,以便以后通过AJAX请求使用它并获取所有文件,但我找不到任何解决方案。

有没有设置读取文件的限制和偏移量的方法? 我是说,就像分页一样。


解决方案

如果内存问题很大,可以将RecursiveDirectoryIterator与Generator一起使用。

function recursiveDirectoryIterator($path) {
  foreach (new RecursiveIteratorIterator(new RecursiveDirectoryIterator($path)) as $file) {
    if (!$file->isDir()) {
      yield $file->getFilename() . $file->getExtension();
    }
  }
}

$start = microtime(true);
$instance = recursiveDirectoryIterator('../vendor');
$total_files = 0;
foreach($instance as $value) {
  // echo $value
  $total_files++;
}
echo "Mem peak usage: " . (memory_get_peak_usage(true)/1024/1024)." MiB";
echo "Total number of files: " . $total_files;
echo "Completed in: ", microtime(true) - $start, " seconds";

这是我在我不太好的笔记本电脑上得到的东西。

相关文章