Saya ingin membaca file baris demi baris, tetapi tanpa benar-benar loading di memori.
File saya terlalu besar untuk membuka dalam memori, dan jika mencoba untuk melakukan jadi saya selalu keluar dari kesalahan memori.
Ukuran file adalah 1 GB.
Anda dapat menggunakan fgets()
fungsi untuk membaca file baris demi baris:
$handle = fopen("inputfile.txt", "r");
if ($handle) {
while (($line = fgets($handle)) !== false) {
// process the line read.
}
fclose($handle);
} else {
// error opening the file.
}
Anda dapat menggunakan aplikasi yang berorientasi objek kelas antarmuka untuk file - SplFileObject http://php.net/manual/en/splfileobject.fgets.php (PHP 5 >= 5.1.0)
<?php
$file = new SplFileObject("file.txt");
// Loop until we reach the end of the file.
while (!$file->eof()) {
// Echo one line from the file.
echo $file->fgets();
}
// Unset the file to call __destruct(), closing the file handle.
$file = null;
Jika anda're membuka file yang besar, anda mungkin ingin menggunakan Generator bersama fgets() untuk menghindari loading seluruh file ke memori:
/**
* @return Generator
*/
$fileData = function() {
$file = fopen(__DIR__ . '/file.txt', 'r');
if (!$file)
die('file does not exist or cannot be opened');
while (($line = fgets($file)) !== false) {
yield $line;
}
fclose($file);
};
Menggunakannya seperti ini:
foreach ($fileData() as $line) {
// $line contains current line
}
Dengan cara ini anda dapat memproses file individu garis di dalam foreach().
Catatan: Generator memerlukan >= PHP 5.5
Gunakan penyangga teknik untuk membaca file.
$filename = "test.txt";
$source_file = fopen( $filename, "r" ) or die("Couldn't open $filename");
while (!feof($source_file)) {
$buffer = fread($source_file, 4096); // use a buffer of 4KB
$buffer = str_replace($old,$new,$buffer);
///
}
foreach (new SplFileObject(__FILE__) as $line) {
echo $line;
}
Jawaban yang jelas bukan't ada di semua tanggapan. PHP telah rapi streaming pembatas parser yang tersedia dibuat untuk tujuan itu.
$fp=fopen("/path/to/the/file", "r+");
while ($line = stream_get_line($fp, 1024 * 1024, "\n"))
{
echo $line;
}
fclose($fp);
Hati-hati dengan 'while(!feof ... fgets()' barang-barang, fgets dapat mendapatkan error (returnfing palsu) dan loop selamanya tanpa mencapai akhir dari file. codaddict paling dekat untuk menjadi benar tapi bila anda 'sementara fgets' loop berakhir, memeriksa feof; jika tidak benar, maka anda memiliki kesalahan.
Salah satu solusi populer untuk pertanyaan ini akan memiliki masalah dengan karakter baris baru. Hal itu bisa diperbaiki cukup mudah dengan sederhana str_replace
.
$handle = fopen("some_file.txt", "r");
if ($handle) {
while (($line = fgets($handle)) !== false) {
$line = str_replace("\n", "", $line);
}
fclose($handle);
}
Ini cara saya mengelola dengan file yang sangat besar (diuji sampai dengan 100G). Dan itu's lebih cepat dari fgets()
$block =1024*1024;//1MB or counld be any higher than HDD block_size*2
if ($fh = fopen("file.txt", "r")) {
$left='';
while (!feof($fh)) {// read the file
$temp = fread($fh, $block);
$fgetslines = explode("\n",$temp);
$fgetslines[0]=$left.$fgetslines[0];
if(!feof($fh) )$left = array_pop($lines);
foreach ($fgetslines as $k => $line) {
//do smth with $line
}
}
}
fclose($fh);
SplFileObject ini berguna ketika datang untuk berurusan dengan file besar.
function parse_file($filename)
{
try {
$file = new SplFileObject($filename);
} catch (LogicException $exception) {
die('SplFileObject : '.$exception->getMessage());
}
while ($file->valid()) {
$line = $file->fgets();
//do something with $line
}
//don't forget to free the file handle.
$file = null;
}
<?php
echo '<meta charset="utf-8">';
$k= 1;
$f= 1;
$fp = fopen("texttranslate.txt", "r");
while(!feof($fp)) {
$contents = '';
for($i=1;$i<=1500;$i++){
echo $k.' -- '. fgets($fp) .'<br>';$k++;
$contents .= fgets($fp);
}
echo '<hr>';
file_put_contents('Split/new_file_'.$f.'.txt', $contents);$f++;
}
?>
Fungsi untuk Membaca dengan array kembali
function read_file($filename = ''){
$buffer = array();
$source_file = fopen( $filename, "r" ) or die("Couldn't open $filename");
while (!feof($source_file)) {
$buffer[] = fread($source_file, 4096); // use a buffer of 4KB
}
return $buffer;
}