PHP は、CSV の大きなファイルの指定された行を迅速に読み取ります

1. 大きな CSV ファイルの合計行数をすばやく取得するにはどうすればよいですか?

方法 1: ファイルの内容を直接取得し、改行文字を使用して分割して合計行数を取得します。この方法は、小さなファイルには実行可能ですが、大きなファイルを処理する場合には実行できません。 方法 2: fgets を使用して行ごとに走査し、合計行数を取得します。この方法は方法 1 よりも優れていますが、大きなファイルではタイムアウトが発生する可能性があります。 方法 3: SplFileObject クラスを使用して、ポインターをファイルの末尾に直接配置し、SplFileObject::key メソッドを通じて総行数を取得します。この方法は実行可能で効率的です。

具体的な実装方法:

コードは次のとおりです:

$csv_file = 'path/bigfile.csv';

$spl_object = 新しい SplFileObject($csv_file, 'rb');

$spl_object->seek(filesize($csv_file));
echo $spl_object->key();

2. 大きな CSV ファイルからデータをすばやく取得するにはどうすればよいですか?
シークメソッドによる迅速な位置決めを実現するために、引き続き PHP の SplFileObject クラスを使用しています。

コードは次のとおりです:

$csv_file = 'path/bigfile.csv';

$start = 100000 // 100000行目から読み込みを開始します

$num = 100; // 100 行を読み取ります
$data = array();
$spl_object = 新しい SplFileObject($csv_file, 'rb');
$spl_object->seek($start);
while ($num-- && !$spl_object->eof()) {
$data[] = $spl_object->fgetcsv();
$spl_object->next();
}
print_r($data);

3. 上記の 2 点を踏まえて、csv ファイルを読み込むためのクラスに整理します。

コードは次のとおりです:

クラス CsvReader {

プライベート $csv_file;

private $spl_object = null;
プライベート $error;

パブリック関数 __construct($csv_file = '') {
if($csv_file && file_exists($csv_file)) {
$this->csv_file = $csv_file;
}
}

パブリック関数 set_csv_file($csv_file) {
if(!$csv_file || !file_exists($csv_file)) {
$this->error = 'ファイルが無効です';
false を返します;
}
$this->csv_file = $csv_file;
$this->spl_object = null;
}

パブリック関数 get_csv_file() {
$this->csv_file を返す;
}

プライベート関数 _file_valid($file = '') {
$file = $file ? $file : $this->csv_file;
if(!$file || !file_exists($file)) {
false を返します;
}
if(!is_readable($file)) {
false を返します;
}
true を返します;
}

プライベート関数 _open_file() {
if(!$this->_file_valid()) {
$this->error = 'ファイルが無効です';
false を返します;
}
if($this->spl_object == null) {
$this->spl_object = new SplFileObject($this->csv_file, 'rb');
}
true を返します;
}
パブリック関数 get_data($length = 0, $start = 0) {
if(!$this->_open_file()) {
false を返します;
}
$length = $length ? $length : $this->get_lines();
$start = $start - 1;
$start = ($start $data = array();
$this->spl_object->seek($start);
while ($length-- && !$this->spl_object->eof()) {
$data[] = $this->spl_object->fgetcsv();
$this->spl_object->next();
}
$data を返す;
}
パブリック関数 get_lines() {
if(!$this->_open_file()) {
false を返します;
}
$this->spl_object->seek(filesize($this->csv_file));
return $this->spl_object->key();
}
パブリック関数 get_error() {
$this->error;
を返す }
}

4. 呼び出し方法は次のとおりです:

コードは次のとおりです:

include('CsvReader.class.php');

$csv_file = 'パス/bigfile.csv';

$csvreader = 新しい CsvReader($csv_file);
$line_number = $csvreader->get_lines();
$data = $csvreader->get_data(10);
echo $line_number, chr(10);
print_r($data);

要約すると、上記の CsvReader クラスは大きな CSV ファイルだけでなく、クラス内の fgetcsv メソッドを fgets に少し変更すれば、大きなファイルや他のテキスト タイプの非常に大きなファイルにも使用できます。