작은 변화로 json_decode 메모리를 70% 절약할 수 있나요?

json_decode는 JSON 형식의 문자열을 디코딩하고 JSON 형식의 문자열을 받아 PHP 변수로 변환합니다. 그런데 json_decode를 실행할 때 메모리가 초과될 수 있습니다. 어떻게 해야 하나요?

PHP의 json_decode 함수를 사용하여 JSON 문자열을 구문 분석하고 JSON 문자열에 많은 요소가 포함된 배열이 포함되어 있는 경우 구문 분석 프로세스 중에 PHP가 메모리 제한을 초과하는지 주의해야 합니다.

저자는 개발 중에 구문 분석이 필요한 JSON 파일을 발견했습니다. JSON에는 다음과 같이 많은 MAC 주소로 구성된 배열이 포함되어 있습니다.

{
    "name": "MAC File",
    "date": "2017-11-08",
    "macList": [
        "11-11-11-11-11-11",
        "22-22-22-22-22-22",
        ...
    ]
}

결과적으로 json_decode 프로세스는 PHP의 기본 메모리 제한인 128M을 초과했습니다.

뭐야, 한도를 넘은 거야? ! 이 JSON 파일은 10M에 불과합니다!

"이 기능에 버그가 있는 걸까요?" 욕을 하고 곰곰이 생각해 본 결과 MAC 주소로 구성된 배열에 문제가 있다는 것을 알게 되었습니다. PHP 배열은 많은 메모리를 소비한다는 것을 알아야 합니다.

PHP 배열은 얼마나 많은 메모리를 사용합니까? 간단한 실험을 통해 500,000개의 MAC 주소를 배열에 입력하고 메모리 사용량을 인쇄할 수 있습니다.

$a = [];
for ($i = 0; $i !== 500000; $i++) {
    $a[] = '11-11-11-11-11-11';
}
echo memory_get_usage() . PHP_EOL;

이 MAC 주소를 파일에 쓰면 이론적으로 9.6M 디스크 공간만 필요합니다. 그러나 PHP 배열은 동일한 정보를 유지하지만 72.4M 메모리를 차지합니다.

json_deocde 실행 시 메모리 오버플로를 해결할 수 있는 방법이 있나요? 물론 간단하고 조잡하게 하려면 메모리 제한을 늘리면 됩니다.

ini_set('memory_limit','1024M');

가능하더라도 다음과 같은 문제가 발생할 수 있습니다.

PHP의 메모리 공간 때문에 다른 언어의 엔지니어가 조롱할 수 있습니다.

메모리 제한 초과 문제를 해결하는 더 현명한 방법이 있습니까?

그렇습니다. PHP 배열은 많은 메모리를 차지하기 때문에 디코딩 시 json_decode가 거대한 배열을 생성하는 것을 방지해야 합니다. 어떻게 하나요? 이는 JSON 인코딩 형식으로 시작됩니다. 예를 들어 거대한 JSON 배열을 문자열로 수정할 수 있습니다.

{
    "name": "MAC File",
    "date": "2017-11-08",
    "macList": "11-11-11-11-11-11，22-22-22-22-22-22，...",
}

macList를 배열에서 쉼표로 구분된 문자열로 변환했습니다. 이렇게 하면 json_decde가 거대한 배열을 생성하는 것을 방지하고 이를 매우 긴 문자열로 대체합니다.

문자열이 차지하는 메모리 양은 배열보다 훨씬 적습니다. 현재 500,000개의 MAC 주소가 차지하는 메모리는 9.7M에 불과합니다. 수정 후 json_decode가 성공적으로 구문 분석되었으며 구문 분석 속도가 더 빨라졌습니다.

원래 macList는 배열이었고 그 안의 요소는 foreach를 통해 탐색될 수 있습니다. 이제 이를 탐색하는 방법은 무엇입니까?

어렵지 않습니다. strtok을 사용하면 됩니다:

$tok = strtok($macList, ',');
while ($tok !== false) {
    $mac = $tok;
    $tok = strtok(',');
}

순회 난이도는 크게 늘어나지 않죠?

이 방법은 간단한 JSON 배열을 처리할 수 있습니다. JSON 배열의 각 요소가 JSON 개체인 경우 어떻게 해야 합니까?

다음과 같이 문자열을 구성할 수 있습니다.

{
    "list": '{"name":"obj1"}###{"name":"obj2"}###...'
}

문자열은 특수 표시 ###로 구분된 작은 JSON으로 구성됩니다. 구문 분석하는 동안 특수 태그에 따라 JSON 개체를 분리한 다음 json_decode를 사용하여 하나씩 구문 분석합니다.

$tok = strtok($objectList, '###'); // 按###切割
while ($tok !== false)
{
    $objectStr = $tok;
     // 每切割出一个JSON对象就解码
    $object = json_decode($objectStr, true);
    $tok = strtok('###');
}

또한 이 매우 긴 문자열을 인코딩/파싱하는 고유한 방법을 만들 수도 있습니다. 즉, 궁극적인 목표는 피하는 것입니다. 디코딩 시 json_decode 프로세스 중에 매우 큰 배열이 생성됩니다.

이 기사를 통해 PHP Array의 메모리 소모 능력을 엿볼 수 있습니다. JSON의 배열을 문자열 표현으로 바꾸면 많은 메모리를 절약할 수 있습니다. 참고를 위해 비교 데이터도 실행했습니다.

500,000개의 MAC 구문 분석:

MAC 주소 저장 방법	Array 방법	String 방법
JSON 파일 크기	9.6M	8.6M (각 요소마다 따옴표 한 쌍은 생략)
평균 메모리 사용량	72.4M	8.7M
평균 json_decode 구문 분석 시간	0.73s	0.41s

100만 구문 분석 MAC:

MAC 주소 저장 방식	배열 방식	문자열 방식
JSON 파일 크기	20M	18M
평균 메모리 사용량	204.6M	54.2M
평균 json_decode 구문 분석 시간	1.61s	0.81s

2백만 개의 MAC 구문 분석:

MAC 주소 저장 방법	배열 모드	문자열 모드
JSON 파일 크기	40M	36M
평균 메모리 사용량	409.0M	108.2M
평균 json_decode 구문 분석 시간	3.05s	1.53초

추천 학습: php 비디오 튜토리얼

위 내용은 작은 변화로 json_decode 메모리를 70% 절약할 수 있나요?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!