>  기사  >  백엔드 개발  >  Python에서 고정 너비 파일 구문 분석을 최적화하는 방법은 무엇입니까?

Python에서 고정 너비 파일 구문 분석을 최적화하는 방법은 무엇입니까?

DDD
DDD원래의
2024-10-31 05:26:30430검색

How to Optimize Fixed Width File Parsing in Python?

고정 너비 파일 구문 분석 최적화

고정 너비 파일을 효율적으로 구문 분석하려면 Python의 구조체 모듈을 활용하는 것이 좋습니다. 이 접근 방식은 다음 예에서 볼 수 있듯이 속도 향상을 위해 C를 활용합니다.

<code class="python">import struct

fieldwidths = (2, -10, 24)
fmtstring = ' '.join('{}{}'.format(abs(fw), 'x' if fw < 0 else 's') for fw in fieldwidths)

unpack = struct.Struct(fmtstring).unpack_from  # Alias.
parse = lambda line: tuple(s.decode() for s in unpack(line.encode()))

line = 'ABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789\n'
fields = parse(line)
print('fields: {}'.format(fields))</code>

또는 문자열 슬라이싱을 사용할 수도 있습니다. 효율성을 높이려면 아래 최적화 버전에서 볼 수 있듯이 런타임에 슬라이스를 컴파일하는 람다 함수를 정의하는 것이 좋습니다.

<code class="python">def make_parser(fieldwidths):
    cuts = tuple(cut for cut in accumulate(abs(fw) for fw in fieldwidths))
    pads = tuple(fw < 0 for fw in fieldwidths)  # bool flags for padding fields
    flds = tuple(zip_longest(pads, (0,) + cuts, cuts))[:-1]  # ignore final one
    slcs = ', '.join('line[{}:{}]'.format(i, j) for pad, i, j in flds if not pad)
    parse = eval('lambda line: ({})\n'.format(slcs))  # Create and compile source code.
    # Optional informational function attributes.
    parse.size = sum(abs(fw) for fw in fieldwidths)
    parse.fmtstring = ' '.join('{}{}'.format(abs(fw), 'x' if fw < 0 else 's')
                                                for fw in fieldwidths)
    return parse</code>

위 내용은 Python에서 고정 너비 파일 구문 분석을 최적화하는 방법은 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명:
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.