C에서 프로토콜 버퍼로 구분된 I/O를 구현하는 방법: 누락된 기능 및 잠재적인 최적화

Java의 프로토콜 버퍼 구분 I/O 함수에 대한 C 등가물

프로토콜 버퍼에서 메시지 앞에 길이 접두사를 추가하는 것은 읽기 및 읽기에 필수적입니다. 파일에서 여러 메시지를 작성합니다. Java에는 이 목적을 위한 "구분된" I/O 함수(예:parseDelimitedFrom, mergeDelimitedFrom, writeDelimitedTo)가 있지만 C에는 이에 상응하는 기능이 없습니다.

Google 권장 사항

Google에서는 권장합니다. C에서 메시지에 길이 접두사를 수동으로 첨부합니다. 여기에는 다음이 포함됩니다.

• 메시지 크기를 Varint로 작성
• 메시지를 버퍼로 직렬화

그러나 이 접근 방식에는 최적화가 부족하고 실패할 수 있습니다. 64MB보다 큰 입력.

최적화된 C 구현

이후, 전 Google protobuf 라이브러리 작성자가 최적화된 C 구현을 개발하고 공유했습니다. 이러한 구현에는 다음이 포함됩니다.

• 크기를 Varint로 쓰기
• 효율적인 직렬화를 위해 GetDirectBufferForNBytesAndAdvance 메서드 사용
• 64MB의 메시지당 크기 제한 적용

구현 세부정보

writeDelimitedTo 함수는 각 메시지에 대해 새 CodedOutputStream을 생성하고 SerializeWithCachedSizes 메서드를 사용하여 이를 직렬화합니다. 메시지가 하나의 버퍼에 맞으면 더 빠른 SerializeWithCachedSizesToArray 메서드가 사용됩니다.

readDelimitedFrom 함수는 새 CodedInputStream을 생성하고 PushLimit 메서드를 사용하여 메시지별 크기 제한을 적용합니다. 그런 다음 MergeFromCodedStream 메서드를 사용하여 메시지를 구문 분석하고 전체 메시지가 소비되었는지 확인합니다.

가용성

이러한 최적화된 C 구현은 공식 protobuf 라이브러리의 일부가 아닙니다. 그러나 다양한 타사 저장소에서 찾을 수도 있고 제공된 코드 조각을 사용하여 수동으로 구현할 수도 있습니다.

위 내용은 C에서 프로토콜 버퍼로 구분된 I/O를 구현하는 방법: 누락된 기능 및 잠재적인 최적화의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!