For 루프 없이 Go를 사용하여 PostgreSQL에 CSV 데이터를 효율적으로 대량 삽입하는 방법은 무엇입니까?

Go를 사용하여 CSV에서 PostgreSQL로 효율적인 대량 데이터 삽입(For 루프 없음)

Go에서 Postgres COPY 명령은 효율적인 방법을 제공합니다. CSV 파일의 데이터를 PostgreSQL 데이터베이스에 대량 삽입합니다. for 루프를 사용하지 않고 이를 달성하는 방법은 다음과 같습니다.

1단계: 데이터베이스 연결 설정

pgx 라이브러리를 사용하여 데이터베이스 연결을 설정합니다. 이는 데이터베이스에 액세스하고 명령을 실행하는 데 필수적입니다.

2단계: CSV 파일 열기

삽입할 데이터가 포함된 CSV 파일을 엽니다. 애플리케이션에서 파일에 액세스할 수 있는지 확인하세요.

3단계: COPY 명령 실행

PgConn().CopyFrom() 메서드를 실행하여 다음에서 데이터 전송을 시작합니다. CSV 파일을 데이터베이스 테이블에 추가합니다. 예는 다음과 같습니다.

<code class="go">import (
    "context"
    "fmt"
    "io"

    "github.com/jackc/pgx/v4/pgxpool"
)

const query = "COPY csv_test FROM STDIN (FORMAT csv)"

func main() {
    dbpool, err := pgxpool.Connect(context.Background(), os.Getenv("DATABASE_URL"))
    if err != nil {
        panic(err)
    }
    defer dbpool.Close()

    f, err := os.Open("foo.csv")
    if err != nil {
        panic(err)
    }
    defer f.Close()

    res, err := dbpool.Conn().PgConn().CopyFrom(context.Background(), f, query)
    if err != nil {
        panic(err)
    }
    fmt.Print(res.RowsAffected())
}</code>

코드 분석:

• 쿼리 변수는 실행될 COPY 명령을 정의합니다.
• main() 함수는 dbpool을 사용하여 데이터베이스에 대한 연결을 설정하고, CSV 파일을 열고, PgConn().CopyFrom()을 사용하여 확장된 COPY 명령을 실행합니다.
• res 변수는 실행 결과를 저장합니다. , 영향을 받은 행 수 포함.

이점:

• 효율성: COPY 명령은 대량 작업에 매우 효율적입니다. 데이터 삽입을 통해 루프 기반 접근 방식에 비해 불필요한 오버헤드를 방지합니다.
• 동시성: pgxpool은 동시 연결을 허용하여 병렬 작업을 활성화하여 더 빠른 데이터 처리를 가능하게 합니다.
• 유형 안전성: pgx는 COPY 명령을 실행할 때 유형 안전성을 보장하여 데이터 무결성을 보장합니다.

위 내용은 For 루프 없이 Go를 사용하여 PostgreSQL에 CSV 데이터를 효율적으로 대량 삽입하는 방법은 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!