찾다
웹 프론트엔드JS 튜토리얼풀스택 웹 스크래핑: Vite.js, React 및 Node.js를 사용하여 링크 미리보기 생성

Full-Stack Web Scraping: Create Link Previews with Vite.js, React, and Node.js

소개

웹 개발은 끊임없이 발전하고 있으며 Vite.js 및 React와 같은 도구를 사용하면 빠르고 반응성이 뛰어난 프런트 엔드 애플리케이션을 만드는 것이 그 어느 때보다 쉬워졌습니다. 하지만 앱이 다른 웹사이트에서 콘텐츠를 가져와서 표시해야 한다면 어떻게 될까요? 이것이 웹 스크래핑이 필요한 곳이며, 오늘 우리는 바로 이를 수행하는 풀 스택 애플리케이션을 구축할 것입니다.

이 튜토리얼에서는 프런트엔드에 React를 사용하고 백엔드에 Cheerio와 함께 Node.js를 사용하여 동적 링크 미리보기 생성기를 만드는 방법을 알아봅니다. 이는 Vite 및 TypeScript와 같은 현대적이고 효율적인 도구를 사용하여 작업하면서 웹 스크래핑을 탐색하려는 웹 개발자를 위한 환상적인 프로젝트입니다.

학습 내용:
  • TypeScript를 사용하여 Vite.js React 프로젝트 설정
  • Express를 사용하여 Node.js 서버 생성
  • 웹 스크래핑을 위해 Axios와 Cheerio 사용
  • 하나의 응집력 있는 프로젝트로 풀스택 애플리케이션 구축

1. 프로젝트 설정

먼저 프로젝트 구조를 설정하겠습니다. 이 튜토리얼에서는 프런트엔드와 백엔드가 동일한 프로젝트 디렉터리에 보관됩니다. 이 설정을 사용하면 개발이 간단해지고 프로젝트가 체계적으로 정리됩니다.

ViteJS로 ReactJS 프로젝트를 생성하고 Typescript 템플릿을 사용하여 시작하세요

Vite.js로 React 프론트엔드 만들기

다음으로 Vite를 사용하여 TypeScript로 React 프런트엔드를 구성합니다.

pnpm create vite@latest

이 명령은 TypeScript를 사용하여
프로젝트 디렉터리에 새 React 프로젝트를 설정합니다. your-project 폴더로 이동하여 종속성을 설치합니다.

<span>cd your-project<br>pnpm install</span>

2. Node.js 서버 설정

이제 프런트엔드가 준비되었으므로 Node.js 서버 생성으로 넘어가겠습니다. 서버 디렉토리를 생성하고 Node.js 프로젝트를 초기화하는 것부터 시작하세요.

<span>cd ..<br>mkdir server<br>cd server<br>pnpm init</span>

HTTP
요청을 생성하기 위한 Axios, HTML 구문 분석을 위한 Cheerio,
요청에서 JSON 본문을 가져오기 위한 body-parser 및 API용 CORS를 활성화하기 위한 cors와 함께 서버용 Express가 필요합니다.

npm install express axios cheerio <span>body-parser cors</span>

3. 웹 스크래핑 API 구축

백엔드 설정을 통해 URL을 허용하고 해당 콘텐츠를 가져오고 제목, 설명, 이미지와 같은 주요 메타데이터를 추출하는 API 엔드포인트를 생성할 수 있습니다.

index.ts의 서버 기본 구조는 다음과 같습니다.

<span>// index.js<br><br>const express = require("express");<br>const bodyParser = require("body-parser");<br>const cors = require("cors");<br><br>const { getUrlPreview } = require("./url.controller");<br><br>const app = express();<br>const PORT = process.env.SERVER_PORT || 5005;<br><br>app.use(bodyParser.json());<br>app.use(cors());<br><br>app.get("/health", (<span>req, res) =></span> {<br>  return res.status(200).json({ status: "Server Running" });<br>});<br>app.post("/preview", getUrlPreview);<br><br>app.listen(PORT, () => {<br>  console.log("Server is running: %s", PORT);<br>});</span>
<span>// url.controller.js<br><br>const axios = require("axios");<br>const cheerio = require("cheerio");<br>const { object, string, ValidationError } = require("yup");<br><br>const schema = object({<br>  url: string().url().required(),<br>});<br><br>const getUrlPreview = async (req, res) => {<br>  try {<br>    const value = await schema.validate(req.body);<br><br>    const { data } = await axios.get(value.url);<br>    const $ = cheerio.load(data);<br><br>    const title =<br>      $('meta[property="og:title"]').attr("content") || $("title").text();<br>    const description =<br>      $('meta[property="og:description"]').attr("content") ||<br>      $('meta[property="description"]').attr("content");<br>    const image =<br>      $('meta[property="og:image"]').attr("content") ||<br>      $("img").first().attr("src");<br><br>    const previewData = {<br>      title: title || "No title available",<br>      description: description || "No description available",<br>      image: image || "No image available",<br>    };<br><br>    return res.status(200).json(previewData);<br>  } catch (err) {<br>    if (err instanceof ValidationError) {<br>      return res.status(422).send(err.message);<br>    }<br><br>    console.log(err);<br><br>    return res.status(500).send("Something went wrong!");<br>  }<br>};<br><br>module.exports = {<br>  getUrlPreview,<br>};</span>

이 코드는 /api/preview에서 POST 요청을 수신하는 간단한 Express 서버를 설정합니다. URL로 요청이 이루어지면 서버는 Axios를 사용하여 해당 URL의 HTML 콘텐츠를 가져와 Cheerio로 구문 분석합니다. 그런 다음 메타데이터가 추출되어 클라이언트에 반환됩니다.

4. 링크 미리보기 구성요소 생성

React 앱에서 URL을 입력으로 사용하고 백엔드에서 가져온 미리보기를 표시하는 구성요소를 만듭니다.

링크 미리보기 생성기를 처리하기 위한 앱 구성요소를 구현하는 방법은 다음과 같습니다.

pnpm create vite@latest
<span>cd your-project<br>pnpm install</span>

이 구성요소를 사용하면 사용자가 URL을 입력할 수 있으며, 이 URL은 백엔드로 전송되어 링크 미리보기를 가져오고 표시합니다.

5. 애플리케이션 실행

마지막으로 애플리케이션을 실행하려면 프런트엔드 서버와 백엔드 서버를 모두 시작해야 합니다.

Node.js 서버 시작:

<span>cd ..<br>mkdir server<br>cd server<br>pnpm init</span>

Vite React 프론트엔드 시작:

npm install express axios cheerio <span>body-parser cors</span>

http://localhost:5173으로 이동하면 사용자가 URL을 입력하고 링크 미리보기를 생성할 수 있는 앱이 작동하는 모습을 볼 수 있습니다.

결론

이 튜토리얼에서는 Vite.js, React, Node.js 및 Cheerio의 기능을 결합하여 웹 스크래핑이 가능한 풀 스택 애플리케이션을 만들었습니다. 개인 프로젝트를 만들거나 포트폴리오에 새로운 기술을 추가하려는 경우 단일 프로젝트에 프런트엔드와 백엔드를 통합하는 방법을 이해하는 것이 매우 중요합니다.

웹 스크래핑은 강력한 도구이지만 책임감 있게 사용하는 것이 중요하다는 점을 기억하세요. 스크랩하는 웹사이트의 서비스 약관을 항상 존중하고 윤리적 의미를 고려하세요.

이 튜토리얼이 도움이 되었다면 이와 같은 더 많은 콘텐츠를 보려면 내 채널을 구독하고 향후 튜토리얼에 대한 질문이나 제안 사항이 있으면 댓글을 남겨주세요.

위 내용은 풀스택 웹 스크래핑: Vite.js, React 및 Node.js를 사용하여 링크 미리보기 생성의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
JavaScript의 역할 : 웹 대화식 및 역동적 인 웹JavaScript의 역할 : 웹 대화식 및 역동적 인 웹Apr 24, 2025 am 12:12 AM

JavaScript는 웹 페이지의 상호 작용과 역학을 향상시키기 때문에 현대 웹 사이트의 핵심입니다. 1) 페이지를 새로 고치지 않고 콘텐츠를 변경할 수 있습니다. 2) Domapi를 통해 웹 페이지 조작, 3) 애니메이션 및 드래그 앤 드롭과 같은 복잡한 대화식 효과를 지원합니다. 4) 성능 및 모범 사례를 최적화하여 사용자 경험을 향상시킵니다.

C 및 JavaScript : 연결이 설명되었습니다C 및 JavaScript : 연결이 설명되었습니다Apr 23, 2025 am 12:07 AM

C 및 JavaScript는 WebAssembly를 통한 상호 운용성을 달성합니다. 1) C 코드는 WebAssembly 모듈로 컴파일되어 컴퓨팅 전력을 향상시키기 위해 JavaScript 환경에 도입됩니다. 2) 게임 개발에서 C는 물리 엔진 및 그래픽 렌더링을 처리하며 JavaScript는 게임 로직 및 사용자 인터페이스를 담당합니다.

웹 사이트에서 앱으로 : 다양한 JavaScript 애플리케이션웹 사이트에서 앱으로 : 다양한 JavaScript 애플리케이션Apr 22, 2025 am 12:02 AM

JavaScript는 웹 사이트, 모바일 응용 프로그램, 데스크탑 응용 프로그램 및 서버 측 프로그래밍에서 널리 사용됩니다. 1) 웹 사이트 개발에서 JavaScript는 HTML 및 CSS와 함께 DOM을 운영하여 동적 효과를 달성하고 jQuery 및 React와 같은 프레임 워크를 지원합니다. 2) 반응 및 이온 성을 통해 JavaScript는 크로스 플랫폼 모바일 애플리케이션을 개발하는 데 사용됩니다. 3) 전자 프레임 워크를 사용하면 JavaScript가 데스크탑 애플리케이션을 구축 할 수 있습니다. 4) node.js는 JavaScript가 서버 측에서 실행되도록하고 동시 요청이 높은 높은 요청을 지원합니다.

Python vs. JavaScript : 사용 사례 및 응용 프로그램 비교Python vs. JavaScript : 사용 사례 및 응용 프로그램 비교Apr 21, 2025 am 12:01 AM

Python은 데이터 과학 및 자동화에 더 적합한 반면 JavaScript는 프론트 엔드 및 풀 스택 개발에 더 적합합니다. 1. Python은 데이터 처리 및 모델링을 위해 Numpy 및 Pandas와 같은 라이브러리를 사용하여 데이터 과학 및 기계 학습에서 잘 수행됩니다. 2. 파이썬은 간결하고 자동화 및 스크립팅이 효율적입니다. 3. JavaScript는 프론트 엔드 개발에 없어서는 안될 것이며 동적 웹 페이지 및 단일 페이지 응용 프로그램을 구축하는 데 사용됩니다. 4. JavaScript는 Node.js를 통해 백엔드 개발에 역할을하며 전체 스택 개발을 지원합니다.

JavaScript 통역사 및 컴파일러에서 C/C의 역할JavaScript 통역사 및 컴파일러에서 C/C의 역할Apr 20, 2025 am 12:01 AM

C와 C는 주로 통역사와 JIT 컴파일러를 구현하는 데 사용되는 JavaScript 엔진에서 중요한 역할을합니다. 1) C는 JavaScript 소스 코드를 구문 분석하고 추상 구문 트리를 생성하는 데 사용됩니다. 2) C는 바이트 코드 생성 및 실행을 담당합니다. 3) C는 JIT 컴파일러를 구현하고 런타임에 핫스팟 코드를 최적화하고 컴파일하며 JavaScript의 실행 효율을 크게 향상시킵니다.

자바 스크립트 행동 : 실제 예제 및 프로젝트자바 스크립트 행동 : 실제 예제 및 프로젝트Apr 19, 2025 am 12:13 AM

실제 세계에서 JavaScript의 응용 프로그램에는 프론트 엔드 및 백엔드 개발이 포함됩니다. 1) DOM 운영 및 이벤트 처리와 관련된 TODO 목록 응용 프로그램을 구축하여 프론트 엔드 애플리케이션을 표시합니다. 2) Node.js를 통해 RESTFULAPI를 구축하고 Express를 통해 백엔드 응용 프로그램을 시연하십시오.

JavaScript 및 웹 : 핵심 기능 및 사용 사례JavaScript 및 웹 : 핵심 기능 및 사용 사례Apr 18, 2025 am 12:19 AM

웹 개발에서 JavaScript의 주요 용도에는 클라이언트 상호 작용, 양식 검증 및 비동기 통신이 포함됩니다. 1) DOM 운영을 통한 동적 컨텐츠 업데이트 및 사용자 상호 작용; 2) 사용자가 사용자 경험을 향상시키기 위해 데이터를 제출하기 전에 클라이언트 확인이 수행됩니다. 3) 서버와의 진실한 통신은 Ajax 기술을 통해 달성됩니다.

JavaScript 엔진 이해 : 구현 세부 사항JavaScript 엔진 이해 : 구현 세부 사항Apr 17, 2025 am 12:05 AM

보다 효율적인 코드를 작성하고 성능 병목 현상 및 최적화 전략을 이해하는 데 도움이되기 때문에 JavaScript 엔진이 내부적으로 작동하는 방식을 이해하는 것은 개발자에게 중요합니다. 1) 엔진의 워크 플로에는 구문 분석, 컴파일 및 실행; 2) 실행 프로세스 중에 엔진은 인라인 캐시 및 숨겨진 클래스와 같은 동적 최적화를 수행합니다. 3) 모범 사례에는 글로벌 변수를 피하고 루프 최적화, Const 및 Lets 사용 및 과도한 폐쇄 사용을 피하는 것이 포함됩니다.

See all articles

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

Video Face Swap

Video Face Swap

완전히 무료인 AI 얼굴 교환 도구를 사용하여 모든 비디오의 얼굴을 쉽게 바꾸세요!

뜨거운 도구

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

SublimeText3 영어 버전

SublimeText3 영어 버전

권장 사항: Win 버전, 코드 프롬프트 지원!

SublimeText3 Linux 새 버전

SublimeText3 Linux 새 버전

SublimeText3 Linux 최신 버전

WebStorm Mac 버전

WebStorm Mac 버전

유용한 JavaScript 개발 도구

mPDF

mPDF

mPDF는 UTF-8로 인코딩된 HTML에서 PDF 파일을 생성할 수 있는 PHP 라이브러리입니다. 원저자인 Ian Back은 자신의 웹 사이트에서 "즉시" PDF 파일을 출력하고 다양한 언어를 처리하기 위해 mPDF를 작성했습니다. HTML2FPDF와 같은 원본 스크립트보다 유니코드 글꼴을 사용할 때 속도가 느리고 더 큰 파일을 생성하지만 CSS 스타일 등을 지원하고 많은 개선 사항이 있습니다. RTL(아랍어, 히브리어), CJK(중국어, 일본어, 한국어)를 포함한 거의 모든 언어를 지원합니다. 중첩된 블록 수준 요소(예: P, DIV)를 지원합니다.