Firecrawl은 웹사이트에서 데이터를 추출하고 이를 AI 모델(특히 대규모 언어 모델, LLM)에 바로 사용할 수 있는 형태로 변환해주는 강력한 웹 스크래핑 도구이다. 간단히 말해, 웹 데이터를 "크롤링"하고 "스크랩"해서 깔끔한 마크다운(Markdown)이나 구조화된 데이터(JSON 등)로 바꿔주는 서비스이다.Firecrawl이란?Firecrawl은 Mendable.ai 팀이 개발한 오픈소스 기반의 API 서비스로, 개발자나 데이터 분석가들이 웹에서 데이터를 쉽게 수집할 수 있도록 설계되었다. 복잡한 설정 없이 URL 하나만 주면 해당 웹사이트와 그 하위 페이지를 자동으로 탐색해서 데이터를 가져온다. 특히 LLM에 최적화된 출력(예: 마크다운, 구조화된 데이터)을 제공한다는 점이 큰 특징이다.주요 ..
Python에서 __pycache__ 디렉토리는 파이썬 인터프리터가 모듈을 임포트할 때 생성하는 특별한 폴더이다. 이 폴더는 다음과 같은 특징을 가지고 있다.1. __pycache__ 의 목적__pycache__ 폴더는 파이썬 스크립트의 컴파일된 버전인 .pyc 파일들을 포함한다. 이 파일들은 바이트 코드 형식으로, 파이썬 인터프리터가 원본 소스 코드보다 빠르게 실행할 수 있다. 주요 기능실행 속도 향상 : 소스 코드를 매번 다시 컴파일할 필요 없이 바이트 코드를 재사용하여 프로그램 시작 시간을 단축코드 격리 : 바이트 코드를 소스 코드와 분리하여 프로젝트 디렉토리 구조를 깔끔하게 유지2. 작동 방식파이썬 스크립트를 실행할 때 다음과 같은 과정 실행인터프리터는 먼저 __pycache__ 폴더에 해당하는 ..
우리가 웹사이트를 만들기 위해서는 많은 것들이 필요하다.웹사이트는 일종의 Product이다. 고객들이 많이 방문해야 잘 팔리는 제품이 되는 것이다. 웹사이트를 만들기 위해서는 콘텐츠 요소(어떤 제품을 만들 것인가?), 기술적요소(어떻게 만들 것인가?) , 디자인 요소 등이 필요하다.기술적 요소1.프로그래밍 언어웹사이트의 구조와 기능을 구현하는 데 프로그래밍 언어이다. 프론트엔드와 백엔드로 나뉘는데, 백엔드 언어는 웹사이트 마다 다른 언어가 사용되어 진다.프론트엔드: HTML(구조), CSS(스타일링), JavaScript(동작) 등을 사용백엔드: Python, Java, PHP, Ruby, Node.js 등 서버에서 동작하는 언어2. 웹 프레임워크(Web Framework)웹사이트의 기본 구조를 잡고, ..
VSCode에서 Python 가상환경을 설정하는 방법은 다음과 같다. 1. 가상환경 생성VSCode에서 작업 폴더 열기Ctrl + K 와 Ctrl + O 를 눌러 작업할 폴더를 오픈 터미널 열기Ctrl + Shift + `` 키를 눌러 터미널을 엽니다. 가상환경 생성 : 터미널에서 다음 명령어를 입력하여 가상환경을 생성python -m venv [가상환경 이름] 예시: `python -m venv myvenv` 2. 가상환경 활성화Windows:- 다음 명령어로 가상환경을 활성화 (원화기호는 백슬래시 = \ )venv\Scripts\activate macOS/Linux : 다음 명령어로 가상환경을 활성화source venv/bin/activate 3. Python 인터프리터 선택Ctrl + Shift ..
- Total
- Today
- Yesterday
- GitHub
- 퍼플렉시티
- chromedriver버전오류
- chatGPT
- 구글시트연동
- Python
- Git
- 버전제어
- claude desktop
- cursor ai
- 챗gpt
- This version of ChromeDriver only supports Chrome version
- model context protocol
- 구글시트
- vscode 구글시트 연동
- 주택청약
- 고양장항신혼희망타운
- 티스토리챌린지
- 청약통장
- Selenium
- 청약제도
- 도커
- claude code
- MCP
- chrome버전
- 오블완
- kc인증
- notebooklm
- docker
- 구글API
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |