본문 바로가기
카테고리 없음

[Scrapy] 09. Exports

by KIha_Jung 2020. 4. 8.

URL : https://docs.scrapy.org/en/latest/topics/feed-exports.html#

1. 출력 형식

JSON, JSON Lines(Java Script Object Notation)

CSV(쉼표로 구분한 텍스트)

XML(마크업 언어)

Pickle(python 자료형을 저장)

Marshal(바이너리 형식)

 

2. 저장 위치

Local File System(My Pc)

FTP - (server)

S3 - (AWS) Amazon

 

3. 저장 방법

(1) 기본 콘솔

cmd : (--output, -o), (--output-format, -t) 

옵션 설정 --set=FEED_EXPORT_INDENT = 2

 

(2) Settings.py 파일 사용

자동으로 저장(파일명, 형시, 위치)

파일이름 및 경로

FEED_URL = 'result.json'

참고 : URI(Uniform Resource Identifier)

파일 형식

FEED_FORMAT = 'json'

# 출력 인코딩

FEED_EXPORT_ENCODING = 'utf-8'

기본 들여쓰기

FEED_EXPORT_INDENT = 2

댓글