본문 바로가기

Python

Scrapy response.xpath로 데이터 추출하기

가져오고 싶은 데이터가 있는 url 입력

scrapy shell "http://www.jobkorea.co.kr/starter/?schLocal=&schPart=10016&schMajor=&schEduLevel=&schWork=&schCType=&isSaved=1&LinkGubun=0&LinkNo=0&Page=1&schType=0&schGid=0&schOrderBy=0&schTxt="



result = response.xpath('//*[@id="devStarterForm"]/div[2]/ul/li[1]/div[2]/div[2]//span/text()').extract()


for i in result:

print(i)


결과

웹프로그래머

응용프로그래머

ERP·시스템분석·설계 외