Python에서 파일내용 비교하기

simhigo의 이미지

python으로 데이터 파일을 받아 DB에 넣는 스크립트를 작성하였습니다.

그런데 이 데이터 파일이 매일 업데이트 되고 있습니다. 이 데이터파일을 데이터 드롭을했다가 다시 하기에는 용량이 7기가나 되는 대용량 데이터라..

기존 데이터 파일과 비교하여 업데이트 된 부분만 insert문을 이용하여 넣고 싶습니다.

도와주세요 ㅠㅠ

cygwin을 이용하여 diff를 쓰려고했더니 메모리용량이 모자르다고 거부하는군요 ㅠㅠ