
프로젝트1 | DBeaver에서 대용량 데이터 셋(csv) IMPORT 하기 / 오류 상황 해결법
·
SQL
이번 EDA 프로젝트에서 우리팀이 선정한 데이터 셋은 kaggle의 'eCommerce Events History in Cosmetics Shop' 데이터이다. 테이블 및 컬럼은 간단하게 구성되어있지만, 유저의 이벤트 데이터셋이므로 용량이 꽤 크다. 약 100만 행/월, 5개월치 데이터 이므로 약 500만행 (2.3gb) 정도 되는 것 같다. (excel로 샘플 보려고 했으나, 필터 조차 걸 수 없었음) 이번 프로젝트는 `DBeaver` 에서 SQL로 EDA를 진행하는 프로젝트로 바로 import를 시도했는데, 몇 가지 오류사항으로 import 자체가 안되는 어려움이 있어서 해당 내용을 정리하고 공유 하고자 한다. eCommerce Events History in Cosmetics ShopThis dat..