본문 바로가기

반응형

Data & MarTech/SE Tips

(4)
Github clone시 host변경 오류 수정하기 SE Tips. Github clone시 host변경 오류 수정하기 오랜만에 윈도우즈 노트븍에서 제 Github repository에 올라간 소스를 clone하려고 하니 이상한 에러가 떴습니다. WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! git clone 실행 오류 메시지 $ git clone git@github.com:neep305/training-datacamp.git Cloning into 'training-datacamp'... @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ @ WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! @ @@@@@@@@@@@@@@..
[SE Tips] s3cmd cli 사용하기 - Mac OS 기준 s3cmd cli 사용하기 개인적으로 업무에 클라이언트 데이터 정제 후 csv 데이터를 적재하는 용도로 s3cmd를 사용하고 있습니다. 간단한 설정으로 S3와 연동이 가능하니 필요한 분들은 설치 후 사용해 보세요 :) AWS Access key / Secret access key 확인 s3cmd 설치(Install s3cmd) brew install s3cmd s3cmd 설정 s3cmd --configure 위 명령어 실행 시 AWS S3연동에 필요한 Key, Secret 및 부가정보를 입력하면 됩니다. AWS Access Key, Secret Key 입력
CLI 커맨드를 활용한 CSV 데이터 추출 cli command를 활용한 CSV 데이터 추출 SaaS 솔루션은 대부분 CSV 파일 다운로드 기능을 제공하는데, 데이터를 다운받은 다음 엑셀 또는 맥 Numbers에서 파일을 열어보려고 해도 사이즈가 커서 프로그램 자체가 멈춰버리는 경우가 있습니다. 전체데이터를 모두 올려서 분석해야 하는 경우라면, 구글 빅쿼리 등에 직접 Import를 하거나, Pandas DataFrame을 활용하여도 되지만 데이터를 잘 다루는 파워유저(데이터 분석가, 데이터 엔지니어)가 아니라면 쉽지 않은 방법일 수 있습니다. 데이터를 샘플링해서 보기만 해도 된다면 head 명령어로 새로 파일을 만들어보는 방법을 활용해 보세요. 커맨드를 활용한 CSV 데이터 추출 header(컬럼명) row 포함한 데이터 추출 head -n ..
[SE Tips] Charles Proxy 사용해보기 MMP 솔루션 엔지니어로 근무하다보니 디버깅을 위한 사용하게 되는 툴이 몇 가지 있는데, 그중에서 유용하게 사용하는 Charles Proxy에 대한 내용을 정리해 본다. 뭣에 쓰는 물건인가? Charles Proxy는 쉽게 말해 개발자가 폰에서 발생하는 HTTP 패킷을 캡쳐해서 볼 수 있는 모니터링 툴이라고 생각하면 된다. 몇가지 간단한 설정을 하면 바로 Charle Proxy에서 캡쳐된 메시지 확인이 가능하다. Original Introduction Charles is an HTTP proxy / HTTP monitor / Reverse Proxy that enables a developer to view all of the HTTP and SSL / HTTPS traffic between their ..

반응형