AWS Lambda를 이용하여 카드 결제 정보(메일)를 Google Spreadsheet에 자동으로 수집합니다. - 코드 및 자세한 설명은 추후 업데이트 예정

1. 나의 AWS 첫 걸음
Lambda로 시작하는 나의 지출 데이터 수집
김영헌
me@younghun.kim

2. • AWS 초심자
• AWS로 무엇을 할 까 생각하는 분
• 개인 목적

3. AWS에 발 담그기
• 한 달 전, 스터디에서 발표하기로 함
• 탄력적 개발로 이끄는 AWS 실천 기술' 책
• AWSomeday 하루 코스 강의

4. 발표 앞두고 1 주일 전…발표 앞두고 1 주일 전…
‘나와 관련 있는 것’

5. • ‘생활 데이터 과학’을 만나다 [팟1, 2, 책]
• 나와 관련된 데이터
• 체중 (2012~)
• 활동량 (2015~)
• 업무 사용 시간 (2015)
• 방의 온습도 (2011~)
• 지출 관리 (2017~)

6. 지출 기록을 관리하자
• 2017년 목표!
• 그러나, 매일 매일 기록하기 쉽지 않음
• 좋은 서비스가 많으나, 데이터 재활용이 어려움
• 브로콜리, OO가계부, 해당 카드사 앱 등
• 서버를 관리하기 귀찮았음 번거로웠음

7. ‘나와 관련 있는 것’
카드 지출 데이터 수집

8. ‘나와 관련 있는 것’
카드 지출 데이터 수집

9. Lambda
Google Spreadsheet
Gmail
결제 내역 이메일
결제 내역 추가
filter: forward to somewhere?
이런 그림이면 될 듯!?
1. Gmail에서 필터 설정
2. Google API credential 생성
3. Lambda에 ‘이메일 파싱 함수’ 등록
4. 끝

10. 이메일로 Lambda 함수를
어떻게 실행하지?
• SES에서 SNS으로 전송 가능
• 이메일 크기 150KB 제약
• SES에서 Lambda 함수 바로 호출

11. Lambda
SES
Google Spreadsheet
Gmail
결제 내역 이메일
filter: forward to receipt@aws.mydomain.com
결제 내역 추가
이메일 서비스가 필요하겠군

12. 이메일 주소 생성하자
• 1) 도메인 등록 2) 도메인 네임 서버 설정 3) 이메일 생성
• Route 53에서, 도메인 등록
• SES에서, 네임 서버 설정 및 이메일 생성
SES에서의 도메인 등록

13. 이메일 주소 생성하자
• Rule 등록

14. Lambda
SESGmail
결제 내역 이메일
filter: forward to receipt@aws.mydomain.com
Route 53
Google Spreadsheet
결제 내역 추가
도메인 등록 완료

15. Lambda 함수 등록
• python 함수를 zip 파일로 압축하고 upload
• Google 스프레드시트의 ID와 시트 이름은 환경변수로 등록
• Lambda 함수에 대한 Role 생성
• DLQ(Dead Letter Queue) 설정 (예외 발생 체크용도)
• 환경 변수 암호화를 위한 KMS key

16. Lambda 함수 등록

17. 수신 이메일을 Lambda 함수에 연결
SES에서 Rule 설정 화면

18. Lambda 함수 테스트
1. 수신자 이메일 주소로 Gmail에서 결제 내용 메일을 보냄
2. 이벤트로 이메일 본문이 전달 안됨 (메타 정보 만 전달)
3. 이메일 본문은 S3에 저장, messageId가 이벤트에 포함

19. Lambda
SES
S3
Google Spreadsheet
Gmail
결제 내역 이메일
filter: forward to receipt@aws.mydomain.com
결제 내역 추가
Route 53
이메일 저장소 추가

20. Lambda
SNS
SES
S3
Gmail
결제 내역 이메일
filter: forward to receipt@aws.mydomain.com
Route 53
Google Spreadsheet
결제 내역 추가
동작 실패는 어떻게 확인하지?
Dead Letter Queue
CloudWatch Logs

21. CloudWatch에 Log로 기록됨

22. Lambda
SNS
SES
S3
Gmail
결제 내역 이메일
CloudWatch Logs
filter: forward to receipt@aws.mydomain.com
Route 53
Google Spreadsheet
결제 내역 추가
끝났나?

23. 인증정보는 암호화 하자
•Google API Credential을 환경 변수로 등록
•Google API Credential을 환경 변수로 등록

24. Lambda
SNS
SES
S3
Gmail
결제 내역 이메일
CloudWatch Logs
filter: forward to receipt@aws.mydomain.com
KMSRoute 53
Google Spreadsheet
결제 내역 추가
최종본

25. 데모
결제 정보 메일이 시트에 새로운 행으로 저장 됨

26. AWS Lambda 사용 요금
• 요청: 약 23 호출/분
• 기간:
• 나의 Lambda 함수 : 128MB-10초/호출, 720 호출/월
• GB-초:0.00002 = 8/10 * 720
=> $ 0.01152 S3, Route 53, KMS, Log …

27. Lambda 함수 Blueprint

28. Lambda를 써보면서 느낀점
• AWS/AWS Console은 감동
• 서비스간 연결, 필요한 권한 추가 등
• 개발/업로드/테스트 편리 (당연히…)
• 개인용으로 거의 비용X
• Route 53, SES, KMS, Logs, S3, IAM(Role)를 함께 익힘
• AWS 첫걸음은 Lambda로 부터!!

29. 다음에 할 일
• 현금 등의 지출 기록 방법을 추가 (API Gateway 이용)
• 곧, 코드/설명서/발표자료는 게시할께요
• 코드 업데이트 - [준비중]
• 설명서 - [준비중]
• 발표자료 - 이 것!