어제보다 나은 오늘 :)

본 포스팅은 "Attention is all you need" 논문의 주요 내용을 정리하였습니다. [논문 링크] https://arxiv.org/abs/1706.03762 Attention Is All You Need The dominant sequence transduction models are based on complex recurrent or convolutional neural networks in an encoder-decoder configuration. The best performing models also connect the encoder and decoder through an attention mechanism. We propose a new arxiv.org 1. 트랜스 포머 ..

본 포스팅은 워크플로우 관리 도구인 'apache-airflow'의 개념을 설명하고, DAG을 구현해본 포스팅입니다. 정리할 내용은 다음과 같습니다 . 에어플로우의 개념 에어플로우의 주요 구성 요소 [dag,operator,task,hook] DAG 구현 SQL을 활용한 데이터 이관 PythonOperator SSH 연결 Airflow API 1) Airflow 란? 파이썬 코드로 워크플로우를 작성하고, 스케쥴링, 모니터링하는 플랫폼 ETL 작업을 자동화하고, DAG형태의 워크플로우 작성이 가능 Aws,gcp 모두 airflow managed service 를 제공, 전세계 데이터팀들이 널리 사용하고 있으며, 폭넓은 커뮤니티 형성 2) Airflow를 선택한 이유 python으로 유연한 프로그래밍 가능(..

"시간 여유가 생기면, 지원해봐야지..." "일단 혼자 글쓰기 연습해보고 지원해볼까.. " 여러가지 이유로 미루어왔던 글또를 용기내어 지원했고, 감사하게도 글또 7기에 참여하게 되었다. 약 6개월 간의 글또 미션을 모두 달성하길 바라는 마음으로 다짐글을 써보려 한다. # 1. 글또를 지원한 이유 글쓰기 역량 향상 글(문장)을 쓰는 것보다는 SQL, 파이썬 코딩에 익숙해지고, 기술 서적만 주로 읽다 보니, 요즘은 내가 경험했던 일들, 나의 지식을 상대방에게 글로 전달하는데 어렵게 느껴진다. 글또를 통해 글쓰기 역량을 향상하고 싶다. 글 문장을 쓰는 연습하기 나의 스토리를 글로 표현하는 연습하기 2. 꾸준히! 기록하는 습관 형성 프로젝트 개선 경험, 실패 경험 기록하는 습관 들이기 프로젝트 업무, 나의 하루..