데이터 리터러시를 위한 발자취

안녕하세요, 지난번 BigQuery에 이어 NLP 기반 워드클라우드 시각화 구현한 부분을 다루고자 합니다. 본문에 사용된 데이터는 '프리온보딩 원티드 데이터 챌린지 1월' 과정에서 제공된 데이터를 활용한 점 참고 부탁드려요. 또한, 하단 GitHub의 KRWordRank를 활용하여 키워드 추출 및 워드클라우드 시각화를 진행하였습니다. GitHub - lovit/KR-WordRank: 비지도학습 방법으로 한국어 텍스트에서 단어/키워드를 자동으로 추출하는 비지도학습 방법으로 한국어 텍스트에서 단어/키워드를 자동으로 추출하는 라이브러리입니다. Contribute to lovit/KR-WordRank development by creating an account on GitHub. github.com 내용은 아..

안녕하세요-! Airflow 공부 중에 파이프라인 구축 관련 테스트하기 좋은 블로그가 있어서요. 아래 블로그 글을 참고하여 Naver api 기반 Airflow 데이터 파이프라인 구축까지 테스트 겸 실행해 보았습니다. 참고 : Airflow 엄청 자세한 튜토리얼 #왕초심자용 Airflow 엄청 자세한 튜토리얼 #왕초심자용 에어플로우에 대한 정보를 제공하는 정확하고 전문적인 글들이 많고, 여기서는 나와 같은 초보분들을 위해 설치부터 아주 간단한 실습을 다룰 것이기 때문에 이론은 직관적으로만 설명해서 느 velog.io 처음 Airflow를 접해보는 분들도 잘 따라할 수 있게 정리해 주신 블로그라 아래 내용 보기 전에 먼저 보신다면 조금 더 이해하기 쉬울 것 같아요~! 👍 👍 👍 전체적인 Dag skelto..

안녕하세요! 지난번 공지드린대로 최근 Airflow를 공부 중입니다. 윈도우 환경에서 Airflow 설치까지는 완료했는데, 좀 더 준비해서 의미있을만한 산출물로 만들고 싶어서요. 이왕 데이터 파이프라인 구축하는 김에 관심있는 도메인 기반 데이터 분석 환경을 구축해볼까 생각 중입니다! Airflow 개념을 1도 모르고 시작하는거라 생각보다 시간이 걸릴 것 같아서..우선 WSL 및 Airflow 설치방법을 먼저 공유하려고 합니다! Airflow 설치를 위해 저도 이것저것 검색해봤는데 대부분 Mac OS 기준으로 작성된 게 대부분이더라구요. Airflow가 윈도우 환경에서 직접 설치가 불가한 점 때문인 것 같았습니다. 물론 윈도우 환경에서 설치하는 방법을 작성해둔 블로그를 여러개 봤지만 상세히 다룬 곳이 없어..

주피터 노트북은 파이썬을 사용하기 위해 기본적으로 사용하는 Tool입니다. 하지만 폰트도 별로고, 그래프나 이미지를 출력할 때마다 노트북 사양 문제인지 이상하게 출력할 때가 있아서 제대로 쓴 적이 없었습니다. 파이썬을 쓸 수 있는 도구는 많다 보니 Visual Studio Code를 주로 이용했었는데요. 부트캠프 수강하는 동안, 같은 Tool 기반 파이썬을 배우기 위해 주피터 노트북을 사용 중인데 역시나.. 폰트가 별로였습니다. 혹시나 싶어 검색해 보니 역시나 주피터 노트북 글꼴 변경하는 방법이 있어 바로 적용해 봤는데 훨씬 깔끔해졌습니다. 나중에 다른 환경에서 새로 설치할 때를 감안하여 블로그에도 재정리하는 점 참고 부탁드립니다 :) 1. 깃허브 내 폰트 다운로드 GitHub - naver/d2codi..

오늘 데이터분석 부트캠프도 Python으로 넘어간 김에 Notion에 정리해두었던 가상환경 설정/삭제 방법을 공유하려고 합니다. 사실 아나콘다 가상환경 설정/삭제 방법은 그냥 검색만 해봐도 정말 많습니다. 대부분 Anaconda promopt를 이용해서 설정/삭제를 할텐데 추가로 Navigator을 이용한 방법도 같이 공유하고자 합니다. # 아나콘다 가상환경 설정/삭제 방법 1. Anaconda Promopt 기반 가상환경 설정/삭제 방법 2. Anaconda Navigator 기반 가상환경 설정/삭제 방법 1. Anaconda Promopt 기반 가상환경 설정/삭제 방법 # 가상환경 생성하기 # python 버전은 자유롭게 설정 가능 conda create --name '가상환경명' python=3.9..