빅데이터분석기사 합격 후기 대학원 졸업하면서 취업한다고 준비한 빅데이터분석기사 필기는 붙여놓고 취업을 안하게 되면서 묻혀놓고 있다가 2년 되면 필기합격도 날라간다해서 부랴부랴 실기 준비해서 붙었습니다. 제3유형이 생겼다는 얘기를 들었는데 자료를 나름 찾아보려 했는데 자료가 진짜 없어서 애 먹었습니다. 강의를 듣는게 최고였는데 그 내용은 아래에서 참고해주세요. 빅데이터 분석기사 자격증이란 빅데이터 분석 기사 자격증은 한국데이터산업진흥원(KDIA)에서 시행하는 자격시험으로, 빅데이터 분석 분야에서 전문적인 역량을 갖추고자 하는 사람들을 대상으로 합니다. 국가기술자격증이라는 것과 한번 따면 영구보존되는게 가장 큰 매리트입니다. 비전공자, 문과출신인 경우 난이도 때문에 기사 자격증 진입하기가 어려운데 빅데이터분..
엑셀 파일 빠르게 읽어보자 빅데이터를 다루다보면 엑셀 파일 불러올 수 밖에 없는데 데이터 자체가 크다보니 불러오는 시간이 많이 소요됩니다. 이걸 여러번 불러온다면 곤욕이 따로 없겠죠? 이전 포스팅에서 xlsx에서 csv로 변환하는 방법을 다뤘었는데 csv로 변환하고 읽는 속도가 약 70배 빨라지는 것을 알 수 있었습니다. 이번 포스팅에서는 본격적으로 불러오는 속도를 극대화하는 방법에 대해 소개할까 합니다. DASK 모듈 이용하기 방법은 생각보다 간단합니다. 데이터를 불러올 때 병렬처리를 한다면 보다 빠르게 불러올 수 있게 됩니다. 그런데 이걸 코드로 만들어내면 귀찮아지니 다 만들어진 모듈을 사용해서 간편하게 불러올 수 있을 거라 생각합니다. DASK라는 모듈을 쓸 건데요. 이 모듈은 파이썬에서 분산 병렬..
인공지능은 현대 사회에서 가장 빠르게 발전하는 기술 중 하나로, 우리의 생활과 업무에 혁명적인 변화를 가져오고 있습니다. 그리고 그 핵심적인 역할을 맡고 있는 것이 바로 "머신러닝(Machine Learning)"입니다. 머신러닝은 알고리즘을 구축하는 컴퓨터 과학의 하위 분야로 최근에는 인공지능의 핵심기술로 자리잡고 있습니다. 요즘은 머신러닝으로 할 수 없는 것들도 많아지고 있는 추세지만 기본적인 베이스가 되고 있는건 변함 없습니다. 컴퓨터가 패턴을 학습하여 스스로 데이터분석과 문제를 해결하는 능력을 갖추게 된다면 얼마나 편해질까요? 데이터를 컴퓨터에게 던져주면 알아서 분석도 해주고 ppt도 만들어주고 문서도 만들어줄겁니다. 여태까지 컴퓨터로 했던 모든 것들은 이제 말이나 타이핑을 통해서 해달라고 요청하..
요즘 chapgpt니 뭐니 하면서 AI 인공지능이 엄청 뜨고 있습니다. 아무래도 저도 그런 쪽을 다루다 보니 관심이 안 갈 수 없네요. 직접 쓰는 방법은 아직은 상용화도 어렵고 여러 시도들이 있는 걸로 알고 있습니다. 이번 포스팅에서는 AI의 가장 기본 모토인 데이터를 분석해주는 사이트를 소개할까 합니다. 주로 키워드를 살펴보는 사이트들입니다. 어떻게 쓰느냐에 따라 온라인에서의 탁월함이 달라질겁니다. 한번 살펴보시기 바랍니다. 네이버 데이터랩 네이버 데이터랩 네이버의 검색 트렌드 및 급상승검색어 이력, 쇼핑 카테고리별 검색 트렌드 제공 datalab.naver.com 예전에 네이버 순위가 있었던 적이 있었습니다. 그 기능의 모토가 아닌가 싶습니다. 네이버 데이터랩에 들어가면 키워드 순위와 내가 원하는 키..