빅데이터란?오늘은 우리가 자주 듣게 되는 "빅데이터"라는 용어에 대해 이야기해보려고 합니다. 4차혁명이 시작되면서 빅데이터란 용어가 급부상하고 있는데요. 빅데이터가 정확히 무엇을 의미하는지, 그리고 왜 중요한지 알아보겠습니다.Pixabay로부터 입수된 Gerd Altmann님의 이미지 입니다. 빅데이터 정의빅데이터, 말만 들어도 왠지 거대한 무언가를 떠올리게 되지 않나요?빅데이터란 말 그대로 엄청나게 큰 데이터셋을 뜻합니다. 하지만 단순히 데이터가 크다고 빅데이터의 진정한 의미로 받아들이지 않습니다.기본적으로 빅데이터는 다음의 3V로 설명될 수 있습니다. 미국의 IT 자문기관인 가트너그룹에서 말한 3V는 다음과 같습니다.Volume (양): 빅데이터의 첫 번째 특징은 방대한 양입니다. 매일 전 세계에서 ..
R은 패키지 설치가 너무 어렵다R은 깔끔하게 코드를 작성할 수 있어 좋은데 호환성이 너무 안좋습니다. 조금만 엇나가면 바로 안됩니다. 힘드네요. 특히 패키지 설치로 애를 아주 많이 먹었습니다.보통 R이 한글 인식이 안되는데 윈도우 계정을 한글로 하는 경우가 대부분인데 그것 말고도 여러 문제가 있습니다.쓰기 권한이 없다다음과 같은 오류가 날 수 있습니다.해당 경로가 쓰기 형식이 아니므로 library폴더에 쓰기권한을 주라는 얘기입니다. 즉, 쓰기 권한의 문제입니다.실제 폴더 속성에 가보면 쓰기허용이 체크되어 있지 않습니다.하지만 관리자권한은 쓰기 권한이 되어 있습니다. 그렇다면 Rstutio를 관리자 권한으로 실행하면 된다는 얘기니 관리자 권한으로 일단 실행을 합니다.Rstudio 바로가기에서 다음과 같이..
독립표본 t검정독립표본 t검정은 두 개의 독립된 모집단의 평균을 비교할 때 사용하는 검정방법입니다.예를 들어, 성별에 따라 공부 성취도가 다른지를 검정한다고 할 때 서로 독립적인 남,여에 대해서 통계적 검정을 하기 위해 독립표본 t검정을 사용합니다. 이때, '성별'이 독립변수, 종속변수는 '공부 성취도'가 됩니다. 두 가지 교육 방법(A,B)에 대한 학생들의 시험 성적에 미치는 영향을 통계적으로 검정해보는 예제입니다.독립표본 t검정을 수행하려면 등분산검정 시행후 수행하게 됩니다.일반적으로 등분산검정은 F-test를 시행하는데 R에서 F-test 등분산검정 메쏘드는 다음과 같습니다. var.test(x,y,alternative) : 모집단1,모집단2 적용시var.test(formula,data,altern..
R을 이용한 대응표본 t-검정대응표본 t검정은 단일 모집단에서 두 개의 표본집단을 만들었을때, 그 두개에 대한 평균의 차이를 비교합니다.예를 들어 수면약을 만들었을 때 이 수면약이 효과가 있는지 확인하고 싶어 치료전후 결과를 비교합니다. R을 이용해 대응표본 t검정을 실시하려면 t_test() 메쏘드를 사용해야 합니다.여기서 t_test() 메쏘드에 대한 파라미터를 잠깐 살펴보겠습니다. t.test(x,y,alternate=c("two_sided","less","greater"),paired=FALSE,m=0)x : X의 관측값(수치형 벡터)y : Y의 관측값(수치형 벡터)alternative양측검정 : two-sided단측검정 : less($\mu_x \mu_y$ ), $\mu_x$ 는 X의 평균, $..
가입 안한 넷플릭스에서 가입 축하 메일이 왔다깜짝 놀랐다. 가입하지도 않은 넷플릭스에서 가입을 축하한다며 메일이 왔다.처음엔 해킹당했다고 생각하고 내 결제내역이 추가된 곳을 찾아봤는데 다행히 아니다. 그렇다면 누군가 내 메일로 가입한 걸까?만약 그런거면 왜 남의 메일로 자기 개인정보를 남기면서 넷플릭스 가입을 하는 건지 이해가 안간다. 덕분에 나는 한번도 가입한적 없어서 유효한 1달 무료권을 날려버렸다. 하하하... 참 고마운 자식.... 다른 메일로 되려나 안써봐서 모르겠다. 귀찮아서 일단 가만 내비뒀었는데 이 와중에 알림메일을 왜 해놓는건지 넷플릭스에서 매일같이 추천 메일이 온다. 수신거부를 하면 그만이지만 내 메일을 남이 도용하고 있는데 왜 내가 수신거부로 끝내고 있는 상황이라니 말도 안된다. 로그..
내 카드 조회도요타에서 왠 이상한 메일이 오면서 내 카드 조회를 해봐야겠다는 생각이 들었다. 왜 한국에 살고 있는 나에게 일본에서 카드 결제 공지를 하는가?당연히 잘못 왔을거라고 생각하긴 하지만 너무 불안하다. 내 개인정보가 혹시 외국으로 빠져나간건 아닌가 의심스럽다.구글에서 검색을 해도 일본어 천지...아무도 이런 메일을 받아본적이 없는건지 블로그가 아예 없다.실제로 있는 카드는 맞는 것 같다.네이버 블로그에서 관련글이 하나 있는데 도요타 ts cubic 카드에서 스팸같이 왔다고 한다.https://blog.naver.com/for-infinity/222335343928이곳에서는 실제로 URL을 눌러달라는 메일이 왔다고 한다.스팸이면 url을 줄텐데 그것도 아니다. 진짜 카드 값 공지다.하.. 불안한 ..
내 카드, 계좌 조회하는 앱어카운트인포는 금융결제원에서 운영하는 계좌정보통합관리앱이다.내 계좌, 보험, 카드, 대출 등을 조회할 수 있는 앱이다.요즘은 은행에서 신청하면 마이데이터라는 이름으로 내 계좌, 카드, 대출을 한꺼번에 모아볼 수 있게 해준다. 보험쪽은 굿리치나 보닥에서도 해준다.그런데 은행이나 보험쪽은 이익을 위하는 회사이므로 광고나 부가서비스를 넣어준다. 부가서비스는 부가서비스대로 누리면 되지만 진짜 조회목적이라면 군더더기가 없고 위아래 뜨는 광고로 헷갈릴 없는 어카운트인포가 가장 나은 것 같다.안드로이드, 아이폰 모두 가능하다.현재 나는 안드로이드라서 안드로이드 위주로 설명!어카운트인포 사용하기카드 조회를 하려면 플레이 스토어에서 어카운트인포를 먼저 설치해주어야 한다.아래 링크는 플레이스토어..
워드 단락기호워드에서는 엔터를 치면 아래와 같이 단락기호로 표시가 나옵니다.글자만 할 때는 크게 거슬리지 않는데 표나 그림을 하게 되면 많이 거슬리게 됩니다.단락기호로 인해 굉장히 난잡해보입니다.단락기호 없애기단락기호를 없애는 방법은 아주 간단합니다. 먼저, 파일-옵션-표시에 들어갑니다.빨간박스로 친 단락기호를 해제해줍니다.옵션을 나오면 단락기호가 없어진 것을 확인할 수 있습니다. 함께보면 좋은글MS 워드 자주쓰는 표 등록하기워드 빈칸 기호 체크박스 표시워드 수식 삽입 단축키
MS 워드 자주쓰는 표 등록하기워드에서 자주 쓰는 표를 다시 만들려면 골치가 아픕니다. 겨우 이쁘게 만들어놨는데 그걸 다시 또 만들려고 한다면 귀찮다 못해 괴롭습니다. 표는 도구인데 도구를 이쁘게 위해서 주요작업시간을 써버린다면 일의 효율성이 굉장히 떨어지는 일이 될 것입니다.MS 워드에서는 만든 표를 등록한다면 표를 다시 만들 일 없이 언제든지 갖다 쓸 수 있습니다.표 등록하기먼저 아래 그림과 같이 표 왼쪽 상단에 십자 모양을 선택해 표 전체선택을 합니다.표를 전체선택한 상태에서 삽입 - 표 - 빠른 표 - 선택 영역을 빠른 테이블 갤러리에 저장을 선택합니다.기본 제공하는 표도 보입니다. 이런 것도 활용해보면 좋겠네요.아무튼 선택 영역을 빠른 테이블 갤러리에 저장을 선택하면 아래와 같은 창이 뜹니다.이..
수학 도형 만들기(feat.알지오매스)수학에서 쓰는 좌표평면이나 도형을 손쉽게 만드는 곳을 알게 되어 공유합니다. 수학문제를 만들 때 도형이 필요할 때가 있는데 파워포인트로 일일히 하기에는 뭔가 한계가 있어서 찾다보니 알지오매스(Algeomath)라는 곳을 알게 되었습니다.알지오매스는 한국과학창의재단에서 교육부와 17개의 시도교육청에서 만든 프로그램입니다. 웹으로 이용할 수 있고 나라에서 운영하기 때문에 갑자기 사라질리 없는 안전한 사이트라고 합니다. 그래서 그런지 회원가입 없이도 사용가능합니다.알지오매스 둘러보기기본화면은 좌표평면으로 나타나고 2D,3D 모두 가능합니다.내가 직접 만드는 것이라서 모든 도형을 만들 수 있습니다.다각형, 평행선, 원, 그밖에 각종 도형을 다 만들 수 있고 수학적으로 표현이..
판다스 두 시리즈가 같은지 판단하기두 시리즈가 동일한지 알아보기 위한 방법입니다. 데이터가 너무 크면 변화를 알아차리기 어렵거나 변화가 있다면 눈으로 확인하기보다 컴퓨터가 해주면 간편하게 할 수 있으니 최대한 활용하려 합니다.equals()equals라는 시리즈 매쏘드가 있습니다. 이 메쏘드는 두 시리즈가 동일하다면 True, 아니면 False를 반환합니다.import pandas as pdseries1 = pd.Series([1, 2, 3, 4])series2 = pd.Series([1, 2, 3, 4])if series1.equals(series2): print("두 시리즈가 동일합니다.")else: print("두 시리즈가 동일하지 않습니다.")== 사용== 통해서도 가능합니다.if (s..
smart service.exe 정체 및 삭제 방법어베스트에 위험이 차단되었다며 경고창이 떴습니다. smart service.exe 가 위험하다고 경고를 하네요. 이런 건 언제 설치되었는지 기억도 안납니다. 이렇게 나도 모르게 설치되는 프로그램이 은근 많은 것 같습니다.smart service.exe 의 정체smart service.exe는 쇼핑몰에서 ISP 결제를 선택하면 보안 프로그램을 설치하게 되는데 그 때 추가로 들어오는 광고 프로그램입니다.갑자기 쇼핑몰 바로가기가 즐겨찾기에 만들어졌거나 크롬 실행하면 새창으로 쇼핑몰 홈페이지가 나타난다면 이 프로그램의 소행일 가능성이 있습니다. 만약, 즐겨찾기된 바로가기를 삭제해도 다시 생성된다면 이 프로그램에서 계속 생성하는 것이니 프로그램을 지우는 것을 추천..
뜬금없는 경고창최근 백신 프로그램을 어베스트로 갈아탄 후 Blacklist라며 경고창이 뜨더군요. 악성 소프트웨어일 수 있다며 겁을 주니 안 찾아볼수가 없네요. smmgr.exe 는 도대체 뭐고 p.icoxs.c.kr은 어디인지 그동안 아무 문제 없이 써왔는데 경고창이 뜨니 찜찜합니다.smmgr.exe 정체smmgr.exe는 그리스 프로그램으로 컴퓨터 자원을 공통으로 배분하고 활용하는 프로그램입니다. 바이러스는 아니고 웹하드를 이용하면 나도 모르게 설치되는 프로그램이라고 합니다. SmMgrDaemon이라는 이름으로 자동으로 실행됩니다.아무래도 시작 프로그램으로 작동하면서 다른 컴퓨터에게 내 자원을 주고 있었을 수도 있기 때문에 컴퓨터 성능을 나도 모르는 사이에 갉아먹고 있었습니다. 눈의 띄게 느려진건 알..
fakun 멀웨어 대체 프로그램(ImageAssistant batch image)이미지 추출 크롬 확장 프로그램인 fakun이 멀웨어 이슈로 사용이 중단되었습니다. 웹에서 이미지를 가져오는데 이것만큼 좋은 게 없었는데 아쉽습니다.할 수 없이 대체 앱으로 ImageAssistant batch image를 쓰고 있습니다. 동작방식이나 ui가 fakun과 가장 유사한 방식이어서 쉽게 적응했고 생각보다 괜찮아서 만족하고 쓰고 있습니다.ImageAssistant batch image 설치하기ImageAssistant Resource batch image는 크롬 확장프로그램에서 받을 수 있습니다.아래 링크가 설치 사이트입니다. (크롬 기준입니다.)https://chromewebstore.google.com/deta..
데이터프레임 컬럼값 타입 확인하고 바꾸기데이터를 외부에서 받아오면 불가피하게 타입이 고르지 못하고 중구난방으로 다운로드됩니다. 이 상태로 데이터프레임으로 전체 행, 열 계산을 하려고 할 때 애를 먹을 수 있습니다. 이번 포스팅은 컬럼값 타입을 확인하고 혹시 다른 타입이 있다면 어떻게 바꿔야 하는지에 대해 소개합니다.컬럼값 타입을 확인하려면 isintance 함수를 알아야 합니다.파이썬 타입 확인 함수 isintance 파이썬에서 데이터타입을 boolean으로 판단하려면 isinstance()함수 사용합니다. isintance는 파이썬의 내장함수라서 따로 설치할 라이브러리가 없습니다. 파이썬이 설치되어 있다면 바로 쓸 수 있습니다. isinstance()는 object(변수나 객체), classinfo(타..