뭐라도 시도해보자 뭐라도 시도해보자

머신러닝의 과제가 끝나고 오늘은 해설 강의를 들었다. 문제에 많은 것을 적어준 덕분에 대부분은 비슷하게 했지만 나는 로지스틱회귀를 사용했지만 튜터님은 랜덤 포레스트를 사용하였다. 이 방법을 사용하니 같은 변수의 같은 전처리한 데이터에 대해서 정확도와 f1스코어의 차이가 조금씩 나는 것을 볼 수 있었다. 이를 통해 더 좋은 모델을 사용하면 더 의미있는 결과를 얻을 수 있구나를 알았고 기본적인 머신러닝를 사용하는 순서를 배울 수 있어서 좋았다.

이번주는 머신러닝이라는 것을 배웠다. 우리가 흔히 아는 선형모델의 머신러닝을 기초로 배웠고 x라는 값을 통해 가중치와 편향을 알면 y를 알 수 있는 기법이였다! 상당히 흥미로웠으며 이를 통한 예측값과 우리가 아는 실제값의 오차를 분석하여 얼만큼 정확한가 등등을 배울 수 있는 기회였다 이후로 배운 심화에서는 실상 우리가 쓰는 데이터는 선형적이지 않다라는 주제로 이상치도 많고 데이터가 많이 요상한 형태로 주어진다 이를 위해 우리는 log도 사용하고 의사결정나무, 랜덤 포레스트 같은 기법을 다루었다. 심화로 가면서 아 머신러닝이 정말 분야가 어렵구나...라고 느끼는 한 주였다. 이를 활용한다면 데이터를 활용하여 정말 많은 것을 할 수 있고 꽤나 인상적인 인사이트를 도출할 수 있을것 같았다.!

과제를 해결해 나가면서 드는 의문이 생겼다. 우리가 성별인 컬럼 Sex에 대한 인코딩을 진행하려고 하는데 반복되는 코딩에 대해 함수로 만들어서 처리를 하려고 했다. y_train과 y_test 데이터에 들어있는 'y'라는 컬럼에 문자열을 받아 no면 0을 yes면 1을 반환하는 함수를 짜려고 하는데 if문을 통해서 간단히 만들수 있었다. 하지만 나의 생각은 함수안에 labelencoder를 써서 자동으로 인코딩을 만들고 싶어서 fit_transform을 썼는데 계속 오류가 나서 문제를 해결하지 못하였다.. :( fit_transform에는 1차원 배열이 와야했고 그래서 배열을 씌운 x값을 받으면 오류가 나고 그렇다고 시리즈 형태로 넣자니 또 다른 오류가 발생하는 문제... 그렇게 오늘은 오류와 함께 밤을..

어제 과제가 나오고 오늘은 머신 러닝 과제를 해결하기 위해서 시간을 썼다. 과제는 우리가 좋은 주피터 데이터 셋을 구했는데 구멍이 뚫렸있으며 구멍을 채우는 것을 목표로 진행되었다. 기본적으로 데이터를 불러오고 전처리할 데이터를 살피고 (info, describe( include='all')) 처리하였다. 이상치로 탐지한 데이터가 -8000 이 찍혀있었고, 다른 데이터에 비해 많이 멀고 이상하였다. 은행이라는 가상 주제에 -8000은 미친 마이너스 통장의 소유자가 아니면 존재하지 않을거 같았고 (주관적 생각) 객관적으로는 우리는 데이터 분석에 있어서 머신 러닝을 통해 해당 가설에 맞는 인사이트 도출을 목표로 한다. 이에 필요한 도구중 하나가 머신러닝의 기법들이고 인코딩,스케일링 등이 있는데 스케일링을 하는..

선형회귀 Y는 종속 변수, 결과 변수 X는 독립 변수, 원인 변수, 설명 변수 평가 지표 MSE - 최소화해야함. R2 Square - 설명력

CAR_RENTAL_COMPANY_CAR 테이블과 CAR_RENTAL_COMPANY_RENTAL_HISTORY 테이블과 CAR_RENTAL_COMPANY_DISCOUNT_PLAN 테이블에서 자동차 종류가 '세단' 또는 'SUV' 인 자동차 중 2022년 11월 1일부터 2022년 11월 30일까지 대여 가능하고 30일간의 대여 금액이 50만원 이상 200만원 미만인 자동차에 대해서 자동차 ID, 자동차 종류, 대여 금액(컬럼명: FEE) 리스트를 출력하는 SQL문을 작성해주세요. 결과는 대여 금액을 기준으로 내림차순 정렬하고, 대여 금액이 같은 경우 자동차 종류를 기준으로 오름차순 정렬, 자동차 종류까지 같은 경우 자동차 ID를 기준으로 내림차순 정렬해주세요. # 11월에 대여가 불가능한 차량 with ..

이해 안되는 통계를 오전에 듣고 머리가 터져 오후에는 데이터 시각화 강의를 들었다. 나의 눈높이의 맞춰 만든 강의인가..? 싶을 정도로 강의의 설명이 좋았고 처음하는 사람도 이해가 잘 되었다. 그러나! 갑자기 주피터가 먹통이 되고 vscode는 왜인지 matplotib가 자꾸 설치가 되어있는데 모듈이 설치 안되어있다고 해서 여기서 한 3시간 쏟았는데 못했다. ㅎ 주피터는 다시 작동해서 강의를 다시 들었지만 덕분에 마지막 장을 못들었다.. 내일은 주피터 노트북과 함께 다시 간다.

통계 강의 파이썬 실습을 포기하고 (너무 어려움 ㅠ) 나머지 강의를 들어가고 있었다. t-test와 anova에 대해 설명을 꽤나 오래한 강의였는데 상당히 어려웠다. 마치 대학교 강의를 듣는 기분이였따. 이해가 될 쯤에는 새로운 무언가가 나오니 개념이 너무 헷갈려서 여러번 다시 뒤로 가서 강의를 반복 재생하는 하루였다. 그래서 다 못들었다 아직도,, 내일은 다 들고 데이터 시각화 하는 강의를 듣을테다