NA의 잡 블로그

2021.09.08 수업 필기 1. Assocation Rule 이란? Study of "what goes with what?" 어떤 물건을 어떤 물건과 함께 살까? 동시 발생의 가능성이 큰 사건/규칙을 발견! 예) 물건 X를 산 고객은 물건 Y도 구매한다. = 'market basket analysis' 또는 'affinity anlaysis'라고 불린다 데이터의 형태 : transaction-based 또는 even-vased 예) 한 바구니에 든 여러 개의 상품들 장바구니 ID (Transaction) 구매 물품 ID (Items) 1 a,b,c 2 a,d 3 b,d ☞ '물건 A를 산 사람은 물건 B도 사더라'하는 규칙(Rules)을 발견하는 것이 목표! 2. Generating Rules [용어..

이 글은 책 「파이썬 머신러닝 완벽가이드」와 공돌이의 수학정리노트 깃허브 글을 바탕으로 작성되었습니다. GMM(Gaussian Mixture Model)란? 여러 개의 정규분포를 이루는 데이터가 합쳐진 집합(모집단)에서 데이터가 추출된 것(표본)이라는 가정하에 군집화를 수행하는 알고리즘 GMM에서의 모수 추정 : 1. 개별 정규 분포의 평균과 분산 2. 각 데이터가 어떤 정규 분포에 해당하는지의 확률 MLE(Maximum Likelihood Estimation, 최대우도법)이란? 1. MLE 정의 모수적(parametic)인 밀도 추정 방법으로 파라미터 \( \theta = (\theta_{1}, \cdots, \theta_{m}) \) 으로 구성된 어떤 확률 밀도함수 \( P(x| \theta) \) ..

이 글은 책 「파이썬 머신러닝 완벽가이드」와 다크프로그래머님의 블로그 글을 바탕으로 작성되었습니다. 평균 이동(Mean Shift)란? - KDE 기반으로 밀도가 가장 높은 지점으로 군집 중심점을 이동시켜 군집화를 수행하는 알고리즘 KDE(Kernel Density Estimation, 커널 밀도 추정)이란? 1. 밀도 추정 : 관측된 데이터(표본)의 분포를 통해 원래 변수(모집단)의 확률 밀도(분포)를 추정하는 것 기계 학습, 확률과 통계에서의 밀도 = 확률 밀도(probability density) 어떤 변수 x의 밀도(density)를 추정하는 것은 x의 확률 밀도 함수 (probability density function, pdf)를 추정하는 것과 같음 f(a)는 x=a에서의 확률 밀도 = "변수..

이 글은 책 「파이썬 머신러닝 완벽가이드」를 바탕으로 작성되었습니다. K-평균 (K-means)란? - 주변 데이터까지의 거리의 평균 지점으로 군집 중심점을 이동시켜 군집화를 수행하는 알고리즘 작동방식 1. 임의의 군집 중심점(centroid)를 설정하고 해당 지점에 가까운 데이터 포인트들을 선택 2. 선택된 데이터 포인트들의 거리 중심점으로 이동하고, 이동된 지점에서 가까운 데이터 포인트들을 선택, 다시 군집 중심점을 거리 평균 지점으로 이동 3. 더 이상 군집 중심점의 이동이 없으면 반복을 멈추고 해당 군집 중심점에 가까운 데이터 포인트들을 하나의 군집으로 라벨링 사이킷런 클래스 KMeans class sklearn.cluster.KMeans(n_clusters=8, *, init='k-means++..

군집화(Clustering)란? 비지도학습의 한 종류로, 비슷한 속성을 지닌 데이터끼리 하나의 군집(cluster)를 구성하도록 라벨링하는 것을 말한다. 동일한 군집 안에 존재하는 데이터들끼리의 차이는 최소화하고, 다른 군집에 존재하는 데이터와의 차이는 최대화하는 것을 목표로 한다. 군집화 알고리즘의 종류 거리 기반 알고리즘 1. K-평균 (K-means) - 주변 데이터까지의 거리의 평균 지점으로 군집 중심점을 이동시켜 군집화를 수행하는 알고리즘 - 알고리즘이 간결하고 직관적이기 때문에 가장 일반적으로 사용되는 군집화 알고리즘 - 몇개의 군집을 설정할지 결정하기 어려움 - 속성의 개수가 많을수록/차원이 올라갈수록 군집화 정확도가 떨어짐 (→ PCA 차원 축소 적용) - 원형 구조의 데이터 세트에는 효과..

지난 5월부터 시작한 멋쟁이사자처럼 인공지능통합과정을 수료했다. 짧게나마 수강 후기를 남겨야겠다. (일단은 생각나는대로 적고 차차 업로드해야겠다...) 자소서/면접 관련 이야기는 여기로 ↓ https://donghajoha.tistory.com/20 [KDT] 멋쟁이사자처럼 국비교육 합격 후기 (자소서/면접) 나의 첫번째 KDT 과정이었던 멀티캠퍼스의 데이터사이언스/엔지니어링 과정을 수강 철회하고, 두번째로 등록한 멋쟁이사자처럼의 인공지능 통합과정 합격 후기를 써볼까한다. https://k-digital.likel donghajoha.tistory.com 장점 모든 국비교육과정이 국가 예산으로 진행되는 일이라서 출결관리를 엄청 까다롭게 한다. 수강생 입장에서는 가끔 짜증?나는 일이긴 한데 그만큼 교육과정..

0. homebrew 및 git 설치 https://brew.sh Homebrew The Missing Package Manager for macOS (or Linux). brew.sh 1) 맥북 intel 칩일 경우, /bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)" 2) 맥북 m1 칩일 경우, /bin/bash -c "$(curl -fsSL https://gist.githubusercontent.com/nrubin29/bea5aa83e8dfa91370fe83b62dad6dfa/raw/48f48f7fef21abb308e129a80b3214c2538fc611/homebrew_m1.sh..

나의 첫번째 KDT 과정이었던 멀티캠퍼스의 데이터사이언스/엔지니어링 과정을 수강 철회하고, 두번째로 등록한 멋쟁이사자처럼의 인공지능 통합과정 합격 후기를 써볼까한다. https://k-digital.likelion.net 멋쟁이사자처럼 전액국비지원 교육 과정 모집 K-Digital Training은 멋쟁이사자처럼과 고용노동부가 함께하는 AI 인재 양성 프로그램으로 내일배움카드가 있다면 무료로 수강할 수 있는 온/오프라인 통합 인공지능 훈련입니다. k-digital.likelion.net 0. 멋쟁이사자처럼을 선택한 이유 나는 10회차 프로젝트로 익히는 실전 데이터 분석 및 딥러닝 입문 과정에 지원했다. 여러 KDT 기관, 교육과정 중에 데이터 분석/인공지능/데이터사이언스 위주로 알아보았고 (웹 개발X),..