Python

Python

[python] conditional to generate new column조건 걸고 새 칼럼 만들기

파이썬에서 조건 걸고 새칼럼 추가하기 R에서는 mutate + ifelse 로 간단하게 가능함 파이썬에서는 조건의 개수에 따라 편하게 쓰는 방법이 다른것 같음 #1. 조건이 1개일 때 : np.where df2['eGFR_ab90'] = np.where(df2['eGFR_ckd']

Python

[python] pandas를 이용하여DataFrame 무작위 추출하기,Random sampling

machine learning에서 데이터 구조가 imbalance할 때 down sampling 기법 중 가장 간단한 방법 무작위 추출 : random sampling random state를 꼭 설정해주어야 reproducible 함. #1. DataFrame.sample 원하는 개수만큼 parameter : n= 원하는 개수 전체 dataframe의 길이의 비율 ; parameter : frac= 원하는 비율(0~1) ; replace=true 해줘야함 df=pd.read_csv("C:/Users/comcom/knhanes_eGFR/ua_full.v1.csv") abnormal = df.query('eGFR_ab==1') normal_sample = df.query('eGFR_ab==0').sampl..

Python

[python] best threshold & roc-curveBest threshold를 찾고 roc curve에 표시하기

binary classification에서 best threshold를 찾고 roc-curve에 표시해보자 best threshold는 Youden’s J statistic를 이용한다. 참고: en.wikipedia.org/wiki/Youden%27s_J_statistic Youden's J statistic - Wikipedia From Wikipedia, the free encyclopedia Jump to navigation Jump to search Index that describes the performance of a dichotomous diagnostic test Youden's J statistic (also called Youden's index) is a single statisti..

Python

[python] regression model의 성능 지표로 쓰일 수 있는 bland altman plot 그리기

bland altman plot을 이용해서 regression model의 성능을 확인해 볼 수 있다. bland altman 참고 : en.wikipedia.org/wiki/Bland%E2%80%93Altman_plot Bland–Altman plot - Wikipedia Bland–Altman plot example A Bland–Altman plot (difference plot) in analytical chemistry or biomedicine is a method of data plotting used in analyzing the agreement between two different assays. It is identical to a Tukey mean-difference plot,[1..

Python

[python][sklearn] scikit-learn Classification_report를 이용하여 머신 러닝 분류 모델 평가 지표 한번에 보기

sklearn 에서 classification_report module을 사용하여 평가 지표를 한번에 볼 수 있음 #1. classification_report from sklearn.metrics import classification_report y_pred = model.predict(X_test_features) print(classification_report(y_test, y_pred, target_names=['normal', 'abnormal'])) 참고 : scikit-learn.org/stable/modules/generated/sklearn.metrics.classification_report.html sklearn.metrics.classification_report — scikit..

Python

[python][seaborn] Grouped Boxplot, Multiple Boxplot, 그룹별 boxplot

#1. source data print(df_age_error.info()) #2. seaborn import seaborn as sns sns.boxplot(y='pred-true', x='age_gp', data=df_age_error) reference : https://cmdlinetips.com/2019/03/how-to-make-grouped-boxplots-in-python-with-seaborn/ How To Make Grouped Boxplots in Python with Seaborn? - Python and R Tips Boxplots are one of the most common ways to visualize data distributions from multiple groups..

Python

[python]연속형 변수의 범주화 : Categorization

참고 : https://rfriend.tistory.com/521 #1. pd.cut()을 이용해서 continuous -> categorical 변환. #2. pd.cut(X, bins, labels) #2.1 X : dataframe, bins : bins=[미포함,포함], labels=['a'] #2.2 source data print(df_age_error) #2.3 age categorization age_cate = [18,29,39,49,59,69,80] age_cate_name = ['20','30','40','50','60','70'] df_age_error['age_gp'] = pd.cut(df_age_error['age'], bins=age_cate, labels=age_cate_na..

Python

[python][scikit-learn] KBinsDiscretizer 이용해서 Discretization 하기

scikit-learn.preprocessing 에서 KBinsDiscretizer 를 이용해서 Discretization 하기 continuous variable을 grouping 할 때 유용함 continuous 단일 column을 이용해서 grouping bins=2일때 세가지 방법 쉽게 이해하기 #1. strategy = 'uniform' #2. strategy = 'quantile' #3. strategy = 'kmeans' purpose : y_train_pd 라는 데이터프레임의 pred-true라는 column으로 grouping #0. data train_pt = pd.DataFrame(y_train_pd['pred-true']) #1. strategy = 'uniform' : mean 기..

Chandler.j
'Python' 카테고리의 글 목록 (5 Page)