tkherox blog

データサイエンスおよびソフトウェア開発、たまに育児についての話を書いています

モデル評価

SHAPの各種可視化プロットを日本語化する

今回の記事は備忘録も兼ねて軽めの内容を記載していきます. はじめに 実行環境 問題 対策 まとめ はじめに 機械学習のモデル解釈で頻繁に用いられるのがSHAPです. 実際のデータ分析の現場で頻繁に用いられるライブラリとしては shap があります. github.c…

データ分析におけるキャリブレーション

キャリブレーションとは クラス分類におけるキャリブレーション キャリブレーションの評価指標 Reliability Diagram Expected Calibration Error(ECE) Maximum Calibration Error(MCE) キャリブレーション方法 Isotonic Regression Platt Scaling キャリブレ…

SHAPでモデルを解釈してみた

はじめに SHAPとは ライブラリについて インストール データセット モデル作成 LightGBM Xgboost SHAP Value Violin Plot Dependence Plot Monotonic Constraints まとめ はじめに XAI(Explainable AI)という言葉を聞いたことはありますでしょうか. 日本…

回帰における評価指標

回帰の評価指標はこれ 評価指標の種類 決定係数 平均絶対誤差(MAE) 平均二乗誤差(MSE) 平均二乗平方根誤差(RMSE) 平均絶対パーセント誤差(MAPE) なぜ「MAEとRMSE」なのか 整数値で均一な観測データを含む場合 外れ値の観測データを含む場合 予測値が小数点以…