こーし

■ケミカルエンジニア
■化学メーカー勤務
■現場配属の生産技術
■化学工学技士、統計検定1級など
■化学工学 × データサイエンス
pythonと数理統計学を勉強中!

Python データの前処理

【python】大量のcsvファイルをpickleに保存して高速化

2024/3/27    ,

Pythonを使って大量のCSVファイルを一度に読み込み、pickleファイルに保存して高速化する方法を解説します。これにより、次回からのデータの取り扱いが迅速になり、データの前処理時間を大幅に削減することができます。

python 単変量の外れ値除去

Python データの前処理

【python】単変量の外れ値除去:3つの手法を比較

2024/4/6    ,

「pythonを用いた単変量の外れ値除去」についてわかりやすく解説します。外れ値を除去する3つの手法について、比較しながらそれぞれの特徴について詳しく解説します。

Python データの前処理

【python】プロセスデータ の平滑化(savgol_filter)

「プロセスデータの平滑化(savgol_filter)」についてわかりやすく解説します。本記事では、Savitzky-Golay法という平滑化手法を紹介し、最適な平滑化パラメータの決定方法について具体的に解説していきます。

プロセスデータの特徴量エンジニアリング

Python データの前処理

【python】プロセスデータの特徴量エンジニアリング

「プロセスデータの特徴量エンジニアリング」についてわかりやすく解説します。pythonを使ってプロセスデータに特有の特徴量を作り出す手段として、時間遅れ変数(ラグ特徴量)、二乗項、交差項の作成方法を紹介します。

Python 回帰モデル

【SHAP】プロセスデータにおける機械学習の解釈

2024/4/13    ,

「機械学習を解釈する技術」という本で紹介されているPFI、PD、ICE、SHAPといった機械学習の解釈手法を、化学プラントのプロセスデータを題材に解説します。「予測精度」と「解釈性」のトレードオフから解放されましょう!

ヒストグラムの作成方法

Python データの可視化

【python】ヒストグラムの作成方法(スタージェスの公式)

2024/4/13    ,

「【python】ヒストグラムの作成方法(スタージェスの公式)」についてわかりやすく解説します。スタージェスの公式やその他の手法を用いて「ビン数」を適切に設定し、正しくデータ分布を確認する手法を解説します。

pandasによるプロセスデータの抽出方法

Python データの前処理

【python】pandasによるプロセスデータの抽出方法

2024/4/13    ,

「pandasによるプロセスデータの抽出方法」についてわかりやすく解説します。特徴量(列)を指定して抽出したり、期間(行)を指定して抽出する方法を詳しく解説します。pandasを使った効率的なデータの取り扱いについて学びましょう!

化学プロセスのサンプルデータ入手方法

Python 環境構築

【Python】化学プロセスのサンプルデータ入手方法

2024/3/25  

化学プロセスのサンプルデータ入手方法について解説します。化学プロセスのような時系列データのサンプルはなかなか見つからないため、入手方法をまとめてみました。データの前処理やモデル構築の検証に役立ててください。

ソフトセンサー作成方法

プロセス制御 化学工学

【図解あり】ソフトセンサーの作成方法

2024/3/17    

ソフトセンサーの作成方法についてわかりやすく解説します。ソフトセンサーが有用であることはわかっているけど、どうやって作成したら良いのかわからないという方に向けて体系的に解説してみました。

ソフトセンサーとは

プロセス制御 化学工学

【図解あり】ソフトセンサーとは 〜コスト削減の武器〜

2024/3/17  

「ソフトセンサーとは」についてわかりやすく解説します。ソフトセンサーは、工場や製造現場における品質安定化や運転コスト削減のための大きな武器となり得ます。ソフトセンサーの理解を深め、品質安定化やコスト削減のための武器を手に入れましょう!