2022-01-01から1年間の記事一覧

時系列データ ロングフォーマットからワイドフォーマットの変換 マルチインデックスのフラット化

# pivot で ロングフォーマットからワイドフォーマットに変換 waterlevel_df_wide = waterlevel_df.pivot(index=['date','station', 'river'], columns='hour' , values=['value']) # 行の MultiIndex をフラット化 waterlevel_df_wide.columns = waterlevel…

DP100 / Azure Data Scientist Associate / Azure AI Engineer Associate 更新試験用の対応方法

1. まずは更新試験を受けて対象となっているモジュール(章)を把握する 更新試験に出るのは下記の一部のモジュールコース DP-100T01--A: Azure でのデータ サイエンス ソリューションの設計と実装 - Training | Microsoft Learn 2. 点数の低かったモジュール…

Azure Machine Learning CLI DP100

ローカルに環境を作るといろいろトラブル起きるので、Azure Machine Learning Studio の Notebooks で実行することknaka20blue.hatenablog.com

Azure Machine Learning SDK ワークスペースの構成ファイルの取得方法 DP100

ワークスペースの構成ファイルはこういうの { "subscription_id": "1234567-abcde-890-fgh...", "resource_group": "aml-resources", "workspace_name": "aml-workspace" } Microsoft Azure Machine Learning Studio 上ナビからワークスペース名のタブを開く…

5万円で JDLA の E資格 に挑戦 ! スキルアップAI『現場で使えるディープラーニング基礎講座』 受講記録 その3 JDLA E資格 2022 #2 合格!!

なんとか合格 5万円の講座でも合格できました スキルアップAIの皆さんありがとう 忘れないうちにメモ 受験前に知っていたこと 2022 #2はシソーラスがかなり変化 ただし、特異値分解が試験に出ないと気付いたのは一週間前... 数十時間が無駄になった 試験中に…

Azure AI 102 AI Engineer 学習環境 の構築 Visual Studio Code と Anaconda を使って

Anaconda で Python 3.8 環境を作る conda create -n python38 python=3.8 -y conda activate python38 >conda info -e # conda environments: # base C:\Users\hoge\Anaconda3 python37 C:\Users\hoge\Anaconda3\envs\python37 python38 * C:\Users\hoge\An…

Google Drive ドライブ で OCR する方法

1) 画像を Google Drive に置く 2) Webアプリケーションの Google Drive から画像を右クリック。アプリで開く → Googleド キュメント

WSL に Docker インストール

sudo apt-get update sudo apt-get install ca-certificates curl gnupg lsb-release # Docker 公式のGPG 鍵を追加 curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /usr/share/keyrings/docker-archive-keyring.gpg # 安…

Cupy インストール Windows

>conda install -c conda-forge cupy cudnn cutensor

matplotlib で IPA の日本語フォントを使えるようにする方法 Windows

IPAフォントをダウンロード moji.or.jp ダウンロードした zip ファイルを解凍して ipaexg.ttf ipaexm.ttf を matplotlib のフォントディレクトリにコピーする COPY ipaexg.ttf C:\Users\ユーザ名\Anaconda3\Lib\site-packages\matplotlib\mpl-data\fonts\ttf…

Windows には サムスン Samsung の SSD がおすすめ

「Samsung Data Migration」がとても優秀なので WIndows の Cドライブ を クローンしたい方には Samsung の SSD がおススメです 私の場合、先に クルーシャル Crucial の SSD で 「Acronis True Image for Crucial」を使ってクローンしたのですがうまくいか…

Anaconda仮想環境下でのCUDA環境の構築 [Python, Windows11]

環境変数 Path に 「C:\Users\\Anaconda3\Library\bin」 追加しておく python の実行で文字コード関連のエラーが出いたら C:\Users\\.python_history を削除してみる Anaconda 仮想環境の構築 # 仮想環境の python バージョンは base と同じにした方がトラブ…

データサイエンティスト検定 総合スコア 86.6% 合格したかな?

データサイエンティスト検定 リテラシーレベル | 一般社団法人 データサイエンティスト協会 データサイエンティスト検定 リテラシーレベル を 受験しました 合否判定はまだ出ていないのですが、総合スコア 86.6% だったので、おそらく合格しているのではと楽…

浮世絵 買いました 葛飾北斎 神奈川沖浪裏 The Great Wave

葛飾北斎「神奈川沖浪裏」 最近Outlook等のプロファイル画像にパブリックドメイン素材集からみつけた江戸時代の浮世絵師、葛飾北斎の「神奈川沖浪裏」という作品を使っているのですが、結構気に入っているのでボーナスが出ることもあり購入してみました。「…

5万円で JDLA の E資格 に挑戦 ! スキルアップAI『現場で使えるディープラーニング基礎講座』 受講記録 その2

www.skillupai.com 残っていた、深層学習知識テストに合格 4つの修了条件すべて達成した 1) 数学知識テスト (合格) 2) 機械学習知識テスト (合格) 3) 深層学習知識テスト (合格) 4) AIモデル作成課題 (完了) 目標としていた1ヶ月で修了できたので、8月のE資…

5万円で JDLA の E資格 に挑戦 ! スキルアップAI『現場で使えるディープラーニング基礎講座』 受講記録 その1

www.skillupai.com JDLAの E資格 は 決められた認定プログラムを修了しなければ受験することができない 自動車運転免許の教習所や医師免許の医学部卒業と同じようなシステムがとられている E資格認定プログラム事業者は多数あるもののいずれも結構いい値段が…

qiita.com キカガク 脱ブラックボックスコース(無料) 終了 修了テストも全部正解できるまでやった無料コンテンツとしてはかなりおススメできます

【E資格】 「ゼロから作るDeep Learning」2周

2周読んだ。雰囲気は分かったと思うソースコードも実行してみてMNISTの認識制度が99.4%になったのも確認できた良書ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装作者:斎藤 康毅オライリージャパンAmazon

Azure Machine Learning SDK の概要 dp100

docs.microsoft.com Azure リソースとしてのワークスペース 演習 Azure Machine Learning ワークスペースを作成する 01 - Get Started with Notebooks 02 - Get AutoML Prediction 03 - Get Designer Prediction翻訳.ipynb実験を実行する 04 - Run Experimen…

Azure Machine Learning を使用した機械学習ソリューションの構築と運用 dp 100 で AI 実装 メモ

docs.microsoft.com

回帰モデルの評価指標 メモ

よく忘れるので すぐに確認できるようにメモ MAE (Mean Absolute Error ) 平均絶対誤差 絶対誤差 = 絶対値 ( 正解値 - 予測値 ) ← これをすべてのサンプルで計算して 平均を取る 誤差の平均なので直感的にわかりやすい 外れ値の影響を低減した形での評価に適…

PyCaret の plot_model でグラフを書いて日本語フォントが文字化けしたときにやったこと

!pip install japanize_matplotlib import pandas as pd from pycaret.regression import * import matplotlib.pyplot as plt import japanize_matplotlib

Azule ML 学習環境 mslearn-dp100 の構築メモ DP100

ローカルに環境を作るといろいろトラブル起きるので、Azure Machine Learning Studio の Notebooks で実行することknaka20blue.hatenablog.com