あきらぼ

Tensorflowの画像分類器の学習設定で損失が減らずハマった話

こんにちは。現在、VTuberアイドルグループであるHololiveの画像分類器を作成しているのですが、CNNのモデル設定でハマったのでそのことを書こうと思います。ちなみにHololiveはこんなグループです。 所属タレント一覧 hololive（ホロライブ）公式サイト 前提条件 学習 過学習対策あり 過学習対策なし 結論 (adsbygoogle = window.adsbygoogle []).push({}); 前提条件 まず、前提条件としては学習データとしてはホロライブメンバーのうち9人分の画像データをGoogle画像検索で集めました。 以下の方法です。 aki-lab.ha…

2022/05/22 00:15

Python：grobでフォルダ内の大量の画像すべてを一括で読み込む

こんにちは。 今回は先日落としてきた大量の画像データの読み込みに関してメモがてら書こうと思います。 先日は画像分類器のために画像を大量にダウンロードしてきました。 aki-lab.hatenadiary.com すると格納フォルダはこんなことになっています。 一応画像はナンバリングされているのですが、関係ない画像等を抜いたりもしているので、連番ではありません。 簡単に一括で処理できる方法がないかと調べてみたらgrabというパッケージがありました。 簡単な例を以下に書きます。 すると以下のような結果を返します。 ./Train_Data/pekora\pekora002.jpg ./Train_…

2022/05/19 23:36

Image Downloaderを使用したGoogle画像検索サムネイル一括ダウンロード

こんにちは。 最近VTuberアイドルであるHololiveが身近で流行っているのですが、メンバーが多く覚えきれないので画像分類器を作成しようと考えています。 そこで、教師データとなる大量の画像データが必要になるので、GoogleChromeとそのプラグインであるImgaDownloaderを使用したGoogle画像検索のサムネイルを一括でダウンロードする方法を書こうと思います。 使用するのはこちらの拡張機能「ImageDownloader」です。 今回は宝鐘マリンの画像を集めようと思います。 (adsbygoogle = window.adsbygoogle []).push({});…

2022/05/16 16:51

Python Tensorflow でcudart64_110.dll not found

PythonのTensorflowでプリグラムを実行しようとしたところ以下のようなエラーが出ました。 2022-04-24 20:52:29.885267: W tensorflow/stream_executor/platform/default/dso_loader.cc:64] Could not load dynamic library 'cudart64_110.dll'; dlerror: cudart64_110.dll not found 2022-04-24 20:52:29.885774: I tensorflow/stream_executor/cuda/cudart_s…

2022/05/12 03:34

Tensorflowで「Loaded cuDNN version 8400」からのクラッシュ

Tensorflowでモデルを回そうとしたところEpoch一回目で、以下のメッセージがでて、その後クラッシュしてしまいました。Epoch 1/10 2022-04-24 22:44:52.714618: I tensorflow/stream_executor/cuda/cuda_dnn.cc:368] Loaded cuDNN version 8400cuDNNのバージョンミスマッチでしょうか。 cuDNNが v8.4 Tensorflow v2.8.0 Cudaのバージョンがv11.6になります。Tensorflowのバージョンはpythonで以下のコードで確認することができます。 imp…

2022/05/12 01:10