勉強中の技術的なことを書いたり日記的なことを書いたりします。php(laravel)、Python、機械学習、Webアプリ
はじめに 半年ほど前に似たような記事を書いたのですが、それは自分が使用したコードを貼り付けただけで全く参考にならなさそうだったので簡略化したものをもう一度書くことにしました。 前回の↓ Python3で大容量のcsvファイルを分割して読み込む - 情報学部大学生のダラダラ日記 使用するcsvとコード スクリーンショットで失礼します。以下のcsvを使います。 import pandas as pd reader = pd.read_csv('tagA.csv', chunksize=5) for r in reader: print(r) chunksizeなどの説明は以前の記事に書いたのでそち…
はじめに 大学での講義が最後となり、担当の先生に「よいお年を！」と言われました。これまでの僕は特に何も気にすることなく誰にでも「よいお年を！」と返していたのですが、なぜかその時に(あれ…目上の人にそれ言うのなんかおかしくない…？)と思ってしまい、「ェヘヘ…(キモ愛想笑い)」となってしまいました。口頭で言う分には問題ない(と思う)のですが、文面などではそうもいかないのでちゃんとした使い方が気になり、調べてみました。調べてみるとたくさん見つかりました。 「よいお年を」の意味 新年に向けた挨拶である「よいお年を」。恥ずかしながら21年間生きてきて本来の意味を知らずに使っていたのですが、 「よいお年を…
Dead by Daylight 公式生放送(12/19)のまとめと感想
はじめに 2019年12月19日にDead by Daylightの公式生放送がありました。それに関して、個人的に主だった点について引用し、感想を書いていきたいと思います。引用元は全て以下のサイトです。 開発チームQ&A生放送 2019/12/19 — Dead By Daylight マッチメイキングについて 現在マッチメイキングがあまり良くない状況であることは認識しています。年末年始に向けマッチメイキングシステムを調整してマッチングを成立しやすくし、年が明けてから問題の解消に取り組む予定です。一部の方からは殺人鬼のマッチングに問題があるというご意見をいただく一方で、他の方からは生存者の…
僕は知らなかったのですが、Python2がサポート終了するのが2020年1月1日に大分前から決まっていたようです。公式のドキュメントはこちら↓ www.python.org 「Python2の日没」ですって。オシャレ。 ドキュメントによると、2000年にPython2が始まり、2006年にPython3が作られた？のですが、初めはPython3がよろしくなかったらしくPython3へ移行する人があまりおらず、結局Python2を使う人とPython3使う人が共存してしまい、両方改良を続けていたようです。 こうなってしまった原因として、2系と3系で互換性がないことが挙げられます。僕も最初ネットを…
子どもの頃サンタに貰えて嬉しかった物「ダイヤモンド・パール」
はじめに クリスマスプレゼントで貰ったもののうち、まだ純粋無垢な小学生の時の僕が貰った物について今週のお題「クリスマス」ということで書きます。 その物とは？？ ズバリ、「ポケットモンスターダイヤモンド・パール」です。神ゲーです。 // リンク 兄が同じ時にダイヤモンドをお願いしていたので僕はパールをお願いしました。一般的にダイヤモンドの方が人気(異論は認めます)なので、僕も同様にダイヤモンドが欲しかったのですが、やはり兄弟あるあるなのでしょうか。弟の僕はいつも"じゃない方"を買っていました。 なぜ一番嬉しかったのか それは単純に遊んだ量が尋常ではなかったからです。2006年に発売され、すでに1…
勾配法あたりでやたらと見る数値微分法について調査し、まとめてみました。 今回、理論的なことは以下の書籍を参照し、図とプログラムは1から自作したものであり、特にプログラムは筆者がその場で簡易的に考え実装したものです。変数名などおかしい点がありますがご容赦ください。 数値微分法とは 勾配法においてはある重みにおいて、誤差関数をに関して偏微分したものの符号を入れ変えたものの方向に重みを更新します。この偏微分という動作をしなくても近似を使うことによって重みの更新をしちゃおう！というのが数値微分法の目的です。 まず、微分の定義を思い出します。 これが見慣れた形ですが今回は文字を変えて とします。 余談で…
解と係数の関係、知っていますでしょうか。結構な頻度で使われるので受験を経験した人達は覚えていると思います。しかしセンター試験レベルだとせいぜい使っても2次方程式の解と係数の関係ぐらいなので暗記でも乗り越えられるのですが、突然3次方程式の解と係数の関係を使う問題がでた時に困ります。そんな時に導出方法を知っていると役に立つと思うので知らない受験生は知り得です。 2次方程式の解と係数の関係 2次方程式が2つの解を持つとき、 が成り立ちます。僕は「マイナス(-)を忘れる奴はば(ba)か(ca)」と覚えろと教わりました。まず、2つの方法で2次方程式における関係を導出してみます。 1つ目は解の公式を使いま…
はじめに 久しぶりに、今週のお題「2019年買ってよかったもの」ということで僕が買って一人暮らしのQoLが爆上がりしたモノを紹介します。2019年に僕個人として大きな買い物はしていないので決して高価なものではありません。 そのものとは？？ ズバリ、「鍋」です。鍋と言っても一人用の鍋です。 // 僕が買ったのは金属なので保温性はあまりありませんが、別に一人で食べる分にが僕は気にしません。土鍋と違って割れる心配もあまりありませんし酷使するつもりだったので金属にしました。 これまで何度も一人鍋をしようとしましたが、片手鍋だとイマイチ気分が乗らずあまりやってきませんでした。ではなぜ一人鍋をそこまでして…
はじめに 僕は現在、このブログを勉強したことのアウトプット先として使っています。他のことも書いていますが…。しかし一般的にアウトプット先として挙げられるのはQiitaだと思います。今回は両者の違いを挙げ、なぜ僕がQiitaに書かないのか、使い分けるのならばどのように使い分けるかを書いていきたいと思います。 Qiitaについて 先にも言った通り僕はQiitaを見ることはしていますが投稿したことがありません。なので調べたことを書いているので全て語尾に(らしい)とついていると思ってください。 Qiitaを使っている方はとても多くいますがどのような規約があるのかを読んだことはありますか？以下、コミュニ…
機械学習の大きな目的は訓練データから未知のデータ、すなわちテストデータに対する損失を小さくすることです。予測損失(テストデータ)と経験損失(訓練データ)についてまとめてみます。 予測損失 予測損失というよりも汎化誤差という言葉の方が親しみがあるのではないでしょうか。また、他にも期待損失などとも言うようです。仮説の予測損失が、損失関数として、テストデータの分布を用いて以下のように定義されます。 つまり、テストデータの分布に対してのテストデータの損失の期待値ということです。しかし、テストデータの分布は未知であるためこの予測損失を計算することはできないです。目標は観測データのみからできるだけを小さく…
2019年も残すところあと1ヵ月となりました。先月の振り返りをしたいと思います。 PV数 先月スクショを取るのを忘れてしまいましたが、およそ2000だったと思います。先月が1000いくかいかないかだったので倍ほどになっています。読んでくださってありがとうございました！ 閲覧数のうち、6割がGoogle検索からのものでした。つまり先月は1200ほどが該当します。さらにそのうちのほとんどがPythonについての記事であり、これはとても喜ばしいことで目標としていた"自分の書いたメモが誰かの役に立つ"ということにまた1つ近づいたと思います。まだまだ未熟なので役に立っているかはわかりませんが…。 収益 …
「ブログリーダー」を活用して、Parco1021さんをフォローしませんか？
はじめに 2024年から新NISAが始まり、当時社会人1年目でしたが積立とは別に個別株も趣味程度にやろうかな～と思いちょこちょこ買っていました。そこまで余裕はないので毎月○万みたいな買い方はできませんでしたが、ボーナスなど余裕があるときに少しずつ買っていました。 投資方針 投資方針というほど明確な意思を持って買っていたわけではないですが。。。笑 高配当株 優待株(普段使いしそうなものまたは配当と合わせて美味しいもの) 安定株 にしました。NISAなので当然トレードは考えていないため自然とこのような方針になりました。 銘柄 自分の所持株と損益は以下のようになっています。御覧の通り全然プラスにはな…
はじめに 去年の夏(2023年8月)に桜尾蒸留所の見学ツアーに参加して決ました。もう1年近く経ってしまいましたが、その体験紀を書こうと思います。 体験記 桜尾+お酒と言えばジンを想像する方が多いのではないでしょうか。桜尾ジンと同じ蒸留所でウイスキーも作られており、私は今回ウイスキーの方を目当てに蒸留所を訪れました。 今回参加した見学ツアーは、ウイスキーもジンもどちらも紹介してくれました。1人2000円で、1回当たりの参加者は10人ほどでした。 DISTILLERY TOUR SAKURAO DISTILLERY ツアーの流れは モルトウイスキーとジンの製造工程紹介 グレーンウイスキーの糖化…
概要 甲府城はおよそ450年前に浅野長政によって築かれた城です。山梨県甲府市にあり、日本百名城に選出されています。 歴史 西暦 城主 出来事 1582 徳川家 本能寺の変。徳川家康が甲斐に入国し、平岩親吉が城主、着工する 1590 羽柴家 家康が関東へ転封羽柴秀勝が入国 1591 加藤家 秀勝が美濃へ転封加藤光泰が城主となる。ここで築城が本格的に開始 1593 浅野家 光泰が朝鮮出兵中に病没浅野長政・幸長が城主となる 1600 関ヶ原の戦い。浅野家は東軍として戦う 1601 徳川家 浅野家が和歌山へ転封平岩親吉が再度城代となる 1603 徳川義直(家康九男)が城主となる 1607 義直が清州へ…
はじめに 2024年6月に統計検定2級CBT試験を受け、無事合格したのでその体験記を残します。 統計検定2級の合格点は60%であり、合格率は50%前後と低くもなく高くもないです。試験時間は90分、テストセンターに自分で申し込み受検します。 勉強方法 私は情報系の大学に通っており、統計学の講義も取っていました。しかしそこまでちゃんとやっておらず最低限単位を取る程度の知識であったため、学習開始時にはこの単語聞いたことあるけど意味は全く分からないといった状態でした。 学習は最初Udemyの講座が会社のアカウントで無料で見られたのでボーっと見ていました。が、ボーっと見ていたので講座修了時にはほとんど頭…
概要 箕輪城はおよそ500年前に長野業尚によって築かれた城です。群馬県高崎市にあり、昭和62年に国指定史跡に指定され、日本百名城にも選出されています。 歴史 西暦 城主 出来事 1512 長野家 長野業正によって築城される 1561 業正が死去。業盛が後を継ぐ 1566 武田信玄によって攻められ、業盛は自刃 1570 武田家 内藤昌豊が城代となる 1575 昌豊が長篠設楽原の戦いで戦死。子の昌月が城代となる 1582 武田家が滅亡 織田家 滝川一益が城主となる。本能寺の変後北条家の城となる 北条家 北条氏邦が城主となる 1590 小田原征伐で北条家が滅亡 徳川家 徳川家の関東移封により井伊直政…
概要 鶴ヶ城は福島県会津若松市にある城です。鶴ヶ城は会津城だとか会津若松城と呼ばれています。以後会津若松城と呼びます。会津若松城は会津若松駅から3kmほどのところにあります。 歴史 会津若松城は蘆名氏から始まり、幕府血縁の松平氏に終わりました。伊達や上杉氏など名家が城主となっていた時期がありますがどちらもかなり短いです。城での案内もやはり命名し長く治めていた蒲生氏郷のものが多かったです。 西暦 城主 出来事 1384 蘆名家 7代当主蘆名直盛によって築城、当時は黒川城と呼ばれる 1553 16代当主蘆名盛氏が城主となる蘆名家全盛期 1589 伊達家 伊達政宗が蘆名家を攻め滅ぼし、黒川城を入手 …
論文の情報 Spatially-Adaptive Pixelwise Networks for Fast Image Translation 論文リンク: https://arxiv.org/abs/2012.02992 被引用数(2021年11月時点): 3 採択日: 5 Dec 2020 リンク:https://ai-scholar.tech/articles/image2image/ASAPNet まとめ CycleGANなどのある画像を別のドメインへ変換する技術はGANに関する研究の中でも活発に行われている分野の一つである。生成画像の品質や制度の向上と引き換えにモデルのサイズが大きくな…
論文の情報 Reducing Transformer Depth on Demand with Structured Dropout 論文リンク: https://arxiv.org/abs/1909.11556 被引用数(2021年8月時点): 142 採択日: 25 Sep 2019 リンク:https://ai-scholar.tech/articles/dropout/LayerDrop 一言まとめ Dropoutは深層学習を用いる際にほぼ必ずと言っていいほど使われる技術である。Dropoutとは一般的にノード間の重みを無視することを指すが、本論文ではノード間の重みではなく層全体をDr…
はじめに pandasのdatetime型を扱ったときにエラーを吐かれ、検索してもほぼ出てこなかったので残しておきます。 問題設定 以下のようなcsvファイルをpandasで読み込み、dateをindexにした後にdateが2020年のものをスライスすることを目的とする。下の表は一例だがデータ収集の際、日付に関して降順にソートされている。 title date aa 2021/4/3 bb 2021/2/1 cc 2020/6/11 dd 2020/2/20 今回動かしたコードは以下: import pandas as pd df = pd.read_csv('./data.csv') df[…
論文の情報 TransGaGa: Geometry-Aware Unsupervised Image-to-Image Translation 論文リンク: https://arxiv.org/abs/2003.02819 被引用数(2021年3月15日時点): 40 採択日: 21 Apr 2019 UTC プロジェクトページ: https://wywu.github.io/projects/TGaGa/TGaGa.html 簡単なメモ CycleGANなどの従来の手法は、猫⇔人間などの大きな幾何学的変化を伴うドメイン変換のimage2imageタスクは達成できていなかった。提案手法では入力…
★6,7 キャプテン・アメリカ 進化前 10c*2の悪魔キラーは強そう。スキブ少ないけどね。スキルはロック解除とエンハンス、回復確保で強そう。強いけど使わなさそう。主にノルザのせい。 究極進化 スキブ4の毒耐性を持っている。スキルが大分サポート向けで強い。魔廊において水パの人権がないので激減スキルはまだ使われないだろうが、今後水パの激減枠で使われると思う。 武器① スキブたこ焼武器。スキルも全部回復の回復と操作時間延長。かなり強い。 武器② 雰囲気アカザ武器に似てるね。キラーないけど。こっちの武器にするなら武器①にするかな。 アイアンマン 本体 23T変身だがスキブ2持ち。 変身後は覚醒スキル…
はじめに パズドラ×物語シリーズコラボが1/4から来ています。僕自身物語シリーズは観たことがないのでどういうキャラなのか知らないのですが、これを機に観たいと思います。キャラの呼び方が間違っていたらすみません。 評価はS~Cで付けました。評価基準は環境や汎化性、唯一性を参考にしています。 はじめに 物語シリーズコラボ総評 阿良々木暦(進化前) A+ 阿良々木暦(究極) A+ 阿良々木暦(武器) A+ 戦場ヶ原ひたぎ(進化前) B 戦場ヶ原ひたぎ(究極) B+ 戦場ヶ原ひたぎ(武器) A- 八九寺真宵(進化前&究極) B 八九寺真宵(武器) A+ 神原駿河(進化前) B+ 神原駿河(究極) A- …
はじめに 今回、駄菓子を1000円ぐらい買ってきたのでそれぞれの感想を書こうと思います。懐かしいね。 買ってきた駄菓子はこちら↓↓ 懐かしいものから初めて見るものをたくさん買ってきました！では値段と感想を書きます。。。 カットよっちゃん 65円。ビールが飲みたくなった。酢イカの味がする。小学生の時にこれを好きな人は大人になって絶対お酒好きになる。 // リンク ポテトフライカルビ焼肉味 45円。美味しい。これ45円もしたっけ？30円ぐらいじゃなかったっけ、、、 調べてみたら僕が昔食べていたのはポテト"スナック"の方でこれではなかったらしい。件のポテトスナックは2013年頃に生産中止されている。…
はじめに 資格とかには特に興味がなかったのですが、コロナの影響で大学へあまり行くことができず、春休み～夏休みを何もせずに過ごしさらに年も越してしまいそうな勢いだったので何かやることのきっかけが欲しくて受験を決意しました。研究室で深層学習について学んでいるので1週間あれば大丈夫だろ～wと思い1週間前にやっと申し込みしました。しかし受験日が卒業研究中間発表の数日前で資料の作成等をしなければならず、あまり勉強時間が確保できませんでした。 G検定とは G検定は日本ディープラーニング協会が開催している資格であり、深層学習などの人工知能全般に関する知識問題が出題されます。計算問題はほぼ無く、法律に関する問…
概要 深層学習において、確率的勾配降下法(SGD)はOptimizerとして良い結果を出しており、SGDをより良く動かすためにハイパーパラメータの調整が必要。複数あるハイパーパラメータのうち、特にバッチサイズ(Batch Size)と学習率(Learning Rate)に着目し、どのように設定すべきかを解析的に考えた論文。数値解析の結果、バッチサイズの大きさSと学習率ηの比S/ηが小さいほどより良い結果となる。 papers.nips.cc 予測損失と経験損失 本来最小化したい損失は予測損失である。 しかし、データの分布Dがわからないため予測損失と近似することのできる経験損失を用意する。 でき…
最近、競プロみたいな問題をPythonで解いたりしているのですが、その時にデータの入出力周りでリストをよく扱います。いたずらにfor文とappend()メソッドを用いるとコードが冗長になってしまうのでリスト内包表記を用いるのですがちゃんと調べたことがなかったので調べて備忘録としてまとめます。 リスト内包表記のメリット・デメリット シンプルなリスト内包表記 元データ for文 リスト内包表記 補足 リストの型を変える for文 リスト内包表記 補足 if文のあるリスト内包表記 if文のみ for文 リスト内包表記 if-else for文 リスト内包表記 まとめ リスト内包表記のメリット・デメリ…
前章↓↓ parco1021.hatenablog.com 第4章 形態素解析 30.形態素解析結果の読み込み(31日目 9月4日) 31.動詞(32日目 9月5日) 32.動詞の原形(33日目 9月6日) 33.「AのB」(34日目 9月7日) 34.名詞の連接(35日目 9月8日) 35.単語の出現頻度(36日目 9月9日) 36.頻度上位10語(37日目 9月10日) 37.「猫」と共起頻度の高い上位10語(38日目 9月11日) 38.ヒストグラム(39日目 9月12日) 39.Zipfの法則(40日目 9月13日) 第4章 形態素解析 まず、与えられたneko.txtをMeCabを使…
第2章↓↓ parco1021.hatenablog.com 第3章:正規表現 20.JSONデータの読み込み(21日目 8月25日) 21.カテゴリ名を含む行を抽出(22日目 8月26日) 22.カテゴリ名の抽出(23日目 8月27日) 23.セクション構造(24日目 8月28日) 24.ファイル参照の抽出(25日目 8月29日) 25. テンプレートの抽出(26日目 8月30日) 26.強調マークアップの除去(27日目 8月31日) 27.内部リンクの削除(28日目 9月1日) 28.MediaWikiマークアップの削除(29日目 9月2日) 29.国旗画像のURLを取得する(30日目 9…
第1章↓↓ parco1021.hatenablog.com 第2章:UNIXコマンド 10.行数のカウント(11日目 8月15日) 11.タブをスペースに変換(12日目 8月16日) 12.1列目をcol1.txtに、2列目をcol2.txtに保存(13日目 8月17日) 13.col1.txtとcol2.txtをマージ(14日目 8月18日) 14.先頭からN行を出力(15日目 8月19日) 15.末尾のN行を出力(16日目 8月20日) 16.ファイルをN分割する(17日目 8月21日) 17.1列目の文字列の異なり(18日目 8月22日) 18.各行を3コラム目の数値の降順にソート(1…
はじめに 第1章:事前準備 00.文字列の逆順(1日目 8月5日) 01.パタトクカシーー(2日目 8月6日) 02. 「パトカー」＋「タクシー」＝「パタトクカシーー」(3日目 8月7日) 03.円周率(4日目 8月8日) 04.元素記号(5日目 8月9日) 05.n-gram(6日目 8月10日) 06.集合(7日目 8月11日) 07.テンプレートによる文生成(8日目 8月12日) 08.暗号文(9日目 8月13日) 09.TypoglycemiaPermalink(10日目 8月14日) はじめに 夏休みに入り、研究室のゼミも少なくなったりコ〇ナの影響でバイトがなくなったりして暇なので1…
はじめに 2024年6月に統計検定2級CBT試験を受け、無事合格したのでその体験記を残します。 統計検定2級の合格点は60%であり、合格率は50%前後と低くもなく高くもないです。試験時間は90分、テストセンターに自分で申し込み受検します。 勉強方法 私は情報系の大学に通っており、統計学の講義も取っていました。しかしそこまでちゃんとやっておらず最低限単位を取る程度の知識であったため、学習開始時にはこの単語聞いたことあるけど意味は全く分からないといった状態でした。 学習は最初Udemyの講座が会社のアカウントで無料で見られたのでボーっと見ていました。が、ボーっと見ていたので講座修了時にはほとんど頭…
概要 箕輪城はおよそ500年前に長野業尚によって築かれた城です。群馬県高崎市にあり、昭和62年に国指定史跡に指定され、日本百名城にも選出されています。 歴史 西暦 城主 出来事 1512 長野家 長野業正によって築城される 1561 業正が死去。業盛が後を継ぐ 1566 武田信玄によって攻められ、業盛は自刃 1570 武田家 内藤昌豊が城代となる 1575 昌豊が長篠設楽原の戦いで戦死。子の昌月が城代となる 1582 武田家が滅亡 織田家 滝川一益が城主となる。本能寺の変後北条家の城となる 北条家 北条氏邦が城主となる 1590 小田原征伐で北条家が滅亡 徳川家 徳川家の関東移封により井伊直政…
