正規表現についていつもわからなくなるので調べた関数について記録ついでに一つ一つ書きます。 正規表現の使い方を今の所よく把握していないのですが，それは追々身につけるとして，今は関数だけおっていきます。 re.sub() note.nkmk.me re.sub()は，第一引…

この記事は数理物理アドベントカレンダー adventar.org の20日の記事です。 動機 日本語でのAutler-Townes効果についての記事が殆ど見当たらなかったため，記載することにしました。 数理物理というより物理の話なので，大変申し訳無いのですが数学はありま…

Dask? 大規模なデータセットの並列処理用のライブラリ なんで必要？ この記事を書いている時点(2018/11/11)で，kaggleのkernelのメモリが17.2Gしかないので，10Gぐらいあるcsvを読み込もうとすると，メモリエラーが起きます。 これを回避する方法として，pan…

どんな記事？ pandasの前処理で使ったことのあるmethodの書いているウェブページなどをまとめていく記事。 用途は自分用。 どんどん追加していく（予定） 基本的に 前処理大全[データ分析のためのSQL/R/Python実践テクニック]作者: 本橋智光出版社/メーカー:…

動機 先日までkaggleのTGS Salt Identification Challengeに参加していました。 あまりよろしくない結果だったので，内容については割愛します。 人のコードのコピペばかりだったので，そもそも画像をどのように読み込むのかよくわかっていませんでした。 さ…

本稿は記憶の定着のための覚え書きです。 GPUが入っているUbuntuマシンが与えられたため，リモートでアクセスして機械学習を行う環境を構築しようとしています。 dockerで構築することも考えたのですが，とりあえずはLinuxの環境に慣れるために一度はマシン…

昨日(2018/9/29)行われた，ABC111に参加した。 ただ，集中力が散漫でレートが落ちてしまったので，きっちり復習したいと思います。 AtCoder Beginner Contest 111 - AtCoder 以下，学んだことをまとめます。 A問題 猫のすぬけは文字を書く練習をしています。…

概要 スープが好きなので，よくポタージュを作っています。 今回は初めて人参のポタージュを作ってみたので，それの作り方を置いておきます。 リンク先のブレンダーが便利すぎたので，その紹介です。 ティファール ハンドミキサー スティックミキサー クリッ…

動機・概要 手元のマシンスペックがあまり良くないため（下図），計算などを行うとフィンが大変なことになります。 先日twitterでそのことをボヤいていたら，「クラウドは使わないのか？」「クラウドを使うべきだ」と言われたので，とりあえず使ってみました…

概要 Dockerで機械学習の環境を構築して記事にしようと思ったんですが，私が書くよりも素晴らしい解説記事がたくさんあったので，今後参考にできそうなものをまとめました。 Dockerそのもの，DockerfileやDocker-composeについて とりあえず公式 docs.docker…

カルマンフィルタって何？ 一言でまとめると，正規分布した観測ノイズを乗った情報から，ノイズを除去し状態の真値を推定する方法です。 応用例はいろいろあるのですが， カーナビ ロケットの軌道推定 なんかに使われているようです。 この記事は何でないの…

公差解析の方法の一つFORM (First Order Reliability Method)について記載します。 FORMは公差解析なのですが，使う数学が機械学習の最急降下法に似ています。 また，FORMについては日本語の記事をほとんど見つけられなかったので，自分の勉強を兼ねてまとめ…