データ分析を行うにあたって必要となってくるデータ前処理の方法ですが、PythonのPandasを使った欠損値を補完する方法を今回ご紹介できたらと思います。 本記事ではお手元のJupyter notebookでPython […]
Pandas
【Pandas】欠損値(NaN)の処理方法について
テクノロジー
Linux
【Github】gist-embedとgistをSubmoduleで管理する方法
wordpressにコードを掲載する際にgithubで管理できないかと思い悩んでたのですが、一つの答えにたどり着いたのでその方法を掲載します。 結論から申し上げますとGithub Gistをリポジトリで管理する方法になり […]
Linux
【Linux】ufwでiptablesを簡単に設定する方法
DockerのUbuntuを使ってwebサービスを公開する機会があったので必要最低限の セキュリティとして備忘録がてら執筆します。 CentOSに関してはfirewall-cmdがufwと同じようなことができるようなので […]
Linux
【Linux】Cronの設定方法について・リファレンス
cronの設定方法についてよく失念するため、備忘録して記事にしておきます。自分のメモ用に残すため、わかりにくい部分などはご容赦ください。 またcrontabの設定例についてはこちらから参照できますのでよかったらコピペで流 […]
SQL
Prestoリファレンス【条件式】
条件式の紹介 Prestoの条件式についてご紹介します。 条件式は関数ではないですが、データ加工時に多用すると思いますので自身の備忘録ついでご紹介をさせていただきます。 条件式一覧 条件式で型変換関数(cast) […]
SQL
Prestoリファレンス【JSON処理関数】
JSON処理関数の紹介 PrestoのJSON処理関数についてご紹介します。 JSON処理関数はjson,jsonb型を簡単に扱うための関数になります。他もRDBでも新たしいバージョンでは関数があったりしますが、Pr […]
SQL
Prestoリファレンス【数学関数】
Presto数学関数の紹介 Prestoの数学関数についてご紹介します。 数学関数では数値型の処理を行うための関数になり、他の言語でも提供されているため、馴染みのある関数が多いと思います。 数学関数ではオイラー数であ […]
SQL
Prestoリファレンス【集計関数】
Presto集計関数の紹介 Prestoの集計関数についてご紹介します。 集計関数はデータから代表値などを出すための関数で、分析では一番用いる関数だと思います。他RDBと殆ど変わりませんが、自分の備忘録のために記載し […]
SQL
Prestoリファレンス【基本構文】
Prestoの基本構文の紹介 Prestoの自分が理解している基本構文についてご紹介します。 Prestoの構文ルールについて Prestoではいく構文に制約事項があるため、自分が知っている内容について紹介をしていき […]
SQL
Prestoリファレンス【日付・時間処理関数】
Presto日付・時間処理関数の紹介 Prestoの日付・時間処理関数についてご紹介します。 Presto日付・時間処理の注意事項 Prestoのdate型にはいくつかの型が存在しており、加算・減算する場合には注意が […]
