yiskw note

機械学習やプログラミングについて気まぐれで書きます

pandas

【Pandas】DataFrameを綺麗に整形されたStringに変換するtabulate

概要 PandasのDataFrameをStringに変換する方法として,DataFrameのto_stringメソッドを使用する方法(参考)があげられますが, こちらで出力される結果は見にくく,別の方法がないかと探しておりました. そこでDataFrameを綺麗に整形されたStringに変換でき…

pandas.DataFrameのfor文を高速化する

概要 最近数百万オーダーのテーブルデータを扱うことがあり,そのデータを読み込んだpandas.DataFrameをfor文で処理が非常に遅く,困っておりました. そこで,pandas.DataFrameのfor文を高速化する方法について調べたので,こちらにメモしておきます.

sqlite3のデータベースをpandasで読み出す方法

概要 sqlite3のデータベースをpandasで読み込む方法について調べたので,まとめておきます. 読み出し方 以下で簡単にできます.TABLE_NAMEには適宜テーブルの名前に変えてください. import pandas as pd import sqlite3 TABLE_NAME = "test" filename = "s…

pandasでUNIX時間をdatetime型に変換する

概要 pandasでUNIX時刻をdatetime型に変換する方法について調べたので,備忘録として残しておきます.