Python

【Python】Parquet形式ファイルの扱い方

Parquet形式のファイルは、列指向のデータストレージ形式の一つで、Hadoopエコシステム内で広く使用されています。 この形式は、大量のデータを効率的に保存し、分析するために最適化されており、特にビッグデータの処理において有用です。Pa...
Python

【Pandas】read_csvの複数回実行でデータが読み込めなくなる問題

Pandasのread_csv関数を使用して、CSVファイルからデータを読み込むことは頻繁に行われると思いますが、同じファイルストリームからread_csvを複数回実行すると、2回目以降の読み込みでデータが得られないという問題が発生すること...
Azure

【Azure OpenAI Service】GPT-4の学習データ期間・トークン制限・価格(2024年4月)

Azure OpenAI ServiceのGPT-4に関して、トレーニングに使用されたデータの期間、トークン制限、価格(料金)をまとめました。 学習データ期間 ChatGPTが登場した時のGPT-3.5はコロナウイルスを知らなかったですが、...
Python

【Python】リスト内包表記の使い方

Pythonを学び始めたばかりだと、リスト内包表記が分かりづらいかと思います。 基本から詳しくまとめてみます。 リスト内包表記のメリット リスト内包表記を使用するメリットはいくつかあります。 1. コードの簡潔性 リスト内包表記を使うことで...
Windows

【PowerShell】変数・配列の使用方法

PowerShellでの変数と配列の使用方法をまとめます。 変数の使用方法 PowerShellの変数は、他のプログラミング言語との共通点も多く、直感的に扱えると思います。 使用方法 変数の作成と割り当て: 変数は$記号で始まります。 値を...
Python

【PyCharm】バージョンアップ後にUIが変わらない

PyCharmをバージョンアップしたのにUIが新しくならない場合の対応方法です。 「ファイル」の「設定」の「新しいUI」を開き、「新しいUIの有効化」にチェックを入れて「OK」ボタンを押します。 PyCharmを再起動するとUIが新しくなっ...
Python

【Python】指定フォルダ内の画像のサイズ変更

指定したフォルダに格納されたすべての画像ファイルのサイズを変更するPythonスクリプトを記載します。 以下の3パターンのサイズ指定に対応できるようにしてあります。 縦と横のサイズを指定する。 縦のサイズのみ指定し、縦横比は変えない。 縮小...
Work

2社で働いたITエンジニアが年収カーブを描いてみた

会社員生活を10年以上過ごしました。振り返れば色々ありました。 前職はIT企業、いまはリサーチ会社にいます。 さて、早速ですが、年収カーブっていうけど、自分の年収カーブを描いたらどうなるのだろうと思い、書いてみました。 こちらです。 201...
Python

【Flask】REST APIのサンプルコードとChromeでのテスト

FlaskでREST APIを作成するサンプルコードと、Chrome(Talend API Tester)でのテスト方法をメモしておきます。 サンプルコード 以下のコードは、Flaskを使用して簡単なREST APIを作成するためのものです...
Python

【Git】誤って破棄したコミットを復元する方法

誤ってGitのコミット破棄した時、かなり焦りましたが、復元は可能です。 Git Bashを使用して間違って破棄したコミットを復元する手順は、以下のようになります。 この例では、Gitのreflogとcheckoutコマンドを活用して、破棄さ...