ChatGPT 【LangChain】FAISSのフィルタを利用した検索拡張生成（RAG）
独自の前提知識を与えた上でのGPTの回答生成のため、LangChainのRetrievalQAを使用しています。VectorStoreとしてFAISSを使用するときに、FAISSのデータにフィルタをかける方法を記載しておきます。 RAG 今...
ChatGPT 
Python 【Python】PyCharmからStreamlitアプリを起動する方法
PyCharmから開発中のStreamlitアプリを起動する方法をメモしておきます。 実行構成の編集ウィンドウを開きます。 「インタープリターオプション」に「-m streamlit run」を入力し、「OK」をクリックします。 新しいバー...
Review NURO光からソフトバンク光への乗り換え1か月後の状況
NURO光を約3年利用していたのですが、ソフトバンク光に乗り換えました。NUROに不満はなかったのですが、家計の見直しでお得な方に乗り換えました。 2023年12月上旬に切り替え、1か月くらい経ちましたので、使い心地を記録しておきます。光回...
Windows サイズの大きいファイルを検索するPowerShellスクリプト
PC内のディスク使用量が高くなった場合に、サイズの大きいファイルを探すためのPowerShellスクリプトをメモしておきます。 PowerShellスクリプト # 検索するディレクトリを設定 $directory = "C:\" # 検索す...
Windows テキストファイルの先頭行を削除するPowerShellスクリプト
CSVファイルなどのテキストファイルのヘッダー行を削除したいことがあると思います。 テキストファイルの先頭行を削除するPowerShellスクリプトをメモしておきます。 サンプルコード $inputFolder = 'C:\path\to\...
Windows PowerShellを用いたファイル名称一括変更でワイルドカードが使えない
PowerShellの-replaceを用いたファイル名称変更ではアスタリスクでのワイルドカードが使用できず、正規表現を使う必要がありました。 所定のフォルダに存在する *hoge*.tsv というファイルの名称の hoge* の部分を変更...
Python 【Streamlit】file_uploaderでアップしたデータをSession Stateに保持
Streamlitでは、ボタンがクリックされるとページが再実行され、file_uploaderの状態がリセットされてしまうことがあります。 再実行時にも情報を保持する仕組みとして、session_stateが提供されています。 アップロード...
Python 【Python】環境依存しない相対パスでのファイル読込み
Pythonで相対パスでファイルを読み込む際、単純に相対パスを記述するとカレントディレクトリを基準としたパスとなり、環境が変わるとエラーが発生する可能性があります。 そのため、各スクリプトの絶対パスを取得し、そこからの相対パスで読み込みます...
LangChain 【LangChain】LCELを使用したChain実装
LangChainを使ったプログラム作成をしておりますが、LCEL（LangChain Expression Language）を使っていなかったため、試しに実装してみました。 from langchain.chat_models impo...
Python 【Python】データフレームをSnowflakeのテーブルへインポートする方法
CSVファイルやTSVファイルなどに格納されたデータをSnowflakeのテーブルへインポートするPythonコードを記載します。 GUIでもインポートできますが、ファイルサイズの制限（50 MB）があり、やや不便です。 COPYコマンドの...