python 2 7月 2023 Python PDFファイルをテキストファイルに変換してみる PDFファイルの内容をAIを使って要約したり、Q&A応答のできるプログラムが組んでみたいと思い、まずはPDFファイルからテキスト情報を抜き出したいと思います。 今回は「PDFminer」と言うライブラリを使用してみました。 (さらに…)… 続きを読む
AI 2 7月 2023 Rinna社の日本語特化GPT言語モデル Google Colabの無料枠で動かしてみた 久しく更新できていませんでした。 2023年5月にRinna社が公開した日本語に特化した36億パラメータを持つ対話GPT言語モデルを実行して行きます。GPUメモリサイズに応じて、model読み込みのオプション変更できるようです。 指定なし torch_dtype=torch.float16 load… 続きを読む
