プログラミング

Discord Botで作るRAG環境｜pgvectorとLMStudioを活用した会話システム実装

普段のDiscordでの会話が、そのままAIとの知識検索に繋がったら便利だと思いませんか？今回の記事では、pgvectorとLMStudioを組み合わせて、RAG環境をDiscord Botに実装する方法を解説します。背景として、Discordは閉域網でも利用でき、インターフェースが洗練されているうえにUIとしての実績も十分。PC・タブレット・スマートフォンといった環境を選ばず操作がわかりやすく、履歴を遡って終えることができるため１スレッドの限界に縛られません。また、特定の目的に対応したコミュニティを作 ...

Embeddingでテキストをベクトル化｜pgvectorに保存して検索可能にする手順

「AIと会話していて、前に話したことを覚えていないことにストレスを感じませんか？」「同じ質問を繰り返したり、前の答えを踏まえていない応答にがっかりしたことはありませんか？」その原因は、AIが会話履歴を“記憶”として保持できない仕組みにあります。そこで登場するのが RAG（Retrieval-Augmented Generation）。過去の会話をEmbeddingモデルでベクトル化し、検索して取り出すことで、あたかも記憶を継承しているような自然な対話が実現できるのです。この記事では、このRAG環境で ...

PostgreSQL16＋pgvector導入手順｜個人環境にベクトルDBを構築する方法

PostgreSQLにpgvectorを導入すると、ローカル環境でもベクトル検索が可能になります。これはRAG（Retrieval Augmented Generation）における「記憶保存」の基盤となり、AIに会話の履歴を保持させるための必須要素です。この記事では、RHEL系LinuxにPostgreSQL16とpgvectorを導入し、Macからも接続できる個人向けの分散構成を構築する手順を解説します。なぜpgvectorが必要なのか pgvectorはPostgreSQLにベクトル型を導入す ...

【RHEL系Linux】サーバーの障害検知と自動通知｜systemdログ監視の実装例

RHEL系Linux環境でsystemdユニットのjournaldエラーログを常時監視し、差分検知でLINEやメールに自動通知する方法を解説します。多重起動防止、PID管理、除外パターン設定など実用運用に必須の設計・実装・運用例を網羅します。概要 Linuxサーバーの安定稼働を維持するには、障害発生時にいち早く検知し、迅速に対応する体制が必要です。本記事では、systemdのjournaldログを監視し、エラーログや警告をリアルタイムに検知してLINEまたはメールで通知する仕組みを構築します。また、 ...

ORMにはうんざり！第６回：Java共通DBアクセスクラスの実用例で脱フレームワーク

多くのエンジニアが一度は通る道、それがORM（Object-Relational Mapping）によるデータアクセスの自動化です。しかし、実際の開発現場では「ブラックボックス化してわかりにくい」「SQLが思うようにチューニングできない」「結局、素のJDBCに戻した」などの声が後を絶ちません。本記事では、そうしたORMに限界を感じたエンジニアに向けて、フレームワークに依存しない共通DBアクセスクラス群の“実用的な使い方”をご紹介します。第6回となる今回は、MVCモデルをベースに、現場でよくあるユースケ ...

ORMにはうんざり！第5回：例外の闇を断つ、堅牢なJavaエラーハンドリングとログ設計

業務システムの開発において、例外処理とログ出力は「後回しにされがち」な存在です。しかし、実際の運用現場ではエラーが起きたときにその原因を特定できるかどうかが、システムの信頼性と復旧速度を大きく左右します。特にJavaで開発された中〜大規模な業務システムでは、ログの粒度や例外の扱い方ひとつで、障害対応の工数やトラブルの再発率が激変します。今回の第5回では、共通データアクセスクラス群のなかでも「例外処理」と「ログ出力」にフォーカスし、どのように堅牢なエラー制御と可視化を設計すべきかを具体的に解説していきます ...

【RHEL系Linux】PostgreSQLを自動インストールするシェルスクリプトの使い方

ジョンとの共存など、多くの作業工程で人為的ミスが発生しがちです。本記事では、PostgreSQLのインストール・削除・確認を1本のシェルスクリプトで自動化する方法を解説します。特定バージョンの導入から、複数バージョンの共存管理、不要なバージョンのアンインストールまでをスムーズに行える仕組みとなっており、現場の手作業を極力排除した再現性の高い構成になっています。概要と目的 PostgreSQLを複数バージョンで運用している現場では、バージョンごとのポート設定や、重複インストールの防止、削除時の依存関係な ...

ORMにはうんざり！第4回：Java共通ログ出力とsystem.xml設定の構成を解説

エンジニアなら誰もが経験するの下記の調査に時間を奪われるデバッグ地獄です。「どこで処理が止まったのか分からない」「ログが不揃いで追跡ができない」第4回では、この問題を避けるために設計した共通ログ出力クラスとそれを支える Logger / LogWriter / system.xml（log設定）の構成を整理します。この共通DBアクセスクラス群では、SELECT・INSERT・UPDATE・DELETE の全処理でログ出力が自動挿入される設計を採用しています。開発者が毎回ログを書く必要はあ ...

【RHEL系Linux】ディスク使用率を自動監視するシェルスクリプトの実装

ディスクの使用率、気づいたときには手遅れになっていませんか？サーバー運用では、容量逼迫によるサービス停止を未然に防ぐことが重要です。この記事では、あらかじめ定義した閾値を元にディスク使用率を自動監視し、ログに記録するシェルスクリプトの仕組みを解説します。概要と導入の目的ディスク容量の逼迫は、サーバー障害の中でも特に予兆を見落としやすく、サービス停止に直結するリスクを持っています。特にバックアップやログ肥大などによる想定外の使用率上昇は、事前に監視しておくことが重要です。本記事では、指定した閾値に基 ...

ORMにはうんざり！第3回：JavaでDB接続の最適化と共通プールの構築

JavaでJDBCを使ってDBアクセスを行う場合、毎回 DriverManager.getConnection() を呼び出して接続・切断を繰り返す構成をよく見かけます。しかしこのやり方は、アプリケーションの規模や接続頻度が高くなるほど、パフォーマンスのボトルネックになっていきます。本記事では、シリーズ第3回として、共通DBアクセスクラス内で採用している DBConnectionPoolクラスの設計と仕組みにフォーカスします。このクラスは、自前で構築した簡易的な接続プール機構を用いることで、アプリケ ...

【RHEL系Linux】信頼性を重視した完了保証型ディレクトリ転送スクリプトの設計と実装

このページでは、シェルスクリプトを使って、ディレクトリ単位での安全なデータ転送を自動化する方法を解説します。 rsyncによる完全転送とmvによるアトミックなリネーム処理を組み合わせることで、処理の中断や重複転送、破壊的な上書きを防ぐ設計になっています。ファイル単位の転送とは異なり、ディレクトリ構造を丸ごと扱うことで、業務システムのバックアップや中継処理にも柔軟に対応可能です。設計思想から具体的な実装、活用例まで、現場で役立つポイントを整理してお届けします。ディレクトリ転送の自動化が必要な背景サーバ ...

ORMにはうんざり！第2回：共通DBアクセスクラスでSQLを直感的に操作するJava設計

エンジニアとしてJavaでのデータベース連携を行う中で、「設定が多すぎる」「構造が複雑すぎる」といったORM（Object-Relational Mapping）への不満を感じたことはありませんか？実際、HibernateやJPAのようなライブラリは便利である一方、ちょっとしたDB操作にも大量のアノテーションや設定ファイルが必要になるケースが多く、プロジェクトが肥大化する原因にもなりかねません。そこで私たちは、あえてORMを使わず、SQLを直接制御できる共通DBアクセスクラス群を独自に設計しました。目 ...

【RHEL系Linux】中間ファイル連携を完全制御するファイル転送スクリプト

夜間バッチや月次処理など、業務で定期的にファイルを受け渡すシーンでは、単純なコピーや移動では不十分なことが多々あります。特に複数プロセス間でのファイル衝突や、処理タイミングのズレによる誤動作、転送失敗によるデータ欠損などは、現場でよくある問題です。今回ご紹介する「ファイル連携スクリプト」は、そうした問題を根本的に回避しつつ、安全に中間ファイルを受け渡すための実用的なシェルスクリプトです。 JP1などのジョブ管理ツールと組み合わせて動作させることも可能で、.finや.endといった制御ファイルによる状態監視 ...

ORMにはうんざり！第１回：シンプルなJava DBアクセスクラスを考えてみた

ORMや巨大なDBアクセスクラスに、正直うんざりしていませんか？カラムを1つ追加するだけで、エンティティ、DTO、マッピング、設定ファイル……と何か所も修正が必要になる今のDBアクセス構造に限界を感じている人も多いはずです。「もっと簡単に、それでいて本番でも使えるDBアクセスクラスは作れないのか？」という疑問から、今回、設定不要・高汎用性・保守性重視のシンプルなクラス構造を実装しました。エンジニアとして複数の現場でORMを使ってきましたが、「設定の複雑さ」「動作の見えづらさ」に対する違和感はずっと抱 ...

【RHEL系Linux】リソース（CPU・MEM）監視スクリプトで使用率・異常を検知する仕組み

「サーバーが重くなった原因、すぐに気づけますか？」定期的なCPUやメモリの使用率チェックを怠ると、いざという時にボトルネックを特定できず、障害対応が後手になります。本記事では、RHEL系Linux環境で動作する軽量な監視スクリプトを使い、CPU・メモリの使用率を自動で監視し、異常をログで通知する仕組みを紹介します。「ZabbixやPrometheusは大げさすぎる…」と感じている方にこそ、最小構成で始められる本スクリプトは最適です。スクリプトの目的と特徴システム運用において、リソース使用率の監視 ...

【RHEL系Linux】ファイルやログを自動圧縮する汎用スクリプトの実装と活用法

システムの開発や検証を進めていく中で、ログや一時ファイルが大量に蓄積されていくのが常でした。手動での圧縮や削除は時間の無駄であり、運用中のタスクに組み込むにはある程度汎用性と安全性を備えたスクリプトが必要だと感じていました。そこで、自分の開発環境で実際に使うことを前提に、任意のファイルやディレクトリを自動的に圧縮し、必要に応じて削除まで行う汎用スクリプトを作成しました。この記事では、そのスクリプトの構成や設計方針、実行方法までを具体的に解説していきます。自動圧縮スクリプトの概要と役割日々の開発作業 ...

【RHEL系Linux】任意サービスを簡単制御！汎用サービススクリプトの活用術

RHEL系Linuxで複数のサービスを管理していると、systemctlコマンドによる起動・停止の操作を何度も繰り返す場面が出てきます。Apache（httpd）やSSH、chronyd、PostgreSQLなど、制御対象が増えるほど入力作業が煩雑になり、運用ミスや確認漏れの原因にもなります。今回紹介する「サービス制御スクリプト（manage_service.sh）」は、そんな日常の繰り返し作業を一元化・簡略化するために開発した汎用スクリプトです。-s でサービス名、-c で操作コマンドを指定するだけで ...

【RHEL系Linux】Tomcatを自動インストール・設定するスクリプトの作成と活用法

Tomcatは、JavaベースのWebアプリケーションサーバーで、特に中小規模のWebアプリケーションやサービスの実行に広く使用されています。大規模な環境では、Ansibleのようなツールを使って自動化するのが一般的ですが、私のような小規模の開発環境では、Ansibleを使用する必要もなく、手動で設定作業を行うことが多いです。そのため、開発環境の構築や設定を行う際、手間や時間が多くかかり、効率的に作業を進めることができません。そのため、Tomcatのインストールと設定を自動化するスクリプトを作成しました ...

【RHEL系Linux】Apache＋Let's Encrypt 自動構築スクリプト｜バーチャルホスト対応・完全自動化ツール

開発用途のApache構成に毎回手間を感じていませんか？このスクリプトは、RHEL系LinuxにおけるApache（httpd）のインストールから設定変更、プロセスチューニング、バーチャルホストの設定までを一括で自動化します。特に、複数プロジェクトをホストする前提でバーチャルホストの雛形も用意されており、再実行しても冪等性を保ちつつ、構築作業のブレをなくします。この一連の処理により、Webサーバーの標準構築を高速・安定化し、構築担当者のミスを排除する環境を実現できます。今後、Web開発プロジェクト ...

【RHEL系Linux】開発サーバー初期設定スクリプトの完全自動化

開発サーバーを毎回手作業で構築していませんか？ SELinuxの無効化やタイムゾーンの設定、パッケージの導入など、初期構築には意外と多くの工程があります。そしてそのすべてが、設定ミスや手順漏れによって後々のトラブルにつながるリスクを抱えています。本記事では、RHEL系Linuxを対象とした開発サーバー初期設定スクリプト init_rhel_devhost.sh の構成と設計意図を解説します。root権限で一括実行するだけで、すべての初期設定が自動で反映されるよう設計されており、再実行時にも常に同じ状態が ...

« Prev 1 2 3 4 5 6 Next »

プログラミング

【Pythonの基礎知識（実践編）】AI構築・自動化のための開発プロダクト一覧

【Pythonの基礎知識（基礎編）】仕組みから学ぶ思考と自動化のプログラミング講座

【Pythonの基礎知識】ログを記録して仕組みの信頼性を高める

【Pythonの基礎知識】全体像を掴む｜環境構築からAI実装までの実践ロードマップ

【Pythonの基礎知識】外部APIを活用して作業を外部化する