プログラミング
Ollamaを使ってみる その３（Pythonでの利用、Node-RED、Gemma3:4B）新着!!
はじめに 今回はPythonでのOllamaの利用方法を確認して、サーバーとして実行できるようにしてみました。 これまでOllamaを利用するときは、Node-REDのollamaノードを利用していました。しかし、会 […]
Genesisを使ってみる その１（環境構築、サンプルプログラムの実行）
はじめに 今回はGenesisという物理シミュレーションソフトウェアを試してみました。 3か月ほど前に公開されたばかりで、デモ動画が面白そうでした。グラフィックはUnreal Engineのようにリアルで、ROSのよ […]
Ollamaを使ってみる その２（ローカルLLMでのコードの生成と実行、qwen2.5-coder、Node-RED）
はじめに 今回はローカルLLMでコードを生成して、そのまま実行できるようにNode-REDのフローを作成してみました。 ChatGPTとプロンプトでやり取りして生成したコードを、コピー＆ペーストで実行するのがいつもの […]
XIAO ESP32S3を使ってみる その２（コントローラの作成、Unreal Engineの操作）
はじめに 今回は大阪の共立電子にて、ゲームセンターで使われるようなジョイスティックを購入したので、Unreal Engineの操作に使えるようにしてみました。 マイコンのHID機能を利用しています。 ▼以前にもXIA […]
Pythonで検索してローカルLLMで要約してみる（Ollama、Node-RED）
はじめに 今回は情報収集を自動化したかったので、Pythonで検索するプログラムを試してみました。 いつも通りNode-REDで実行できるようにして、他のノードと組み合わせることで、ローカルLLMの処理にもつなげてい […]
Node-RED MCUを使ってみる その２（カメラノード、XIAO ESP32S3 Sense）
はじめに 今回はNode-RED MCU用に開発されたmcu_cameraノードを試してみました。 Node-RED MCUの書籍の執筆者メンバーであるkitazakiさんが、ひと月ほど前に開発されたノードです。 ▼ […]
Faster Whisperを使ってみる（GPUでの実行、Python、Node-RED）
はじめに 今回はFaster Whisperを利用して文字起こしをしてみました。 Open AIのWhisperによる文字起こしよりも高速ということで試したことがあったのですが、以前はCPUでの実行でした。最近YOL […]
Node-REDのノードを開発してみる その５（wsl-ubuntuノード）
はじめに 今回はNode-REDでWSLのUbuntu環境を起動してコマンドを実行できる、wsl-ubuntuノードを開発してみました。 私はROSを起動するのにWSLのUbuntu環境を利用しています。コマンドを実 […]
XIAO ESP32C3を使ってみる その６（DUALSHOCK 4との通信、Node-RED）
はじめに 今回はDUALSHOCK 4でXIAO ESP32C3を用いた小型ロボットを操作してみました。 以前調べていたときに、DUALSHOCK 4とXIAO ESP32C3はBluetoothの規格が違うので、直 […]
Node-REDを使ってみる その４（MQTT通信、ロボットアーム）
はじめに 今回は以前Amazonで購入したロボットアームを、Node-REDでMQTT通信を利用して制御できるようにしてみました。 これまではボタンで制御していたのですが、ネットワークにつなぐことで画像処理と組み合わ […]
Node-REDのノードを開発してみる その４（dualshock4ノード）
はじめに 今回はNode-REDと、PS4のコントローラであるDUALSHOCK 4で通信できる、dualshock4ノードを開発してみました。 2年ほど前からESP32とDUALSHOCK 4で通信して、ロボットを […]
YOLOで物体検出 その４（GPUの設定、CUDA 12.6）
はじめに 今回はGPUを利用したYOLOの物体検出を試してみました。 Ultralyticsのドキュメントではオプションで切り替えることができるようでしたが、GPUだとエラーが出ていたのでCPUで実行していました。 […]
Node-RED MCUの環境を構築する（Moddable SDK 5.4.1、ESP-IDF v5.3.1対応版、Windows 11）
はじめに 今回はNode-RED MCUの環境を構築してみました。 PCを買い替えたので、久々にインストールしました。カメラへの対応も進んでいるようなので、試したいなと思っています。 ▼Windows 11の環境で実 […]
PythonでDUALSHOCK 4と通信する（Node-RED）
はじめに 今回はPythonでPS4のコントローラであるDUALSHOCK 4と通信してみました。 私が開発したpython-venvノードを利用すると、Node-REDでPythonのコードを実行できます。DUAL […]
CVATでアノテーション（YOLO v8、Object Detection）
はじめに 今回はCVAT(Computer Vision Annotation Tool)でアノテーションを行ってみました。 画像に対してアノテーションを行い、YOLOで学習することで物体を検出できるようになります。 […]
Node-REDのノードを開発してみる その３（queueノード）
はじめに 今回はNode-REDでキューを扱うことができるqueueノードを開発してみました。 普段から研究で物体検出をするためにYOLOを利用しているのですが、データセットの学習には時間がかかるのでNode-RED […]
Pythonでテキストを翻訳する（Googletrans、Node-RED）
はじめに 今回はPythonでGoogletransを利用した翻訳を試してみました。 書いてはいないのですが、これまで翻訳するのにdeep-translatorも使ったことがあります。他にも簡単に使えるものが無いか探 […]
Pythonで論文を収集する（arXiv、Node-RED）
はじめに 今回はarXiv APIを使って、Pythonで論文を収集してみました。 普段は論文を検索するときにGoogle Scholarを使っていたのですが、プログラムで自動化したかったのでChatGPTに相談して […]
Raspberry Pi Zero 2を使ってみる その４（マイコンとのシリアル通信、Node-RED、XIAO ESP32C3）
はじめに 今回はRaspberry Pi Zero 2とXIAO ESP32C3で、シリアル通信をしてみました。 以前Node-RED MCUのSerialノードを開発していたときは、USB変換機でRaspberry […]
PythonでgTTSを使ってみる（音声合成、Node-RED）
はじめに 今回はPythonでgTTS(Google Text-to-Speech)を使ってみました。 以前VoiceVoxも使ったことがあるのですが、英語も話すことができて、ローカル環境での音声の生成が早いものを探 […]
Node-REDを使ってみる その３（ui-tableノード、emailノード）
はじめに 今回はNode-REDのui-tableノードとemailノードを使ってみました。 デスクトップPCの作業を自動化して、遠隔でも状態を確認するためにdashboard画面を確認したり、メールで通知したりする […]
YOLOで物体検出 その３（ROSとの連携、WSL2 Ubuntu 18.04）
はじめに 今回はWSL2のUbuntu18.04でYOLOとROSを連携させてみました。 実際にYOLOで物体を検出し、その検出した位置にロボットを動かすために使われていました。リアルタイムで物体検出の処理が行われる […]
Raspberry Pi Zero 2を使ってみる その３（1.3inch LCD HAT、至近距離での撮影）
はじめに 今回は要望がありまして、Raspberry Piで利用できるWaveshareの1.3inch LCD HATにカメラの映像を映してみました。 至近距離で撮影するとのことだったので試してみたのですが、レンズ […]
YOLOで物体検出 その２（Python、Node-RED）
はじめに 今回はYOLOをPythonで実行してみました。 以前の記事でYOLOを試したときは簡単なコマンドしか試していませんでしたが、実際にロボットに搭載して処理を行うにはPythonで実行する必要がありそうです。 […]
YOLOで物体検出 その１（Ultralytics、YOLO11）
はじめに 今回は物体検出アルゴリズムであるYOLOを使ってみました。 物体検出ははじめてなので、まずは調べながら実行しやすいものでお試しです。そもそもロボットにカメラを搭載することが無かったので、これからは設計に取り […]
音声でロボットを操作してみる（Node-RED、Gemma2、Faster Whisper、XIAO ESP32C3）
はじめに 今回は音声でロボットの操作を試してみました。今まで試してきたことの、ちょっとしたまとめのような感じです。 音声でロボットを操作するにあたって、音声を録音し、テキストを抽出して、そのテキストから状況を判定し、 […]
Ollamaを使ってみる その１（Gemma2、Node-RED）
はじめに 今回はローカル環境でLLMを利用できるOllamaを使ってみました。様々な言語モデルをインストールして、文章を生成することができます。 これまで音声の文字起こしにWhisper、音声合成にVOICEVOXな […]
Spresense SDKで開発してみる その１（環境構築、サンプルアプリケーションの実行）
はじめに 今回はSpresense SDKを利用して、Spresenseにプログラムを書きこんでみました。 Spresenseを使ってハードウェアを開発するならArduino IDEでプログラムを書く方が情報も多くて […]
Node-RED MCUの環境を構築する（ESP-IDF v5.3対応版、Ubuntu Desktop 20.04）
はじめに Moddable SDKが更新されて、最新ではESP-IDF v5.3をサポートしています。それに伴って、Node-RED MCUの環境構築手順も少しだけ変更点があります。 今回は最近Ubuntuをインスト […]
Node-REDのノードを作成してみる その2（whisperノード）
はじめに 今回はOpen AIのWhisperを利用した、Node-RED用のwhisperノードを作成しました。音声ファイルのパスを渡すと、文字起こしをすることができます。 以前PythonでWhisperを利用で […]