記事一覧

M5camera+M5Atom Liteでメカナムホイール Blynkでストリーミングを受ける

M5camera+M5Atom Liteでメカナムホイール Blynkでストリーミングを受ける



こんにちはRoboTakaoです。

さて、前回M5camera + M5Atom Liteでメカナムホイールを動かしてiPhoneのブラウザで
カメラ画像のストリーミングを受け、Blynkでメカナムホイール を操作しました。


でもやはり全部Blynkでやってみたいと思います。

M5camera26.jpg


M5camera27.png

まずはBlynkの設定

WidgetからVideo Streamを選択

M5camera28.png

ストリーミングのURLを入力

M5camera29.png

とここまでは簡単なのですが、動かしてみるとM5cameraからのストリーミングは受けられずErrorとなりました。

サンプルスケッチのCameraWebServerではBlynkだと接続できないようです。
理由はよくわかりませんが。


M5camera17.png

別のM5camera用のストリーミングスケッチ
ということでWebで調べていくとBlynk動作で動作するスケッチを発見。
これそ微修正しました。


Multi-Client MJPEG Streaming From ESP32

の中の

https://github.com/arkhipenko/esp32-cam-mjpeg

このesp32_camera_mjpeg.inoとcamera_pins.hおよびsrcディレクトを同じ階層に入れて動かします。

camera_pins.hは前回と同様の場所を修正

#elif defined(CAMERA_MODEL_M5STACK_PSRAM) の中の

#define SIOD_GPIO_NUM 22 // 25から変更

#define VSYNC_GPIO_NUM 25 //22から変更

esp32_camera_mjpeg.ino は下記変更

//#define CAMERA_MODEL_ESP_EYE //コメントアウト
#define CAMERA_MODEL_M5STACK_PSRAM //コメントアウト削除


#define SSID1 "XXXXXXXXXXXX" //自分のWiFi環境のSSID
#define PWD1 "XXXXXXXXXXXX" //自分のWiFI環境のパスワード


void handle_jpg_stream(void) の中もwhileループ内にdelay(50)を置く

 どうもBlynkのストリーミングは遅延が激しいため
 ここで簡易的にフレームレートを下げる。
 試行錯誤で50msとした


合わせてフレームサイズをCIFとした

config.frame_size = FRAMESIZE_CIF;

ちなみにフレームサイズをCIFにするだけだと逆にフレームレートが速くなって
バッファには溜まるがBlynkで処理できないようでどんどん遅れていくようだ


動作確認

M5camera26.jpg

M5camera27.png

こんな感じでストリーミングを受けることができました。

たまにバッファリングで止まりますが、なんとか動きます

M5camera18.png

それでも2秒くらい遅延して表示されます。
うーんかなり改善の余地があります






M5cameraのスケッチ



#include "src/OV2640.h"
#include <WiFi.h>
#include <WebServer.h>
#include <WiFiClient.h>

// Select camera model
//#define CAMERA_MODEL_WROVER_KIT
//#define CAMERA_MODEL_ESP_EYE //Changed here
#define CAMERA_MODEL_M5STACK_PSRAM //Changed here
//#define CAMERA_MODEL_M5STACK_WIDE
//#define CAMERA_MODEL_AI_THINKER

#include "camera_pins.h"

#define SSID1 "XXXXXXXXXXXX"
#define PWD1 "XXXXXXXXXXXX"

OV2640 cam;

WebServer server(80);

const char HEADER[] = "HTTP/1.1 200 OK\r\n" \
"Access-Control-Allow-Origin: *\r\n" \
"Content-Type: multipart/x-mixed-replace; boundary=123456789000000000000987654321\r\n";
const char BOUNDARY[] = "\r\n--123456789000000000000987654321\r\n";
const char CTNTTYPE[] = "Content-Type: image/jpeg\r\nContent-Length: ";
const int hdrLen = strlen(HEADER);
const int bdrLen = strlen(BOUNDARY);
const int cntLen = strlen(CTNTTYPE);

void handle_jpg_stream(void)
{
char buf[32];
int s;

WiFiClient client = server.client();

client.write(HEADER, hdrLen);
client.write(BOUNDARY, bdrLen);

while (true)
{
if (!client.connected()) break;
cam.run();
s = cam.getSize();
client.write(CTNTTYPE, cntLen);
sprintf( buf, "%d\r\n\r\n", s );
client.write(buf, strlen(buf));
client.write((char *)cam.getfb(), s);
client.write(BOUNDARY, bdrLen);
delay(50); //Added here
}
}

const char JHEADER[] = "HTTP/1.1 200 OK\r\n" \
"Content-disposition: inline; filename=capture.jpg\r\n" \
"Content-type: image/jpeg\r\n\r\n";
const int jhdLen = strlen(JHEADER);

void handle_jpg(void)
{
WiFiClient client = server.client();

cam.run();
if (!client.connected()) return;

client.write(JHEADER, jhdLen);
client.write((char *)cam.getfb(), cam.getSize());
}

void handleNotFound()
{
String message = "Server is running!\n\n";
message += "URI: ";
message += server.uri();
message += "\nMethod: ";
message += (server.method() == HTTP_GET) ? "GET" : "POST";
message += "\nArguments: ";
message += server.args();
message += "\n";
server.send(200, "text / plain", message);
}

void setup()
{

Serial.begin(115200);
//while (!Serial); //wait for serial connection.

camera_config_t config;
config.ledc_channel = LEDC_CHANNEL_0;
config.ledc_timer = LEDC_TIMER_0;
config.pin_d0 = Y2_GPIO_NUM;
config.pin_d1 = Y3_GPIO_NUM;
config.pin_d2 = Y4_GPIO_NUM;
config.pin_d3 = Y5_GPIO_NUM;
config.pin_d4 = Y6_GPIO_NUM;
config.pin_d5 = Y7_GPIO_NUM;
config.pin_d6 = Y8_GPIO_NUM;
config.pin_d7 = Y9_GPIO_NUM;
config.pin_xclk = XCLK_GPIO_NUM;
config.pin_pclk = PCLK_GPIO_NUM;
config.pin_vsync = VSYNC_GPIO_NUM;
config.pin_href = HREF_GPIO_NUM;
config.pin_sscb_sda = SIOD_GPIO_NUM;
config.pin_sscb_scl = SIOC_GPIO_NUM;
config.pin_pwdn = PWDN_GPIO_NUM;
config.pin_reset = RESET_GPIO_NUM;
config.xclk_freq_hz = 20000000;
config.pixel_format = PIXFORMAT_JPEG;

// Frame parameters
//config.frame_size = FRAMESIZE_UXGA;
//config.frame_size = FRAMESIZE_QVGA;
config.frame_size = FRAMESIZE_CIF;
config.jpeg_quality = 12;
config.fb_count = 2;

#if defined(CAMERA_MODEL_ESP_EYE)
pinMode(13, INPUT_PULLUP);
pinMode(14, INPUT_PULLUP);
#endif

cam.init(config);

IPAddress ip;

WiFi.mode(WIFI_STA);
WiFi.begin(SSID1, PWD1);
while (WiFi.status() != WL_CONNECTED)
{
delay(500);
Serial.print(F("."));
}
ip = WiFi.localIP();
Serial.println(F("WiFi connected"));
Serial.println("");
Serial.println(ip);
Serial.print("Stream Link: http://");
Serial.print(ip);
Serial.println("/mjpeg/1");
server.on("/mjpeg/1", HTTP_GET, handle_jpg_stream);
server.on("/jpg", HTTP_GET, handle_jpg);
server.onNotFound(handleNotFound);
server.begin();
}

void loop()
{
server.handleClient();
}

スポンサードリンク

コメント

コメントの投稿

非公開コメント

プロフィール

RoboTakao

Author:RoboTakao
みなさんご訪問ありがとうございます。ロボット作りたいけどお小遣いそんなにないし、簡単でローコストでロボットを作るための私のプロジェクトを紹介します。

ウェブサイトもありますのでそちらもよろしくお願いします。
http://robotakao.jp/

スポンサーリンク