837 lines
29 KiB
C#
837 lines
29 KiB
C#
#define ENABLE_LOG
|
||
/*
|
||
* Copyright (c) 2014 - 2022 t_saki@serenegiant.com
|
||
*/
|
||
|
||
using AOT;
|
||
using System;
|
||
using System.Collections;
|
||
using System.Collections.Generic;
|
||
using System.Runtime.InteropServices;
|
||
using System.Threading;
|
||
using UnityEngine;
|
||
|
||
#if UNITY_ANDROID && UNITY_2018_3_OR_NEWER
|
||
using UnityEngine.Android;
|
||
using Yoga;
|
||
#endif
|
||
|
||
namespace Serenegiant.UVC
|
||
{
|
||
[RequireComponent(typeof(AndroidUtils))]
|
||
public class UVCManager : MonoSingleton<UVCManager>
|
||
{
|
||
private const string TAG = "UVCManager#";
|
||
private const string FQCN_DETECTOR = "com.serenegiant.usb.DeviceDetectorFragment";
|
||
private const int FRAME_TYPE_MJPEG = 0x000007;
|
||
private const int FRAME_TYPE_H264 = 0x000014;
|
||
private const int FRAME_TYPE_H264_FRAME = 0x030011;
|
||
|
||
/**
|
||
* IUVCSelectorがセットされていないとき
|
||
* またはIUVCSelectorが解像度選択時にnullを
|
||
* 返したときのデフォルトの解像度(幅)
|
||
*/
|
||
public Int32 DefaultWidth = 1280;
|
||
/**
|
||
* IUVCSelectorがセットされていないとき
|
||
* またはIUVCSelectorが解像度選択時にnullを
|
||
* 返したときのデフォルトの解像度(高さ)
|
||
*/
|
||
public Int32 DefaultHeight = 720;
|
||
/**
|
||
* UVC機器とのネゴシエーション時に
|
||
* H.264を優先してネゴシエーションするかどうか
|
||
* Android実機のみ有効
|
||
* true: H.264 > MJPEG > YUV
|
||
* false: MJPEG > H.264 > YUV
|
||
*/
|
||
public bool PreferH264 = false;
|
||
/**
|
||
* シーンレンダリングの前にUVC機器映像のテクスチャへのレンダリング要求を行うかどうか
|
||
*/
|
||
public bool RenderBeforeSceneRendering = false;
|
||
|
||
/**
|
||
* UVC関係のイベンドハンドラー
|
||
*/
|
||
[SerializeField, ComponentRestriction(typeof(IUVCDrawer))]
|
||
public Component[] UVCDrawers;
|
||
|
||
/**
|
||
* 使用中のカメラ情報を保持するホルダークラス
|
||
*/
|
||
public class CameraInfo
|
||
{
|
||
internal readonly UVCDevice device;
|
||
internal Texture previewTexture;
|
||
internal int frameType;
|
||
internal Int32 activeId;
|
||
private Int32 currentWidth;
|
||
private Int32 currentHeight;
|
||
private bool isRenderBeforeSceneRendering;
|
||
private bool isRendering;
|
||
|
||
|
||
internal CameraInfo(UVCDevice device)
|
||
{
|
||
this.device = device;
|
||
}
|
||
|
||
/**
|
||
* 機器idを取得
|
||
*/
|
||
public Int32 Id
|
||
{
|
||
get { return device.id; }
|
||
}
|
||
|
||
/**
|
||
* 機器名を取得
|
||
*/
|
||
public string DeviceName
|
||
{
|
||
get { return device.name; }
|
||
}
|
||
|
||
/**
|
||
* ベンダーIDを取得
|
||
*/
|
||
public int Vid
|
||
{
|
||
get { return device.vid; }
|
||
}
|
||
|
||
/**
|
||
* プロダクトIDを取得
|
||
*/
|
||
public int Pid
|
||
{
|
||
get { return device.pid; }
|
||
}
|
||
|
||
/**
|
||
* 映像取得中かどうか
|
||
*/
|
||
public bool IsPreviewing
|
||
{
|
||
get { return (activeId != 0) && (previewTexture != null); }
|
||
}
|
||
|
||
/**
|
||
* 現在の解像度(幅)
|
||
* プレビュー中でなければ0
|
||
*/
|
||
public Int32 CurrentWidth
|
||
{
|
||
get { return currentWidth; }
|
||
}
|
||
|
||
/**
|
||
* 現在の解像度(高さ)
|
||
* プレビュー中でなければ0
|
||
*/
|
||
public Int32 CurrentHeight
|
||
{
|
||
get { return currentHeight; }
|
||
}
|
||
|
||
/**
|
||
* 現在の解像度を変更
|
||
* @param width
|
||
* @param height
|
||
*/
|
||
internal void SetSize(Int32 width, Int32 height)
|
||
{
|
||
currentWidth = width;
|
||
currentHeight = height;
|
||
}
|
||
|
||
public override string ToString()
|
||
{
|
||
return $"{base.ToString()}({currentWidth}x{currentHeight},id={Id},activeId={activeId},IsPreviewing={IsPreviewing})";
|
||
}
|
||
|
||
/**
|
||
* UVC機器からの映像のレンダリングを開始
|
||
* @param manager
|
||
*/
|
||
internal Coroutine StartRender(UVCManager manager, bool renderBeforeSceneRendering)
|
||
{
|
||
StopRender(manager);
|
||
isRenderBeforeSceneRendering = renderBeforeSceneRendering;
|
||
isRendering = true;
|
||
if (renderBeforeSceneRendering)
|
||
{
|
||
return manager.StartCoroutine(OnRenderBeforeSceneRendering());
|
||
}
|
||
else
|
||
{
|
||
return manager.StartCoroutine(OnRender());
|
||
}
|
||
}
|
||
|
||
/**
|
||
* UVC機器からの映像のレンダリングを終了
|
||
* @param manager
|
||
*/
|
||
internal void StopRender(UVCManager manager)
|
||
{
|
||
if (isRendering)
|
||
{
|
||
isRendering = false;
|
||
if (isRenderBeforeSceneRendering)
|
||
{
|
||
manager.StopCoroutine(OnRenderBeforeSceneRendering());
|
||
}
|
||
else
|
||
{
|
||
manager.StopCoroutine(OnRender());
|
||
}
|
||
}
|
||
}
|
||
|
||
/**
|
||
* レンダーイベント処理用
|
||
* コールーチンとして実行される
|
||
* シーンレンダリングの前にUVC機器からの映像をテクスチャへレンダリング要求する
|
||
*/
|
||
private IEnumerator OnRenderBeforeSceneRendering()
|
||
{
|
||
var renderEventFunc = GetRenderEventFunc();
|
||
for (; activeId != 0;)
|
||
{
|
||
yield return null;
|
||
GL.IssuePluginEvent(renderEventFunc, activeId);
|
||
}
|
||
yield break;
|
||
}
|
||
|
||
/**
|
||
* レンダーイベント処理用
|
||
* コールーチンとして実行される
|
||
* レンダリング後にUVC機器からの映像をテクスチャへレンダリング要求する
|
||
*/
|
||
private IEnumerator OnRender()
|
||
{
|
||
var renderEventFunc = GetRenderEventFunc();
|
||
for (; activeId != 0;)
|
||
{
|
||
yield return new WaitForEndOfFrame();
|
||
GL.IssuePluginEvent(renderEventFunc, activeId);
|
||
}
|
||
yield break;
|
||
}
|
||
|
||
}
|
||
|
||
/**
|
||
* メインスレッド上で実行するためのSynchronizationContextインスタンス
|
||
*/
|
||
private SynchronizationContext mainContext;
|
||
/**
|
||
* 端末に接続されたUVC機器の状態が変化した時のイベントコールバックを受け取るデリゲーター
|
||
*/
|
||
private OnDeviceChangedCallbackManager.OnDeviceChangedFunc callback;
|
||
/**
|
||
* 端末に接続されたUVC機器リスト
|
||
*/
|
||
private List<UVCDevice> attachedDevices = new List<UVCDevice>();
|
||
/**
|
||
* 映像取得中のUVC機器のマップ
|
||
* 機器識別用のid - CameraInfoペアを保持する
|
||
*/
|
||
private Dictionary<Int32, CameraInfo> cameraInfos = new Dictionary<int, CameraInfo>();
|
||
|
||
//--------------------------------------------------------------------------------
|
||
// UnityEngineからの呼び出し
|
||
//--------------------------------------------------------------------------------
|
||
// Start is called before the first frame update
|
||
IEnumerator Start()
|
||
{
|
||
DontDestroyOnLoad(gameObject);
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}Start:");
|
||
#endif
|
||
mainContext = SynchronizationContext.Current;
|
||
callback = OnDeviceChangedCallbackManager.Add(this);
|
||
|
||
yield return Initialize();
|
||
}
|
||
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
void OnApplicationFocus()
|
||
{
|
||
Debug.Log($"{TAG}OnApplicationFocus:");
|
||
}
|
||
#endif
|
||
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
void OnApplicationPause(bool pauseStatus)
|
||
{
|
||
Debug.Log($"{TAG}OnApplicationPause:{pauseStatus}");
|
||
}
|
||
#endif
|
||
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
void OnApplicationQuits()
|
||
{
|
||
Debug.Log($"{TAG}OnApplicationQuits:");
|
||
}
|
||
#endif
|
||
|
||
void OnDestroy()
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}OnDestroy:");
|
||
#endif
|
||
StopAll();
|
||
OnDeviceChangedCallbackManager.Remove(this);
|
||
}
|
||
|
||
//--------------------------------------------------------------------------------
|
||
// UVC機器接続状態が変化したときのプラグインからのコールバック関数
|
||
//--------------------------------------------------------------------------------
|
||
public void OnDeviceChanged(IntPtr devicePtr, bool attached)
|
||
{
|
||
var id = UVCDevice.GetId(devicePtr);
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}OnDeviceChangedInternal:id={id},attached={attached}");
|
||
#endif
|
||
if (attached)
|
||
{
|
||
UVCDevice device = new UVCDevice(devicePtr);
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}OnDeviceChangedInternal:device={device.ToString()}");
|
||
#endif
|
||
if (HandleOnAttachEvent(device))
|
||
{
|
||
attachedDevices.Add(device);
|
||
StartPreview(device);
|
||
}
|
||
}
|
||
else
|
||
{
|
||
var found = attachedDevices.Find(item =>
|
||
{
|
||
return item != null && item.id == id;
|
||
});
|
||
if (found != null)
|
||
{
|
||
HandleOnDetachEvent(found);
|
||
StopPreview(found);
|
||
attachedDevices.Remove(found);
|
||
}
|
||
}
|
||
}
|
||
|
||
//================================================================================
|
||
/**
|
||
* 接続中のUVC機器一覧を取得
|
||
* @return 接続中のUVC機器一覧List
|
||
*/
|
||
public List<CameraInfo> GetAttachedDevices()
|
||
{
|
||
var result = new List<CameraInfo>(cameraInfos.Count);
|
||
|
||
foreach (var info in cameraInfos.Values)
|
||
{
|
||
result.Add(info);
|
||
}
|
||
|
||
return result;
|
||
}
|
||
|
||
// /**
|
||
// * 対応解像度を取得
|
||
// * @param camera 対応解像度を取得するUVC機器を指定
|
||
// * @return 対応解像度 既にカメラが取り外されている/closeしているのであればnull
|
||
// */
|
||
// public SupportedFormats GetSupportedVideoSize(CameraInfo camera)
|
||
// {
|
||
// var info = (camera != null) ? Get(camera.DeviceName) : null;
|
||
// if ((info != null) && info.IsOpen)
|
||
// {
|
||
// return GetSupportedVideoSize(info.DeviceName);
|
||
// }
|
||
// else
|
||
// {
|
||
// return null;
|
||
// }
|
||
// }
|
||
|
||
// /**
|
||
// * 解像度を変更
|
||
// * @param 解像度を変更するUVC機器を指定
|
||
// * @param 変更する解像度を指定, nullならデフォルトに戻す
|
||
// * @param 解像度が変更されたかどうか
|
||
// */
|
||
// public bool SetVideoSize(CameraInfo camera, SupportedFormats.Size size)
|
||
// {
|
||
// var info = (camera != null) ? Get(camera.DeviceName) : null;
|
||
// var width = size != null ? size.Width : DefaultWidth;
|
||
// var height = size != null ? size.Height : DefaultHeight;
|
||
// if ((info != null) && info.IsPreviewing)
|
||
// {
|
||
// if ((width != info.CurrentWidth) || (height != info.CurrentHeight))
|
||
// { // 解像度が変更になるとき
|
||
// StopPreview(info.DeviceName);
|
||
// StartPreview(info.DeviceName, width, height);
|
||
// return true;
|
||
// }
|
||
// }
|
||
// return false;
|
||
// }
|
||
|
||
private void StartPreview(UVCDevice device)
|
||
{
|
||
var info = CreateIfNotExist(device);
|
||
if ((info != null) && !info.IsPreviewing)
|
||
{
|
||
|
||
int width = DefaultWidth;
|
||
int height = DefaultHeight;
|
||
|
||
// var supportedVideoSize = GetSupportedVideoSize(deviceName);
|
||
// if (supportedVideoSize == null)
|
||
// {
|
||
// throw new ArgumentException("fauled to get supported video size");
|
||
// }
|
||
|
||
// // 解像度の選択処理
|
||
// if ((UVCDrawers != null) && (UVCDrawers.Length > 0))
|
||
// {
|
||
// foreach (var drawer in UVCDrawers)
|
||
// {
|
||
// if ((drawer is IUVCDrawer) && ((drawer as IUVCDrawer).CanDraw(this, info.device)))
|
||
// {
|
||
// var size = (drawer as IUVCDrawer).OnUVCSelectSize(this, info.device, supportedVideoSize);
|
||
//#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
// Debug.Log($"{TAG}StartPreview:selected={size}");
|
||
//#endif
|
||
// if (size != null)
|
||
// { // 一番最初に見つかった描画可能なIUVCDrawersがnull以外を返せばそれを使う
|
||
// width = size.Width;
|
||
// height = size.Height;
|
||
// break;
|
||
// }
|
||
// }
|
||
// }
|
||
// }
|
||
|
||
// FIXME 対応解像度の確認処理
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
LogPrint.Log($"{TAG}StartPreview:({width}x{height}),id={device.id}", PrintLevel.Normal);
|
||
#endif
|
||
int[] frameTypes = {
|
||
PreferH264 ? FRAME_TYPE_H264 : FRAME_TYPE_MJPEG,
|
||
PreferH264 ? FRAME_TYPE_MJPEG : FRAME_TYPE_H264,
|
||
};
|
||
foreach (var frameType in frameTypes)
|
||
{
|
||
if (Resize(device.id, frameType, width, height) == 0)
|
||
{
|
||
info.frameType = frameType;
|
||
break;
|
||
}
|
||
}
|
||
|
||
info.SetSize(width, height);
|
||
info.activeId = device.id;
|
||
mainContext.Post(__ =>
|
||
{ // テクスチャの生成はメインスレッドで行わないといけない
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
LogPrint.Log($"{TAG}映像受け取り用テクスチャ生成:({width}x{height})", PrintLevel.Normal);
|
||
#endif
|
||
Texture2D tex = new Texture2D(
|
||
width, height,
|
||
TextureFormat.ARGB32,
|
||
false, /* mipmap */
|
||
true /* linear */);
|
||
tex.filterMode = FilterMode.Point;
|
||
tex.Apply();
|
||
info.previewTexture = tex;
|
||
var nativeTexPtr = info.previewTexture.GetNativeTexturePtr();
|
||
Start(device.id, nativeTexPtr.ToInt32());
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
LogPrint.Log($"Device: {device.id} Start get Tex", PrintLevel.Normal);
|
||
#endif
|
||
HandleOnStartPreviewEvent(info);
|
||
info.StartRender(this, RenderBeforeSceneRendering);
|
||
}, null);
|
||
}
|
||
}
|
||
|
||
private void StopPreview(UVCDevice device)
|
||
{
|
||
var info = Get(device);
|
||
if ((info != null) && info.IsPreviewing)
|
||
{
|
||
mainContext.Post(__ =>
|
||
{
|
||
HandleOnStopPreviewEvent(info);
|
||
Stop(device.id);
|
||
info.StopRender(this);
|
||
info.SetSize(0, 0);
|
||
info.activeId = 0;
|
||
}, null);
|
||
}
|
||
}
|
||
|
||
|
||
public void StopAll()
|
||
{
|
||
List<CameraInfo> values = new List<CameraInfo>(cameraInfos.Values);
|
||
foreach (var info in values)
|
||
{
|
||
StopPreview(info.device);
|
||
}
|
||
}
|
||
|
||
//--------------------------------------------------------------------------------
|
||
/**
|
||
* UVC機器が接続されたときの処理の実体
|
||
* @param info
|
||
* @return true: 接続されたUVC機器を使用する, false: 接続されたUVC機器を使用しない
|
||
*/
|
||
private bool HandleOnAttachEvent(UVCDevice device/*NonNull*/)
|
||
{
|
||
//return FilterDevice(device.name);
|
||
|
||
if (IsIRDevice(device))
|
||
return false;
|
||
|
||
if ((UVCDrawers == null) || (UVCDrawers.Length == 0))
|
||
{ // IUVCDrawerが割り当てられていないときはtrue(接続されたUVC機器を使用する)を返す
|
||
return true;
|
||
}
|
||
else
|
||
{
|
||
bool hasDrawer = false;
|
||
LogPrint.Warning("UVCDrawers: " + UVCDrawers.Length);
|
||
foreach (var drawer in UVCDrawers)
|
||
{
|
||
if (drawer is IUVCDrawer)
|
||
{
|
||
hasDrawer = true;
|
||
if ((drawer as IUVCDrawer).OnUVCAttachEvent(this, device))
|
||
{ // どれか1つのIUVCDrawerがtrueを返せばtrue(接続されたUVC機器を使用する)を返す
|
||
return true;
|
||
}
|
||
}
|
||
}
|
||
// IUVCDrawerが割り当てられていないときはtrue(接続されたUVC機器を使用する)を返す
|
||
return !hasDrawer;
|
||
}
|
||
}
|
||
|
||
/// <summary>
|
||
/// 由于USB相机有两个摄像头，暂时根据名称过滤设备
|
||
/// </summary>
|
||
/// <param name="deviceName"></param>
|
||
/// <returns></returns>
|
||
bool IsIRDevice(UVCDevice device)
|
||
{
|
||
#if UNITY_ANDROID
|
||
AndroidJavaClass util = new AndroidJavaClass("com.unity3d.player.USBCamUtil");
|
||
bool f = util.CallStatic<bool>("CamIsIR", device.name);
|
||
Debug.Log(device.name + " 过滤结果：" + f);
|
||
return f;
|
||
#endif
|
||
}
|
||
void PrintAllDevices()
|
||
{
|
||
AndroidJavaClass util = new AndroidJavaClass("com.unity3d.player.USBCamUtil");
|
||
string[] strs = util.CallStatic<string[]>("GetAllDevice");
|
||
Debug.Log("设备数量：" + strs.Length);
|
||
foreach (var item in strs)
|
||
{
|
||
Debug.Log(item);
|
||
}
|
||
}
|
||
/**
|
||
* UVC機器が取り外されたときの処理の実体
|
||
* @param info
|
||
*/
|
||
private void HandleOnDetachEvent(UVCDevice device/*NonNull*/)
|
||
{
|
||
if ((UVCDrawers != null) && (UVCDrawers.Length > 0))
|
||
{
|
||
foreach (var drawer in UVCDrawers)
|
||
{
|
||
if (drawer is IUVCDrawer)
|
||
{
|
||
(drawer as IUVCDrawer).OnUVCDetachEvent(this, device);
|
||
}
|
||
}
|
||
}
|
||
}
|
||
|
||
/**
|
||
* UVC機器からの映像取得を開始した
|
||
* @param args UVC機器の識別文字列
|
||
*/
|
||
void HandleOnStartPreviewEvent(CameraInfo info)
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
LogPrint.Log($"{TAG}HandleOnStartPreviewEvent:({info})", PrintLevel.Normal);
|
||
#endif
|
||
if ((info != null) && info.IsPreviewing && (UVCDrawers != null))
|
||
{
|
||
foreach (var drawer in UVCDrawers)
|
||
{
|
||
if ((drawer is IUVCDrawer) && (drawer as IUVCDrawer).CanDraw(this, info.device))
|
||
{
|
||
(drawer as IUVCDrawer).OnUVCStartEvent(this, info.device, info.previewTexture);
|
||
}
|
||
}
|
||
}
|
||
else
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
LogPrint.Log($"{TAG}HandleOnStartPreviewEvent:No UVCDrawers", PrintLevel.Normal);
|
||
#endif
|
||
}
|
||
}
|
||
|
||
/**
|
||
* UVC機器からの映像取得を終了した
|
||
* @param args UVC機器の識別文字列
|
||
*/
|
||
void HandleOnStopPreviewEvent(CameraInfo info)
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}HandleOnStopPreviewEvent:({info})");
|
||
#endif
|
||
if (UVCDrawers != null)
|
||
{
|
||
foreach (var drawer in UVCDrawers)
|
||
{
|
||
if ((drawer is IUVCDrawer) && (drawer as IUVCDrawer).CanDraw(this, info.device))
|
||
{
|
||
(drawer as IUVCDrawer).OnUVCStopEvent(this, info.device);
|
||
}
|
||
}
|
||
}
|
||
}
|
||
|
||
//--------------------------------------------------------------------------------
|
||
/**
|
||
* 指定したUVC識別文字列に対応するCameraInfoを取得する
|
||
* まだ登録させていなければ新規作成する
|
||
* @param deviceName UVC機器識別文字列
|
||
* @param CameraInfoを返す
|
||
*/
|
||
/*NonNull*/
|
||
private CameraInfo CreateIfNotExist(UVCDevice device)
|
||
{
|
||
if (!cameraInfos.ContainsKey(device.id))
|
||
{
|
||
cameraInfos[device.id] = new CameraInfo(device);
|
||
}
|
||
return cameraInfos[device.id];
|
||
}
|
||
|
||
/**
|
||
* 指定したUVC識別文字列に対応するCameraInfoを取得する
|
||
* @param deviceName UVC機器識別文字列
|
||
* @param 登録してあればCameraInfoを返す、登録されていなければnull
|
||
*/
|
||
/*Nullable*/
|
||
private CameraInfo Get(UVCDevice device)
|
||
{
|
||
return cameraInfos.ContainsKey(device.id) ? cameraInfos[device.id] : null;
|
||
}
|
||
|
||
|
||
//--------------------------------------------------------------------------------
|
||
/**
|
||
* プラグインを初期化
|
||
* パーミッションの確認を行って取得できれば実際のプラグイン初期化処理#InitPluginを呼び出す
|
||
*/
|
||
private IEnumerator Initialize()
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}Initialize:");
|
||
#endif
|
||
if (AndroidUtils.CheckAndroidVersion(28))
|
||
{
|
||
yield return AndroidUtils.GrantCameraPermission((string permission, AndroidUtils.PermissionGrantResult result) =>
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}OnPermission:{permission}={result}");
|
||
#endif
|
||
switch (result)
|
||
{
|
||
case AndroidUtils.PermissionGrantResult.PERMISSION_GRANT:
|
||
InitPlugin();
|
||
break;
|
||
case AndroidUtils.PermissionGrantResult.PERMISSION_DENY:
|
||
if (AndroidUtils.ShouldShowRequestPermissionRationale(AndroidUtils.PERMISSION_CAMERA))
|
||
{
|
||
// パーミッションを取得できなかった
|
||
// FIXME 説明用のダイアログ等を表示しないといけない
|
||
}
|
||
break;
|
||
case AndroidUtils.PermissionGrantResult.PERMISSION_DENY_AND_NEVER_ASK_AGAIN:
|
||
break;
|
||
}
|
||
});
|
||
}
|
||
else
|
||
{
|
||
InitPlugin();
|
||
}
|
||
|
||
yield break;
|
||
}
|
||
|
||
/**
|
||
* プラグインを初期化
|
||
* uvc-plugin-unityへの処理要求
|
||
*/
|
||
private void InitPlugin()
|
||
{
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}InitPlugin:");
|
||
#endif
|
||
// IUVCDrawersが割り当てられているかどうかをチェック
|
||
var hasDrawer = false;
|
||
if ((UVCDrawers != null) && (UVCDrawers.Length > 0))
|
||
{
|
||
foreach (var drawer in UVCDrawers)
|
||
{
|
||
if (drawer is IUVCDrawer)
|
||
{
|
||
hasDrawer = true;
|
||
break;
|
||
}
|
||
}
|
||
}
|
||
if (!hasDrawer)
|
||
{ // インスペクタでIUVCDrawerが設定されていないときは
|
||
// このスクリプトがaddされているゲームオブジェクトからの取得を試みる
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}InitPlugin:has no IUVCDrawer, try to get from gameObject");
|
||
#endif
|
||
var objs = FindObjectsByType<CaptureManagerBase>(FindObjectsSortMode.None);
|
||
List<Component> drawers = new List<Component>();
|
||
foreach (var obj in objs)
|
||
{
|
||
drawers.AddRange(obj.GetComponents(typeof(IUVCDrawer)));
|
||
|
||
}
|
||
LogPrint.Warning("drawers: " + drawers.Count);
|
||
if ((drawers != null) && (drawers.Count > 0))
|
||
{
|
||
UVCDrawers = new Component[drawers.Count];
|
||
int i = 0;
|
||
foreach (var drawer in drawers)
|
||
{
|
||
UVCDrawers[i++] = drawer;
|
||
}
|
||
}
|
||
}
|
||
#if (!NDEBUG && DEBUG && ENABLE_LOG)
|
||
Debug.Log($"{TAG}InitPlugin:num drawers={UVCDrawers.Length}");
|
||
#endif
|
||
// aandusbのDeviceDetectorを読み込み要求
|
||
using (AndroidJavaClass clazz = new AndroidJavaClass(FQCN_DETECTOR))
|
||
{
|
||
clazz.CallStatic("initUVCDeviceDetector",
|
||
AndroidUtils.GetCurrentActivity());
|
||
}
|
||
}
|
||
|
||
//--------------------------------------------------------------------------------
|
||
// ネイティブプラグイン関係の定義・宣言
|
||
//--------------------------------------------------------------------------------
|
||
/**
|
||
* プラグインでのレンダーイベント取得用native(c/c++)関数
|
||
*/
|
||
[DllImport("unityuvcplugin")]
|
||
private static extern IntPtr GetRenderEventFunc();
|
||
/**
|
||
* 初期設定
|
||
*/
|
||
[DllImport("unityuvcplugin", EntryPoint = "Config")]
|
||
private static extern Int32 Config(Int32 deviceId, Int32 enabled, Int32 useFirstConfig);
|
||
/**
|
||
* 映像取得開始
|
||
*/
|
||
[DllImport("unityuvcplugin", EntryPoint = "Start")]
|
||
private static extern Int32 Start(Int32 deviceId, Int32 tex);
|
||
/**
|
||
* 映像取得終了
|
||
*/
|
||
[DllImport("unityuvcplugin", EntryPoint = "Stop")]
|
||
private static extern Int32 Stop(Int32 deviceId);
|
||
/**
|
||
* 映像サイズ設定
|
||
*/
|
||
[DllImport("unityuvcplugin")]
|
||
private static extern Int32 Resize(Int32 deviceId, Int32 frameType, Int32 width, Int32 height);
|
||
} // UVCManager
|
||
|
||
/**
|
||
* IL2Cppだとc/c++からのコールバックにつかうデリゲーターをマーシャリングできないので
|
||
* staticなクラス・関数で処理をしないといけない。
|
||
* だだしそれだと呼び出し元のオブジェクトの関数を呼び出せないのでマネージャークラスを作成
|
||
* とりあえずはUVCManagerだけを受け付けるのでインターフェースにはしていない
|
||
*/
|
||
public static class OnDeviceChangedCallbackManager
|
||
{
|
||
//コールバック関数の型を宣言
|
||
[UnmanagedFunctionPointer(CallingConvention.StdCall)]
|
||
public delegate void OnDeviceChangedFunc(Int32 id, IntPtr devicePtr, bool attached);
|
||
|
||
/**
|
||
* プラグインのnative側登録関数
|
||
*/
|
||
[DllImport("unityuvcplugin")]
|
||
private static extern IntPtr Register(Int32 id, OnDeviceChangedFunc callback);
|
||
/**
|
||
* プラグインのnative側登録解除関数
|
||
*/
|
||
[DllImport("unityuvcplugin")]
|
||
private static extern IntPtr Unregister(Int32 id);
|
||
|
||
private static Dictionary<Int32, UVCManager> sManagers = new Dictionary<Int32, UVCManager>();
|
||
|
||
/**
|
||
* 指定したUVCManagerを接続機器変化コールバックに追加
|
||
*/
|
||
public static OnDeviceChangedFunc Add(UVCManager manager)
|
||
{
|
||
Int32 id = manager.GetHashCode();
|
||
OnDeviceChangedFunc callback = new OnDeviceChangedFunc(OnDeviceChanged);
|
||
sManagers[id] = manager;
|
||
Register(id, callback);
|
||
return callback;
|
||
}
|
||
|
||
/**
|
||
* 指定したUVCManagerを接続機器変化コールバックから削除
|
||
*/
|
||
public static void Remove(UVCManager manager)
|
||
{
|
||
Int32 id = manager.GetHashCode();
|
||
Unregister(id);
|
||
sManagers.Remove(id);
|
||
}
|
||
|
||
[MonoPInvokeCallback(typeof(OnDeviceChangedFunc))]
|
||
public static void OnDeviceChanged(Int32 id, IntPtr devicePtr, bool attached)
|
||
{
|
||
var manager = sManagers.ContainsKey(id) ? sManagers[id] : null;
|
||
if (manager != null)
|
||
{
|
||
Debug.Log($"OnDeviceChanged{id} attached:{attached}");
|
||
manager.OnDeviceChanged(devicePtr, attached);
|
||
}
|
||
}
|
||
} // OnDeviceChangedCallbackManager
|
||
|
||
|
||
} // namespace Serenegiant.UVC
|