Kinect v2.0 モーションを BVH ファイルに保存する質問する

Question

Kinect 1.0でBVHファイルを取得するために使用したコードは、ジョイント情報を使用して、スケルトンを読み取ってボーンベクトルを構築します。

public static double[] getBoneVectorOutofJointPosition(BVHBone bvhBone, Skeleton skel)
{
    double[] boneVector = new double[3] { 0, 0, 0 };
    double[] boneVectorParent = new double[3] { 0, 0, 0 };
    string boneName = bvhBone.Name;

    JointType Joint;
    if (bvhBone.Root == true)
    {
        boneVector = new double[3] { 0, 0, 0 };
    }
    else
    {
        if (bvhBone.IsKinectJoint == true)
        {
            Joint = KinectSkeletonBVH.String2JointType(boneName);

            boneVector[0] = skel.Joints[Joint].Position.X;
            boneVector[1] = skel.Joints[Joint].Position.Y;
            boneVector[2] = skel.Joints[Joint].Position.Z;
..

ソース：Nguyên Lê Đặng - Kinect2BVH.V2

Kinect 2.0を除き、SkeletonクラスはBodyクラスに置き換えられているため、代わりにBodyを処理するように変更し、以下の手順に従ってジョイントを取得する必要があります。

// Kinect namespace
using Microsoft.Kinect;

// ...

// Kinect sensor and Kinect stream reader objects
KinectSensor _sensor;
MultiSourceFrameReader _reader;
IList<Body> _bodies;

// Kinect sensor initialization
_sensor = KinectSensor.GetDefault();

if (_sensor != null)
{
    _sensor.Open();
}
また、ボディ/スケルトン関連データがすべて保存されるボディのリストも追加しました。Kinect バージョン 1 用に開発したことがある場合は、Skeleton クラスが Body クラスに置き換えられていることに気付くでしょう。MultiSourceFrameReader を覚えていますか? このクラスを使用すると、ボディストリームを含むすべてのストリームにアクセスできます。リーダーを初期化するときに追加のパラメーターを追加して、ボディトラッキング機能が必要であることをセンサーに通知するだけです。

_reader = _sensor.OpenMultiSourceFrameReader(FrameSourceTypes.Color | FrameSourceTypes.Depth | FrameSourceTypes.Infrared | FrameSourceTypes.Body); _reader.MultiSourceFrameArrived += Reader_MultiSourceFrameArrived;

新しいフレームが利用可能になると、Reader_MultiSourceFrameArrived メソッドが呼び出されます。ボディデータに関して何が起こるかを指定しましょう。

ボディフレームの参照を取得する

ボディフレームがnullかどうかを確認します。これは非常に重要です。

_bodiesリストを初期化する

GetAndRefreshBodyDataメソッドを呼び出して、ボディデータをリストにコピーします。

ボディのリストをループして、素晴らしいことを実行してください。

常に null 値をチェックすることを忘れないでください。Kinect は 1 秒あたり約 30 フレームを提供します。null または欠落しているものが存在する可能性があります。これまでのコードは次のとおりです。

void Reader_MultiSourceFrameArrived(object sender, MultiSourceFrameArrivedEventArgs e) { var reference = e.FrameReference.AcquireFrame(); // Color // ... // Depth // ... // Infrared // ... // Body using (var frame = reference.BodyFrameReference.AcquireFrame()) { if (frame != null) { _bodies = new Body[frame.BodyFrameSource.BodyCount]; frame.GetAndRefreshBodyData(_bodies); foreach (var body in _bodies) { if (body != null) { // Do something with the body... } } } } }

これで完了です。これで、Kinect が識別したボディにアクセスできるようになりました。次のステップは、スケルトン情報を画面に表示することです。各ボディは 25 個の関節で構成されています。センサーは、それぞれの位置 (X、Y、Z) と回転情報を提供します。さらに、Kinect は、関節が追跡されているか、追跡されていると仮定されているか、追跡されていないかを知らせてくれます。重要な機能を実行する前に、ボディが追跡されているかどうかを確認することをお勧めします。

次のコードは、さまざまなボディジョイントにアクセスする方法を示しています。

if (body != null) { if (body.IsTracked) { Joint head = body.Joints[JointType.Head]; float x = head.Position.X; float y = head.Position.Y; float z = head.Position.Z; // Draw the joints... } }

ソース：Vangos Pterneas ブログ - KINECT FOR WINDOWS バージョン 2: ボディトラッキング

Answer 1

Kinect 1.0でBVHファイルを取得するために使用したコードは、ジョイント情報を使用して、スケルトンを読み取ってボーンベクトルを構築します。

public static double[] getBoneVectorOutofJointPosition(BVHBone bvhBone, Skeleton skel)
{
    double[] boneVector = new double[3] { 0, 0, 0 };
    double[] boneVectorParent = new double[3] { 0, 0, 0 };
    string boneName = bvhBone.Name;

    JointType Joint;
    if (bvhBone.Root == true)
    {
        boneVector = new double[3] { 0, 0, 0 };
    }
    else
    {
        if (bvhBone.IsKinectJoint == true)
        {
            Joint = KinectSkeletonBVH.String2JointType(boneName);

            boneVector[0] = skel.Joints[Joint].Position.X;
            boneVector[1] = skel.Joints[Joint].Position.Y;
            boneVector[2] = skel.Joints[Joint].Position.Z;
..

ソース：Nguyên Lê Đặng - Kinect2BVH.V2

Kinect 2.0を除き、SkeletonクラスはBodyクラスに置き換えられているため、代わりにBodyを処理するように変更し、以下の手順に従ってジョイントを取得する必要があります。

// Kinect namespace
using Microsoft.Kinect;

// ...

// Kinect sensor and Kinect stream reader objects
KinectSensor _sensor;
MultiSourceFrameReader _reader;
IList<Body> _bodies;

// Kinect sensor initialization
_sensor = KinectSensor.GetDefault();

if (_sensor != null)
{
    _sensor.Open();
}
また、ボディ/スケルトン関連データがすべて保存されるボディのリストも追加しました。Kinect バージョン 1 用に開発したことがある場合は、Skeleton クラスが Body クラスに置き換えられていることに気付くでしょう。MultiSourceFrameReader を覚えていますか? このクラスを使用すると、ボディストリームを含むすべてのストリームにアクセスできます。リーダーを初期化するときに追加のパラメーターを追加して、ボディトラッキング機能が必要であることをセンサーに通知するだけです。

_reader = _sensor.OpenMultiSourceFrameReader(FrameSourceTypes.Color | FrameSourceTypes.Depth | FrameSourceTypes.Infrared | FrameSourceTypes.Body); _reader.MultiSourceFrameArrived += Reader_MultiSourceFrameArrived;

新しいフレームが利用可能になると、Reader_MultiSourceFrameArrived メソッドが呼び出されます。ボディデータに関して何が起こるかを指定しましょう。

ボディフレームの参照を取得する

ボディフレームがnullかどうかを確認します。これは非常に重要です。

_bodiesリストを初期化する

GetAndRefreshBodyDataメソッドを呼び出して、ボディデータをリストにコピーします。

ボディのリストをループして、素晴らしいことを実行してください。

常に null 値をチェックすることを忘れないでください。Kinect は 1 秒あたり約 30 フレームを提供します。null または欠落しているものが存在する可能性があります。これまでのコードは次のとおりです。

void Reader_MultiSourceFrameArrived(object sender, MultiSourceFrameArrivedEventArgs e) { var reference = e.FrameReference.AcquireFrame(); // Color // ... // Depth // ... // Infrared // ... // Body using (var frame = reference.BodyFrameReference.AcquireFrame()) { if (frame != null) { _bodies = new Body[frame.BodyFrameSource.BodyCount]; frame.GetAndRefreshBodyData(_bodies); foreach (var body in _bodies) { if (body != null) { // Do something with the body... } } } } }

これで完了です。これで、Kinect が識別したボディにアクセスできるようになりました。次のステップは、スケルトン情報を画面に表示することです。各ボディは 25 個の関節で構成されています。センサーは、それぞれの位置 (X、Y、Z) と回転情報を提供します。さらに、Kinect は、関節が追跡されているか、追跡されていると仮定されているか、追跡されていないかを知らせてくれます。重要な機能を実行する前に、ボディが追跡されているかどうかを確認することをお勧めします。

次のコードは、さまざまなボディジョイントにアクセスする方法を示しています。

if (body != null) { if (body.IsTracked) { Joint head = body.Joints[JointType.Head]; float x = head.Position.X; float y = head.Position.Y; float z = head.Position.Z; // Draw the joints... } }

ソース：Vangos Pterneas ブログ - KINECT FOR WINDOWS バージョン 2: ボディトラッキング

Kinect v2.0 モーションを BVH ファイルに保存する質問する

ベストアンサー1

おすすめ記事