質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.45%

  • C#

    9269questions

    C#はマルチパラダイムプログラミング言語の1つで、命令形・宣言型・関数型・ジェネリック型・コンポーネント指向・オブジェクティブ指向のプログラミング開発すべてに対応しています。

  • Unity

    5681questions

    Unityは、ユニティテクノロジーが開発したゲームエンジンです。 主にモバイルやブラウザ向けのゲーム製作に利用されていましたが、3Dの重力付きゲームが簡単に作成できることから需要が増え、現在はマルチプラットフォームに対応しています。 言語はC言語/C++で書かれていますが、C#、JavaScript、Booで書かれたコードにも対応しています。

デスクトップマスコットの実装に伴うRenderTextureからSystem.Drawing.Imageへの変換

解決済

回答 1

投稿

  • 評価
  • クリップ 1
  • VIEW 461

KEEL

score 3

実現したいこと

デスクトップマスコットをUnityをベースに作成したい。
透過部分のマウスの挙動は下のウィンドウに反応するようにしたい。
実装はできたがRenderTextureからSystem.Drawing.Imageへの変換処理が重いためできるだけ軽くしたい。
またUnityベースのデスクトップマスコットで同じ挙動の他の方法があれば教えて頂けると幸いです。

実装

FormCaller.csでTransParentForm.csを呼び、FormCaller.csのOnPostRenderで更新されたRenderTextureを一度Texture2Dに変換し、さらにEncodeToPNGで.pngに変換し、それをSystem.Drawing.ImageのBitmapに変換している。
Profilerを見るとEncodeToPNGが一番重い処理のようでできれば使いたくない。またTexture2Dへの変換でもReadPixelsを使っている。重いのでこれも使いたくない。
できればRenderTextureを一発でBitmapに変換したい。
以下にFormCaller.csとTransParentForm.csとProfilerのスクショを記載する。

using System.Drawing;
using System.IO;
using UnityEngine;
public class FormCaller : MonoBehaviour
{
    [SerializeField] Vector2 Size;
    [SerializeField] RenderTexture renderTexture;
    [SerializeField] Camera mainCam;
    public System.Drawing.Bitmap Image2paint;
    TransparentForm f;
    void Start ()
    {
        f = new TransparentForm (renderTexture, mainCam);
    }
    void OnPostRender ()
    {
        Texture2D Tex2Paint = new Texture2D (renderTexture.width, renderTexture.height);
        Tex2Paint.ReadPixels (new Rect (0, 0, renderTexture.width, renderTexture.height), 0, 0);
        Tex2Paint.Apply ();
        var img2Paint = new Bitmap (renderTexture.width, renderTexture.height);
        MemoryStream memoryStream = new MemoryStream ();
        var img = Tex2Paint.EncodeToPNG ();
        memoryStream.Write (img, 0, img.Length);

        Image2paint = new System.Drawing.Bitmap (memoryStream);
        f.Image2paint = Image2paint;
    }
    void OnDisable ()
    {
        f.Close ();
    }
}
using System.Collections;
using System.Collections.Generic;
using System.ComponentModel;
using System.Drawing;
using System.IO;
using System.Windows.Forms;
using UnityEngine;

public class TransparentForm : Form
{
    RenderTexture tex;
    public System.Drawing.Bitmap Image2paint;
    Point mousePoint;
    public TransparentForm (RenderTexture Rendertex, Camera main)
    {
        tex = Rendertex;
        main.targetTexture = tex;

        this.SetStyle (ControlStyles.AllPaintingInWmPaint | ControlStyles.UserPaint | ControlStyles.OptimizedDoubleBuffer | ControlStyles.ResizeRedraw, true);
        this.SetBounds (0, 0, tex.width, tex.height);

        this.BackColor = System.Drawing.Color.Black;
        this.TransparencyKey = System.Drawing.Color.Black;
        this.FormBorderStyle = FormBorderStyle.None;
        this.TopMost = true;

        this.MouseDown += new MouseEventHandler (Form1_MouseDown);
        this.MouseMove += new MouseEventHandler (Form1_MouseMove);

        this.Show ();
    }
    protected override void OnPaint (PaintEventArgs e)
    {
        base.OnPaint (e);
        e.Graphics.DrawImage (Image2paint, 0, 0, tex.width, tex.height);
        this.Invalidate ();
    }
    private void Form1_MouseDown (object sender,
        System.Windows.Forms.MouseEventArgs e)
    {
        if ((e.Button & MouseButtons.Left)== MouseButtons.Left)
        {
            mousePoint = new Point (e.X, e.Y);
        }
    }

    private void Form1_MouseMove (object sender,
        System.Windows.Forms.MouseEventArgs e)
    {
        if ((e.Button & MouseButtons.Left)== MouseButtons.Left)
        {
            this.Left += e.X - mousePoint.X;
            this.Top += e.Y - mousePoint.Y;
        }
    }
}


![Profiler画面]

試したこと

EncodeToPNGをEncodeToJPGに変えてみたがノイズが発生するため不採用。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

check解決した方法

0

自己解決したので記載します。
色々試しましたが結局自前でbyte配列を書くのが一番速いです。
RGBAそれぞれのbyteが各ピクセルに必要なのでwidth*heightの4倍サイズのbyte[]を用意します。
bitmapはBGRAなのでそのようにbyte[]を書きます。

Texture2D Tex2Paint = new Texture2D (renderTexture.width, renderTexture.Tex2Paint.ReadPixels (new Rect (0, 0, renderTexture.width, renderTexture.height), 0, 0, false);
Tex2Paint.Apply ();

Color32[] pixels = Tex2Paint.GetPixels32 ();

Bitmap bitmap = new Bitmap (renderTexture.width, renderTexture.height);
BitmapData data = bitmap.LockBits (
    new Rectangle (0, 0, bitmap.Width, bitmap.Height),
    ImageLockMode.ReadWrite,
    PixelFormat.Format32bppArgb);
byte[] colorbytes = new byte[renderTexture.width * renderTexture.height * 4];

Marshal.Copy (data.Scan0, colorbytes, 0, colorbytes.Length);
for (int i = 0; i < pixels.Length; i++)
{
    colorbytes[4 * i] = pixels[i].b;
    colorbytes[4 * i + 1] = pixels[i].g;
    colorbytes[4 * i + 2] = pixels[i].r;
    colorbytes[4 * i + 3] = pixels[i].a;
}
Marshal.Copy (colorbytes, 0, data.Scan0, colorbytes.Length);

bitmap.UnlockBits (data);
bitmap.RotateFlip (RotateFlipType.Rotate180FlipX);
f.Image2paint = bitmap;

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.45%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

同じタグがついた質問を見る

  • C#

    9269questions

    C#はマルチパラダイムプログラミング言語の1つで、命令形・宣言型・関数型・ジェネリック型・コンポーネント指向・オブジェクティブ指向のプログラミング開発すべてに対応しています。

  • Unity

    5681questions

    Unityは、ユニティテクノロジーが開発したゲームエンジンです。 主にモバイルやブラウザ向けのゲーム製作に利用されていましたが、3Dの重力付きゲームが簡単に作成できることから需要が増え、現在はマルチプラットフォームに対応しています。 言語はC言語/C++で書かれていますが、C#、JavaScript、Booで書かれたコードにも対応しています。