Koki Ibukuro

LiteRT を Unityで動かせるか検討

Kokoro TTSのメモ

ONNX Runtime GenAIをUnityで動かす実験

小ネタです。C#開発しているとSpanを多用しますが、まだUnityのAPIでSpanに対応できてないものが結構あります。GraphicsBufferもその一つ。span.ToArray()したりNativeArrayに変換したりするのも無駄なので、Spanのまま渡したいなと思っていました。調べてみるとInternalSetNativeDataをreflectionで叩いている例は見つけましたが、 Refrection 使わない例が見つからなかったので用意してみました。UnityのAPIもどんどんSpan対応増えてるので、早く追加されるといいですね。

[Unity] ReadOnlySpan<T>を GraphicsBuffer.SetData() したい

ScriptedImporterを使うと、Unityで対応してない種類の拡張子もUnity読み込み時に別のアセットに変換してUnityで読み込むことができます。https://docs.unity3d.com/ScriptReference/AssetImporters.ScriptedImporter.html私が公開しているOnnxRuntime-Unityライブラリは.onnxと.ort、2種類の拡張子の機械学習モデルを読み込むことができますが、.onnxはUnity公式の機械学習推論ライブラリでもあるSentisでも対応しており、OnnxRuntimeとSentisが同時にイ...

Unity ScriptedImporterで拡張子が被ったときの対策

.NET Native AOTを調べる

Unityのオーディオ機能のAudio Mixerから追加出来る標準リバーブエフェクトであるSFX Reverb Effect。多彩な表現が出来ますが、パラメーターが多すぎて、DAWソフトウェアで音楽を作ったことがある人、オーディオに興味がある人じゃないと設定難しいですよね。公式ドキュメントを見ても、実際に音がどう変わるのか全然想像がつきません。以下、公式ドキュメントより抜粋↑SFX Reverb Effectのパラメータープロパティ機能Dry Level出力中のドライ信号のミックスレベル（単位：mB）–10000.0 ~ 0.0 デフォルト 0 mB...

Unity SFX Reverb Effect プリセットメモ

ついiOS17の新機能を試してみたくて、アップデートしたところ、正式リリースのXcode 15.0 (15A240d)環境でのUnity iOSのビルドにがっつり嵌ったのでメモ。ハマりどころは２箇所。 そもそもXcodeのビルドが通らないUnityのLTSを使っている場合は最新版へアップグレードして治りました。https://issuetracker.unity3d.com/issues/building-projects-with-il2cpp-scripting-backend-for-apple-platforms-fails-with-xcode-15-dot-0b6-...

Xcode 15でUnityが動かない

ONNXRuntime Unity Plugin

雑多な備忘録メモ。随時更新していきます。 Shuriken Particle or VFX GraphVFX GraphはURP/HRDPのみ。Built-in Render pipelineのときは使わないほうが良い。iOS, Androidでも使えるが、Android ARCoreは2023年1月現在OpenGLES対応のみでVulkanに対応していないので、実質AndroidのARが含まれるときは使えない。ARCoreのVulkan対応してほしい(最新のGoogle ARCoreではされたけど、ARFoundation上はまだっぽい？)。Shuriken Particle...

Tips: Unity Visual Effects Graph

Blenderの勉強記録

Unity使ってる人はmacOS Venturaまだ入れないほうが良さそう

UnityでTensorFlow Lite Android Neural Networks API Delegate対応する

この記事はMoAR - Museum of AR Advent Calendar 2022の10日目の記事です。https://qiita.com/Saqoosha/items/83df76d32f1b473703d16日目の記事↑でも書いていたように、普段ベルリンに住んで、東京の特定のビルでしか見れないアプリをリモート開発！ということで、遠隔でテストする機能が非常に重要になっていました。個人的に、ここ最近参加しているプロジェクトの半分以上はARを含むeXtended Reality (XR)関係。そのすべてのプロジェクトをリモートで参加しているのでAR環境をシュミレーションするの...

ARKit ReplayDataの中身を覗いてみる

この記事はMoAR - Museum of AR Advent Calendar 2022の9日目の記事です。 背景多言語対応のアプリを作るときにみなさんどうやって文言をかんりしているのでしょうか？私の関わるプロジェクトでは文言は翻訳担当の人にお願いするため、Google Spread Sheetでアプリ内で使う文言を一括管理してしまうことが多いです。それをXcodeのLocalizable Stringsへ手動反映していては間違いも増えるので、簡単に自動化しました。絶対あるだろなと思っていくつか検索したものの、今回の動かしているXcode Cloud上でもインストール要らず、設...

iOSアプリのLocalizable stringsをSpread Sheetから作成

この記事はMoAR - Museum of AR Advent Calendar 2022の8日目の記事です。 前置きMoARというAppClipsで簡単にARを体験できるアプリを作った際の制作記録です。https://whatever.co/moar/Whateverは普段はUnityのプロジェクトが多いチームではありますが、Whatever（何でも）という名にもあるように、作るジャンル、技術には縛られず、特にCTOであるSaqooshaはプロジェクト毎にリサーチして、そのプロジェクトで一番最適と思われし技術を選びます。あとたまに趣味で選んだりします。とあるプロジェクトではR...

AppClipsアプリをXcode Cloudでビルド

画像生成モデルをローカルで動かすメモ

Custom Post Processing Effect in URP

TensorFlow Lite on Unity やってることメモ

Swift Catch-Up Note

すごい簡単なんだけど、UnityとかUEとかoFとかで使うエンジニアが、デザイナーの方に伝えるとき用に書きました。0. LUTテクスチャ？UnrealEngineのドキュメントにわかりやすい説明が載ってます。https://docs.unrealengine.com/latest/JPN/Engine/Rendering/PostProcessEffects/ColorGradin

Photoshopでカラコレ用のLUTテクスチャを作る

Stemsフォーマットって聞いたことしかなく、使ったことなかったのだけど。http://www.stems-music.com/ja/stems-is-for-djs-jp/[http://www.stems-music.com/ja/stems-is-for-djs-jp/]4ch分、個別にミックス前のトラックが入ったフォーマットらしい。ほぼDJ用。stemsのサンプルファイルもここか

Stemsファイルの各チャンネルの中身を取り出すコマンド

展示するときに、必要なMacの設定をできるだけ自動化したいなとまとめました。きっとEl Capitanで動くと思います。setup_mac_signage.sh# 自動更新OFFecho "Disable : SystemPreferences -> AppStore -> Automatically check for updates"defaults write /Librar

Macで展示とかするときのdotfiles風な。

Unity(C#)でjsonったら * LitJson [http://lbv.github.io/litjson/] : 型指定して、クラスor構造体に変換する。大型プロジェクトで使うかも * MiniJson [https://gist.github.com/darktable/1411710] : object型にする。ゆるく使いたい。LitJsonは完全に型安全にパースできるけど

[Unity] MiniJsonをちょっと楽にするスクリプト

ディスクユーティリティだとFAT32はできますが、FAT16フォーマットは出来ないよう。とあるArduinoで必要だったので、手順まとめました。1 ターミナルアプリを開くApplication/Terminal.app2 ディスクのIDを確認するターミナルで、↓うつ。diskutil listすると、/dev/disk0#:

Macで、FAT16フォーマットをする方法

SOXをインストールbrew install soxスクリプトnormalize.zsh# !/bin/zsh# NEED sox# brew install soxEXPORT_DIR=normalized# input folderfunction mkdir_ex() {    # create folder    if [ ! -d $1 ]

soxで全部の音をノーマライズ

Unityでサラウンド再生したいなー。でもできるかな～って要件があったので調べました。オーディオインターフェイスを用意そもそも5.1ch再生するには、6ch以上のアウトのあるオーディオインターフェイスが必要です。今回はちょっと古いですが、FA-66で検証。Firewire to Thunderbolt変換で、MacbookPro OS10.9.4へ5.jpg[https://qi

Unity 5.1サラウンド （Mac）

SwiftでMacアプリをつくっていて、ちょっとハマった所。スニペットにしてまとめました。随時更新予定。GCDgcd_sample.swift// dispatch_get_main_queueは廃止// 5秒後にlet offset = 5.0dispatch_after(dispatch_time(DISPATCH_TIME_NOW, Int64(offset * D

My Swift Snipets

1.環境設定 DICTATION & SPEECHScreen Shot 2014-07-02 at 20.48.46.png[https://qiita-user-contents.imgix.net/https%3A%2F%2Fqiita-image-store.s3.amazonaws.com%2F0%2F14330%2Fa330dec3-0027-870b-2f98-4e635d91

[Mac]Otoyaさん、Kyokoさんで日本語をしゃべる設定

forum.unity3d.com[http://forum.unity3d.com/threads/video-texture-with-alpha-channel-works-but.41269/]２つのムービーを用意して、ひとつはRGB、もう一つはAのみのムービーを、同時に再生してシェーダーで混ぜるとあった。実際に試してみると、ムービーを２つ再生するのが、重いし、同期の確実性

Unityでアルファ付きのムービーを再生したい

Unityの配列フィールドに複数のオブジェクトをぶち込むと、全然ソートされずによくわからん順番になるのですが。OnValidateメソッドで、ソートしてあげれば簡単！ということに気づきました。SampleUnityPropertySort.csusing UnityEngine;using System.Collections;using System.Linq;public

Tips エディタ 配列フィールドの超簡単なソート

色々調べると、Unityのフルスクリーンで、マルチスクリーンは出来ないってのが定石のようだったので。諦めるのは悔しいので、サイネージで使うネイティブ拡張機能をまとめたリポジトリ公開しました。Githubリポジトリ [https://github.com/asus4/UnitySignageKit]まだ実践投入してないですが、こんな感じ。３画面テストまでは成功。capture[http

Unity Macでマルチスクリーン＆フルスクリーン。

Macネイティブのキーイベントなので、他のアプリにも送れます。テキストエディット開いていると勝手に文字を打ち始めます。sample.m- (void) keyEmulate {    CGEventRef keyup, keydown;    keydown = CGEventCreateKeyboardEvent (NULL, (CGKeyCode)40, true);

[Mac] キーイベントを発火する。

windows8 ストアアプリでは様々な解像度に対応するため、iOSの@2x [/2x]より多い、4種画像を用意できます。用意しなくてもいいですが、ピクセル等倍あると綺麗です。名前のルール * Logo.scale-80.png * Logo.scale-100.png * Logo.scale-140.png * Logo.scale-180.pngッて感じで、*.sca

Windows8 必要な画像たち

PureDataには、libpdプロジェクトってのがあってpd-for-iosを使うと、iOSで色々なシンセサイザーが作れます。Androidでも作れる。libpdすてき。Github pd-for-ios [https://github.com/libpd/pd-for-ios]Mac版はここからダウンロード可能。Pd-extended [http://puredata.info

PD for iOS版にないオブジェクトの追加の仕方。

サイネージ用アプリ、VJアプリなんかを作るときに、いちいちMacの省エネルギー、スクリーンセーバーを変えるのはイケてないので。アプリが開いている間はスリープしないようにする設定。使い方SampleAppDelegate.m# import "LittleCaffeine.h"- (void)applicationDidFinishLaunching:(NSNotificat

Macアプリを開いている間はスリープさせない２行。

Androidなら細かいバイブレーション制御できるのに。って思っていましたが。iOSでもこうやれば出来ました。カスタムバイブレーション機能をプログラムから使う方法ないのかな。

iOSで1秒未満のバイブレーション

つつみさんがなにやらoFを始めるということで、一日くらい混ぜてもらおうと。最近いろいろと試しているGRTというジェスチャ解析ライブラリの紹介です。ジェスチャ認識とはなんぞや理系じゃないので、正しくはないですが、ふんわりこんな感じなのかな↓ジェスチャ認識とは1.パソコンに正解パターンを沢山教える。→ Classfication2.入力した信号が、どのパターンに似ていたか判定する

openFrameworksでジェスチャ認識

たまたまGPSを使う要件がありまして、GPSがどこまでいけるのか検証してみました。結論からいうと、かなりよい。モジュールはスパークファンから購入したAdafruit Ultimate 66チャンネル10Hz GPSモジュール Version 3[http://www.switch-science.com/catalog/1085/]このライブラリ [https://github.

GPSって実際どれほどの精度なのか試してみた

ofxXmlSettingが使いにくかったので、picojson使ってみました。config.json{	"LV":3,	"HP":1,	"MP":1,	"sleepy":false,	"hungry":true,	"status":"カレー食べたい"}こんな感じのjsonファイルを用意して、testApp.cpp//testapp.cpp# incl

Koki Ibukuro

LiteRT を Unityで動かせるか検討

Kokoro TTSのメモ

ONNX Runtime GenAIをUnityで動かす実験

[Unity] ReadOnlySpan<T>を GraphicsBuffer.SetData() したい

Unity ScriptedImporterで拡張子が被ったときの対策

.NET Native AOTを調べる

Unity SFX Reverb Effect プリセットメモ

Xcode 15でUnityが動かない

ONNXRuntime Unity Plugin

Tips: Unity Visual Effects Graph

Blenderの勉強記録

Unity使ってる人はmacOS Venturaまだ入れないほうが良さそう

UnityでTensorFlow Lite Android Neural Networks API Delegate対応する

ARKit ReplayDataの中身を覗いてみる

iOSアプリのLocalizable stringsをSpread Sheetから作成

AppClipsアプリをXcode Cloudでビルド

画像生成モデルをローカルで動かすメモ

Custom Post Processing Effect in URP

TensorFlow Lite on Unity やってることメモ

Swift Catch-Up Note

Photoshopでカラコレ用のLUTテクスチャを作る

Stemsファイルの各チャンネルの中身を取り出すコマンド

Macで展示とかするときのdotfiles風な。

[Unity] MiniJsonをちょっと楽にするスクリプト

Macで、FAT16フォーマットをする方法

soxで全部の音をノーマライズ

Unity 5.1サラウンド（Mac）

My Swift Snipets

[Mac]Otoyaさん、Kyokoさんで日本語をしゃべる設定

Unityでアルファ付きのムービーを再生したい

Tips エディタ配列フィールドの超簡単なソート

Unity Macでマルチスクリーン＆フルスクリーン。

LiteRT を Unityで動かせるか検討

Kokoro TTSのメモ

ONNX Runtime GenAIをUnityで動かす実験

[Unity] ReadOnlySpan<T>を GraphicsBuffer.SetData() したい

Unity ScriptedImporterで拡張子が被ったときの対策

.NET Native AOTを調べる

Unity SFX Reverb Effect プリセットメモ

Xcode 15でUnityが動かない

ONNXRuntime Unity Plugin

Tips: Unity Visual Effects Graph

Blenderの勉強記録

Unity使ってる人はmacOS Venturaまだ入れないほうが良さそう

UnityでTensorFlow Lite Android Neural Networks API Delegate対応する

ARKit ReplayDataの中身を覗いてみる

iOSアプリのLocalizable stringsをSpread Sheetから作成

AppClipsアプリをXcode Cloudでビルド

画像生成モデルをローカルで動かすメモ

Custom Post Processing Effect in URP

TensorFlow Lite on Unity やってることメモ

Swift Catch-Up Note

Photoshopでカラコレ用のLUTテクスチャを作る

Stemsファイルの各チャンネルの中身を取り出すコマンド

Macで展示とかするときのdotfiles風な。

[Unity] MiniJsonをちょっと楽にするスクリプト

Macで、FAT16フォーマットをする方法

soxで全部の音をノーマライズ

Unity 5.1サラウンド （Mac）

My Swift Snipets

[Mac]Otoyaさん、Kyokoさんで日本語をしゃべる設定

Unityでアルファ付きのムービーを再生したい

Tips エディタ 配列フィールドの超簡単なソート

Unity Macでマルチスクリーン＆フルスクリーン。

Unity 5.1サラウンド（Mac）

Tips エディタ配列フィールドの超簡単なソート