MusiKraken ist ein experimenteller MIDI Controller Baukasten.
Gewinner des 2022 MIDI Innovation Awards in der Kategorie "Software Prototypes / Non-Commercial Products".
Mache Musik mit Sensoren wie Touch, Accelerometer, Mikrofon und Kamera (Gesichts- Hand-, Ganzkörper-und Farbtracking und Tiefensensorunterstützung), oder mit verbundenen Geräten wie Game Controllern oder Apple Watch.
Wähle im Editor aus mehreren Modultypen und verbinde ihre Ports, um dein eigenes MIDI-Controller-Setup zu erstellen. Leite die MIDI-Signale durch Effektmodule, um Akkorde in einzelne Noten zu separieren, sie zu transponieren und an separate Kanäle zu senden, um mehrere virtuelle Instrumente gleichzeitig zu steuern.
MusiKraken unterstützt das Senden und Empfangen von MIDI-Daten über WLAN, Bluetooth oder über Core-MIDI (z. B. mithilfe von Inter-Device Audio and MIDI (IDAM)), und kann Audio Unit Instrumente hosten.
Wichtig: Einige der Module benötigen iOS Geräte mit spezifischer Hardware: ARKit Gesichtstracking und das TrueDepth Modul benötigen eine TrueDepth Front Kamera, und Hand und Körper Tracking benötigt mindestens iOS 14 und könnte auf älteren Geräten sehr langsam sein.
Eingabemodule:
-Keyboard: MPE, markieren von Tonleitern, und Kontrolle über zusätzliche Parameter via Sliden, Druck oder Fingerradius.
-Akkord Pad: Spielt Akkorde und Inversionen von ausgewählten Tonleitern.
-Touchpad: Bewege mehrere Finger auf einem Touchpad, um bis zu 5 Parameter gleichzeitig zu steuern.
-ARKit Gesichtstracking: Verwendet die TrueDepth Kamera, um Noten oder Steuerparameter mit Mund, Augen, Zunge oder durch Bewegen des Kopfes zu erzeugen.
-Mundtracking: Verwendet die normale Kamera, um die Mundöffnung zu erkennen.
-TrueDepth: Verwendet das Tiefensignal der Kamera, um die Distanz zum nächsten Gegenstand zu erkennen.
-Hand Tracking: Wandle die Position deiner Hände oder simple Handgesten in MIDI um. Unterstützt bis zu 2 Hände und Tiefensensor.
-Körpertracking: Verwendet die Kamera, um die Positionen der Hände, Füsse und des Kopfes von bis zu 2 Personen zu tracken.
-Farbtracking: Trackt Objekte gemäss ihrer Farbe.
-Bewegungssensoren: Verwendet das Accelerometer, Gyroskop und des Magnetometers, um die aktuelle Rotation des Geräts zu erkennen.
-Accelerometer: Misst die Beschleunigung des Geräts.
-Apple Watch: Verwende die Bewegungssensoren, Herzfrequenz, Touch und die Digital Crown.
-Game Controller: Verwende Knöpfe, Thumbsticks und alles andere.
-Mikrofon: Erkennt die Tonhöhe und Lautstärke via Mikrofon.
-Externes Eingabegerät: Sammelt MIDI Events von verbundenen Eingabegeräten.
Ausgabemodule:
-Externes Ausgabegerät: Sendet MIDI Events an verbundene Geräte und Apps.
-Core MIDI Netzwerk: Sendet MIDI Events via WiFi.
-Snarp Netzwerk MIDI: Eigene Implementation, um MIDI via WiFi zu schicken.
-SimpleSynth: Generiere einfache Synthesizer-Sounds direkt auf dem iOS Gerät.
Effekte:
-Akkordteiler: Teilt Akkorde in separate Noten auf und leitet diese zu separaten MIDI Kanälen.
-Kanalwechsler: Ändert den MIDI-Kanal von Events.
-Wert-zu-MIDI Umwandler: Umwandler, um numerische Werte (grüne Ports) in MIDI-Events (orange Ports) umzuwandeln. konvertieren.
-Transposer: Transponiere MIDI-Noten.
-Arpeggiator: Spielt Einzeltöne von Akkorden in bestimmten Mustern.
-Geschwindigkeit: Errechnet einen neuen Wert basierend auf der Änderungsgeschwindigkeit von einem anderen Wert.
-Beat: Spielt Beats, wenn ein Wert schnell geändert wurde.
-Threshold: Spielt Noten, wenn ein Wert über einen bestimmten Schwellenwert geht.
-LFO: Generiert ein LFO aus Eingangswerten.
-Envelope: Generiert einen ADSR-Wert, wenn Noten gespielt werden.
-Latch: Behält Noten aktiv, bis die gleiche Note nochmals gespielt wird.
-Filter: Filtert Events nach Kanal, Note, Velocity oder CC.
Die App verwendet HealthKit, um auf Apple Watch Daten wie Herzfrequenz zuzugreifen. Die App verwendet Sensor Daten nur, um MIDI Events zu generieren.