xamarin iOS Binding プロジェクトで OpenEars v2.03 iOS フレームワーク プロジェクトの使用に取り組んでいます。私がこれまでに行ったことを説明させてください.XCode、Xamarin、およびこれらすべてのバインディングのことは初めてです。これは大きな問題になるので、息を止めてください…</p>
1) Xcode for Simulator で OpenEars フレームワーク プロジェクトをビルドします。Framework/OpenEars.framework/Versions/Current/から「OpenEars」ファイルをコピーし、名前を「<strong>libOpenEars-i386.a」に変更しました</p>
同様に、デバイスを Mac に接続し、ターゲットを iPhone に選択して、iPhone 4s デバイス用の同じライブラリを構築します。最後に、生成された OpenEars をコピーし、名前を「<strong>libOpenEars-armv7.a」</p> に変更しました。
2) lipoコマンドを使用して、以下のコマンドを使用して、2 つのファイル (libOpenEars-i386.a、libOpenEars-armv7.a) を 1 つのファイル「libOpenEars.a」にバンドルしました。
lipo -create -output libOpenEars.a libOpenEars-i386.a libOpenEars-armv7.a
3) Xamarin Studio で Binding プロジェクトを作成し、libOpenEars.a を追加すると、自動的にlibOpenEars.linkwith.csが生成されます。以下は、次のコードです。
using System;
using ObjCRuntime;
[assembly: LinkWith ("libOpenEars.a", LinkTarget.ArmV7 | LinkTarget.Simulator, SmartLink = true, ForceLoad = true, Frameworks="AudioToolbox AVFoundation", IsCxx=true, LinkerFlags = "-lstdc++")]
liker フラグ LinkerFlags = "-lstdc++ -lc++ -ObjC" および SmartLink=false を変更してみました。
4) 私の ApiDefinition ファイルには、OpenEars のすべてのインターフェイスが含まれています。ここでは、インターフェイスを 1 つだけ追加しました。
[BaseType(typeof(NSObject))]
[Protocol]
interface OEEventsObserver
{
[Wrap ("WeakDelegate")]
OEEventsObserverDelegate Delegate { get; set; }
[Export ("delegate", ArgumentSemantic.Assign), NullAllowed]
NSObject WeakDelegate { get; set; }
}
5) OpenEars.dll を iOS サンプル プロジェクトに参照しました。
6) バインディング ライブラリ自体に言語モデルと音響モデルを追加します。(動的な言語モデルの生成には必要ありませんが、このOpenEars Xamarin gitの古い OpenEars サンプル プロジェクトを使用しました。新しい DynamicLanguageModel ジェネレーターは使用しませんでしたが、最新の変更に合わせて例を変更しました)。
ビューコントローラー:
public partial class OpenEarsNewApiViewController : UIViewController
{
OEEventsObserver observer;
OEFliteController fliteController;
OEPocketsphinxController pocketSphinxController;
String pathToLanguageModel;
String pathToDictionary;
String pathToAcousticModel;
String firstVoiceToUse;
String secondVoiceToUse;
static bool UserInterfaceIdiomIsPhone {
get { return UIDevice.CurrentDevice.UserInterfaceIdiom == UIUserInterfaceIdiom.Phone; }
}
public void init()
{
try
{
observer = new OEEventsObserver();
observer.Delegate = new OpenEarsEventsObserverDelegate (this);
pocketSphinxController = new OEPocketsphinxController ();
fliteController = new OEFliteController();
firstVoiceToUse = "cmu_us_slt";
secondVoiceToUse = "cmu_us_rms";
pathToLanguageModel = NSBundle.MainBundle.ResourcePath + System.IO.Path.DirectorySeparatorChar + "OpenEars1.languagemodel";
pathToDictionary = NSBundle.MainBundle.ResourcePath + System.IO.Path.DirectorySeparatorChar + "OpenEars1.dic";
pathToAcousticModel = NSBundle.MainBundle.ResourcePath;
}
catch(Exception e) {
Console.WriteLine ("Exception Message :"+e.Message);
Console.WriteLine ("Inner Exception Mesage :"+e.InnerException.Message);
}
}
public OpenEarsNewApiViewController (IntPtr handle) : base (handle)
{
init ();
}
#region Update
public void UpdateStatus (String text)
{
txtStatus.Text = text;
}
public void UpdateText (String text)
{
txtOutput.Text = text;
}
public void UpdateButtonStates (bool hidden1, bool hidden2, bool hidden3, bool hidden4)
{
btnStartListening.Hidden = hidden1;
btnStopListening.Hidden = hidden2;
btnSuspend.Hidden = hidden3;
btnResume.Hidden = hidden4;
}
public void Say (String text)
{
//fliteController.SaywithVoice (text, secondVoiceToUse);
}
public void StartListening ()
{
//pocketSphinxController.RequestMicPermission ();
if (!pocketSphinxController.IsListening) {
//NSString *correctPathToMyLanguageModelFile = [NSString stringWithFormat:@"%@/TheNameIChoseForMyLanguageModelAndDictionaryFile.%@",[NSSearchPathForDirectoriesInDomains(NSCachesDirectory, NSUserDomainMask, YES) objectAtIndex:0],@"DMP"];
pocketSphinxController.StartListeningWithLanguageModelAtPath (
pathToLanguageModel,
pathToDictionary,
pathToAcousticModel,
false
);
} else {
new UIAlertView ("Notify !!","Already Listening",null,"OK","Stop").Show();
}
}
public void StopListening ()
{
//pocketSphinxController.StopListening ();
}
public void SuspendRecognition ()
{
pocketSphinxController.SuspendRecognition ();
}
public void ResumeRecognition ()
{
pocketSphinxController.ResumeRecognition ();
}
#endregion
#region Event Handlers
partial void btnStartListening_TouchUpInside (UIButton sender)
{
try
{
StartListening();
//fliteController.Init();
//Console.WriteLine("Speech in Progress :"+fliteController.SpeechInProgress);
//fliteController.Say("Hai", new OEFliteVoice());
UpdateButtonStates (true, false, false, true);
Console.WriteLine("Speech in Progress :"+fliteController.SpeechInProgress);
}
catch(Exception e)
{
Console.WriteLine(e.Message);
}
}
partial void btnStopListening_TouchUpInside (UIButton sender)
{
StopListening ();
UpdateButtonStates (false, true, true, true);
}
partial void btnSuspend_TouchUpInside (UIButton sender)
{
SuspendRecognition ();
UpdateButtonStates (true, false, true, false);
}
partial void btnResume_TouchUpInside (UIButton sender)
{
ResumeRecognition ();
UpdateButtonStates (true, false, false, true);
}
}
<strong>OpenEarsEventsObserverDelegate:
// nothing much here just to check the status and debugging
public class OpenEarsEventsObserverDelegate:OEEventsObserverDelegate
{
OpenEarsNewApiViewController _controller;
public OpenEarsNewApiViewController controller {
get {
return _controller;
}
set {
_controller = value;
}
}
public OpenEarsEventsObserverDelegate (OpenEarsNewApiViewController ctrl)
{
controller = ctrl;
}
public override void PocketsphinxRecognitionLoopDidStart()
{
//base.PocketsphinxRecognitionLoopDidStart();
Console.WriteLine ("Pocketsphinx is starting up");
controller.UpdateStatus ("Pocketsphinx is starting up");
}
public override void PocketsphinxDidReceiveHypothesis (Foundation.NSString hypothesis, Foundation.NSString recognitionScore, Foundation.NSString utteranceID)
{
controller.UpdateText ("Heard: " + hypothesis);
controller.Say ("You said: " + hypothesis);
}
public override void PocketSphinxContinuousSetupDidFail ()
{
}
public override void PocketsphinxDidCompleteCalibration ()
{
Console.WriteLine ("Pocket calibration is complete");
controller.UpdateStatus ("Pocket calibratio is complete");
}
public override void PocketsphinxDidDetectSpeech ()
{
}
public override void PocketsphinxDidStartListening ()
{
Console.WriteLine ("Pocketsphinx is now listening");
controller.UpdateStatus ("Pocketphinx is now listening");
controller.UpdateButtonStates (true, false, false, true);
}
public override void PocketsphinxDidStopListening ()
{
}
public override void PocketsphinxDidStartCalibration ()
{
Console.WriteLine ("Pocketsphinx calibration has started.");
controller.UpdateStatus ("Pocketsphinx calibration has started");
}
public override void PocketsphinxDidResumeRecognition ()
{
}
public override void PocketsphinxDidSuspendRecognition ()
{
}
public override void PocketsphinxDidDetectFinishedSpeech ()
{
}
public override void FliteDidStartSpeaking ()
{
}
public override void FliteDidFinishSpeaking ()
{
}
}
これは iOS シミュレーターでは完全に機能しますが、実際のデバイスでは実行されません。
デバイスで実行中にこのエラー メッセージが表示されました。すべてのインターフェイスで同じメッセージが表示されます。
Exception Message :Wrapper type 'OpenEars.OEEventsObserver' is missing its native ObjectiveC class 'OEEventsObserver'.
2015-05-15 12:55:26.996 OpenEarsNewApi[1359:231264] Unhandled managed exception: Exception has been thrown by the target of an invocation. (System.Reflection.TargetInvocationException)
at System.Reflection.MonoCMethod.InternalInvoke (System.Object obj, System.Object[] parameters) [0x00016] in /Developer/MonoTouch/Source/mono/mcs/class/corlib/System.Reflection/MonoMethod.cs:543
デバイスのバインドに関連する何かが不足していますか?
make ファイルも使用して同じ .dll をビルドしようとしましたが、同じエラー メッセージが表示されました。
OpenEars フレームワークを構築する場合:
xcodebuild -project OpenEars.xcodeproj -target OpenEars -sdk iphonesimulator8.2 -arch i386 -configuration Release clean build
xcodebuild -project OpenEars.xcodeproj -target OpenEars -sdk iphoneos -arch armv7 -configuration Release clean build
OpenEars.dll を生成するための MAKE ファイル
BTOUCH=/Developer/MonoTouch/usr/bin/btouch-native
all: OpenEars.dll
OpenEars.dll: AssemblyInfo.cs OpenEars.cs libOpenEars.a
$(BTOUCH) -unsafe --new-style -out:$@ OpenEars.cs -x=AssemblyInfo.cs --link-with=libOpenEars.a,libOpenEars.a
clean:
-rm -f *.dll
ここで完全な mtouchエラー ログを確認してください
$lipo -info libOpenEars.a
Architectures in the fat file: libOpenEars.a are: i386 armv7
$nm -arch armv7 libOpenEars.a を確認してください
OEEvent がシミュレーターに存在することを確認しました (i386)
$ nm -arch i386 libOpenEars.a | grep OEEvent
出力
U _OBJC_CLASS_$_OEEventsObserver
00006aa0 S l_OBJC_LABEL_PROTOCOL_$_OEEventsObserverDelegate
000076f0 S l_OBJC_PROTOCOL_$_OEEventsObserverDelegate
warning: /Applications/Xcode.app/Contents/Developer/Toolchains/XcodeDefault.xctoolchain/usr/bin/nm: no name list
libOpenEars.a(OEEventsObserver.o):
00002174 S _OBJC_CLASS_$_OEEventsObserver
00002170 S _OBJC_IVAR_$_OEEventsObserver._delegate
00002188 S _OBJC_METACLASS_$_OEEventsObserver
U _OBJC_CLASS_$_OEEventsObserver
00002d90 S l_OBJC_LABEL_PROTOCOL_$_OEEventsObserverDelegate
000035a0 S l_OBJC_PROTOCOL_$_OEEventsObserverDelegate
armv7にOEEventが存在することを確認しました
$nm -arch armv7 libOpenEars.a | grep OEEvent
出力
U _OBJC_CLASS_$_OEEventsObserver
00005680 S l_OBJC_LABEL_PROTOCOL_$_OEEventsObserverDelegate
000062d8 S l_OBJC_PROTOCOL_$_OEEventsObserverDelegate
warning: /Applications/Xcode.app/Contents/Developer/Toolchains/XcodeDefault.xctoolchain/usr/bin/nm: no name list
libOpenEars.a(OEEventsObserver.o):
00001cb4 S _OBJC_CLASS_$_OEEventsObserver
00001cb0 S _OBJC_IVAR_$_OEEventsObserver._delegate
00001cc8 S _OBJC_METACLASS_$_OEEventsObserver
U _OBJC_CLASS_$_OEEventsObserver
00002638 S l_OBJC_LABEL_PROTOCOL_$_OEEventsObserverDelegate
00002e50 S l_OBJC_PROTOCOL_$_OEEventsObserverDelegate
何が欠けているのかわかりません。はい、文法の間違いがたくさんあります。これを読んでくれてありがとう。