自然语言交流系统 phxnet团队 创新实训 项目博客 （六）

从你进入软件开始，你就建立了和服务器的联系。这是一段和服务器的长连接，直到你退出此软件。

2D文字聊天界面大致实现了文字输入、发送消息、接收消息、你可以通过点击按钮让机器人开启聊天模式或者学习模式、又或是进入3D语音聊天界面或者退出。在assets文件夹下导入NGUI（使用的是3.6.8版本的.unitypackage）包,点击按钮时有声音和透明度、阴影的变化，通过给按钮添加声音.....这样的组件，使得用户体验得到提高，每当点击发送按钮实例化一个prefab呈现在聊天对话框中，你可以看见你发送的文字和你从服务器接收到的返回的对话，通过点击聊天对话框的文字，你的消息可以合拢关闭暂时隐藏，这是使用NGUI插件的UI Play Tween.script，通过服务器端发送回来的消息附带着标识字符，可以使人物做出相应的动作，画面的层次感是通过调节两个照相机的DEPTH、PROJECTION、SIZE、CLIPPING PLANES实现的，学习模式和聊天模式的相互切换则是通过向服务器发送标识字符来实现模式切换。

 

3D语音聊天界面重在动画，把动画过度的condition设置为下个动画为TRUE，当收到服务器端的标识字符，就把它设置为TRUE，人物就产生动画的过度。在人物模型的四个方向搭建照相机，调节照相机在最终屏幕上出现的位置，经过四棱锥对光的折射和反射，四个照相机所拍摄到的场景恰恰使其投影到了四棱锥中心，形成了立体。背景中，地势是用unity的Terrain，勾出起伏的地势，铺上texture草坪和树，给四个照相机添加天空盒子组件。同时，你也可以在3D界面通过按钮点击实现去2D文字聊天界面或者退出此程序。

UNITY和Android的交互：

AndroidJavaClass jc =

new AndroidJavaClass(“com.unity3d.player.UnityPlayer”);

AndroidJavaObject  activity=jc.GetStatic<AndroidJavaObject>(“currentActivity”);

得到AndroidJavaClass类并且获得AndroidJavaObject  的activity对象，通过activity.Call(“”,args)函数的第一个参数(函数名)可以调用Android端的一个函数，args传递了此函数的参数，

UnityPlayer.UnitySendMessage

("AndroidManager", "AndroidCallBack",””);在安卓端将从科大讯飞翻译过后的文本传送给了以AndroidManager命名的类中AndroidCallBack为名的函数，由此实现了安卓和unity的交互。

 

UNITY和3DMAX动画模型的融合: 在assets包下导入3DMAX动画模型的包，创建一个Animator Controller,实现一个动画向下一个动画的过度，将动画模型加入场景，给每一个动画模型加上此动画控制器，使得动画控制的条件为下一个动画为true时，当从服务器接收到标识符时，就使他产生不同的动画，这样就实现了根据对话内容让模型做出相应的动作。

UNITY和服务器的通信：通过TCP/IP协议进行通信，使用SOCKET建立和对应IP对应端口号的连接，开启一个线程去等待着接收由服务器端发送过来的消息，读入时编码方式使用UTF-8，发送字符串通过socket,BeginSend方法实现发送。