Unity 百度AI实现无绿幕拍照抠像功能（详解版）

目录

一、前言
1.抠像效果
2.去哪找百度ai抠图
3.基础流程跳过 
二、获取AccessToken
1.什么是Token
2.为什么要获取Token
3.如何获取token
4.剖析json
5.完整代码
三、抠像
1.准备地点
2.建立链接，和根本配置
3.图片格式转换
4.开始上传
5.获取回复
6.剖析json
7.纯净代码
四、作者的碎碎念

---

一、前言

1.抠像效果

抠像效果一般，边沿还是会生硬，然后用羽化来过渡。（如图1所示）
   

     图1 抠像    这是网上找的图，侵权删。
2.去哪找百度ai抠图

在百度，这个功能叫人像分割，链接如下。
人像分割技能_人像分割算法_人像分割-百度AI开放平台
3.基础流程跳过 

接下来注册账号之类的，咱就跳过了哈。
过程：
1.注册百度的账号
2.实名认证
3.领百度送的，对应功能的利用次数（我测试的时候送1w次，有用期一年）。
4.创建应用（这个不需要你有做好的程序，只需要走一下游程就行），这里走流程的意义就是，百度有许多功能，你需要什么功能选一下，然后我们给你一个账户和暗码，这样你才气调用这些功能。
5.你就获得了一组账户和暗码（如图2所示）
   

     图2 账号和暗码      api Key和Secret Key
  api Key：api的英文是Application Programming Interface，应用程序编程接口的缩写，到这里就是我们获取了可以用来实现人像分割这个功能的用户名。
  Secret Key：就是秘钥，上面用户名的暗码。
  
  上面两个Key，只要你自己不去更新，一般是不会改变的
  但是，如果你的调用行为百度以为很奇怪，也会临时给你封了。
    备注：百度ai有许多功能，假如百度ai是一个手机，手机里面装了许多个app，但是你登录每一个app都需要不同的用户名和暗码。
  这里就是，我们通过百度这个总的账号，去选择了自己想要的功能，然后百度给你生成一个用户名和暗码，你通过这个可以利用你选好的功能。
  二、获取AccessToken

1.什么是Token

不知道大家去过东北澡堂子没有，进去的时候，会被发一个手牌。（如图3所示）
   

     图3 手牌    然后你只要带着这个手牌，就可以在澡堂子里吃饭，消费等，末了出来的时候，带着手牌去结账就行了。不同的手牌会有不同的权限，好比平凡宾客，贵宾，vip，超级vip什么的。手牌上面还会有号码，号码就类似身份证号一样，大家都不一样，用来辨认。
   弄这个手牌的目的大致有两种：
  1.澡堂子里有许多水，一直带着手机很麻烦，但不带手机，又会不知道你是哪一个宾客。
  2.手机不能直观的看出来你是哪种宾客，但是牌子可以。
  Token和这个手牌根本是一样的，你先把自己的账号和暗码上交，根据你购买的套餐，会给你一串序列号，在肯定的时间内，你只要提交序列号就可以用你购买的功能，百度也知道是哪个账号购买的。
2.为什么要获取Token

我们可以直接用账号和暗码访问，我们也能利用token访问，但是，因为是用互联网通报消息，如果用账号和暗码，那你每一次提出哀求都要提供账户和暗码，这样不是很安全，黑客一拦截一个准，所以，换成token，就减少了提交用户和暗码的次数，就安全许多。
可以简单这么理解一下，至于过细的，大家可以自行百度，但总之，有这么一个流程。
3.如何获取token

这个可以在百度的官方文档中找到。在百度，这部分官方的名称叫做鉴权认证机制。
https://ai.baidu.com/ai-doc/REFERENCE/Ck3dwjhhu
想看官方的可以看官方的，或者看我的也可以。
   获取token需要三个东西：
  1.往哪个网站发哀求
  （上面的官方链接里有写，往https://aip.baidubce.com/oauth/2.0/token?发哀求）
  2.用户名（前言里获取过）
  3.暗码（前言里获取过）
  在代码里，我们可以先把他们写出来。
我们的目的是获取token，我们可以再建一个字符串用来接token。（如图4所示）
   

     图4 常用字符   

1. void Start()
2. {
3.      GetToken();
4. }
6. public void GetToken()
7. {
8.      //声明一个客户端，就是自己
9.      HttpClient client = new HttpClient();
11.      //建立一个字典，把我们需要的信息都放进去
12.      //但是建立字典的类型是KeyValuePair，因为我们后面要传递数据
13.      List<KeyValuePair<String, String>> paraList = new List<KeyValuePair<string, string>>();
14.      paraList.Add(new KeyValuePair<string, string>("client_id", client_id));
15.      paraList.Add(new KeyValuePair<string, string>("client_secret", client_secret));
16.      paraList.Add(new KeyValuePair<string, string>("grant_type", "client_credentials"));
18.                                                                  //这里本来要放httpContent，但是这个方法可以把
19.      //接受网络的回复                                               //keyValuePair转换成httpContent
20.      HttpResponseMessage response = client.PostAsync(token_url, new FormUrlEncodedContent(paraList)).Result;
21.      //最后接受回复，转换成string
22.      string resultJson = response.Content.ReadAsStringAsync().Result;
23.      //打印一下string
24.      Debug.Log(resultJson);
25. }

复制代码

打印效果为：
   

     图5 打印效果    你会得到一大堆数据，其中有一个部分是access_token，我们要的就是这部分，这部分就是token。
4.剖析json

得到数据后，这个数据是json格式的数据，如果你会剖析json数据，就可以自己解决了。
如果解决不了，你也可以采用string的手法直接弄出来。
up很懒，用了一个叫LitJson.dll，里面直接有剖析的方法。

1.         //先读取json格式的文本
2.         JsonReader json = new JsonReader(resultJson);
3.         //把上面读取的文本转换成可以直接调用的数据格式
4.         JsonData jsonData = JsonMapper.ToObject<JsonData>(json);
5.         //直接获取名称是access_token后面的数据        
6.         jsonData["access_token"].ToString();

复制代码

5.完整代码

1. using System;
2. using System.Collections.Generic;
3. using System.Net.Http;
4. using LitJson;
5. using UnityEngine;
7. public class GetAccessToken : MonoBehaviour
8. {
9.     //网址
10.     string token_url = "https://aip.baidubce.com/oauth/2.0/token?";
11.     //用户名
12.     string client_id = "填自己的id";
13.     //密码
14.     string client_secret = "填自己的密码";
16.     //token
17.     public string token;
20.     void Start()
21.     {
22.         token = GetToken();
23.         Debug.Log("获得token：" + token);
24.     }
26.     public string GetToken()
27.     {
28.         HttpClient client = new HttpClient();
30.         List<KeyValuePair<String, String>> paraList = new List<KeyValuePair<string, string>>();
31.         paraList.Add(new KeyValuePair<string, string>("client_id", client_id));
32.         paraList.Add(new KeyValuePair<string, string>("client_secret", client_secret));
33.         paraList.Add(new KeyValuePair<string, string>("grant_type", "client_credentials"));
35.         HttpResponseMessage response = client.PostAsync(token_url, new FormUrlEncodedContent(paraList)).Result;
36.         string resultJson = response.Content.ReadAsStringAsync().Result;
37.         //Debug.Log(resultJson);
40.         JsonReader json = new JsonReader(resultJson);
41.         JsonData jsonData = JsonMapper.ToObject<JsonData>(json);
42.             
43.         return jsonData["access_token"].ToString();
44.     }
45. }

复制代码

三、抠像

官方文档：https://ai.baidu.com/ai-doc/BODY/Fk3cpyxua
可以自己去研究，也可以往下看我的。
起首从官方那里拿到网址：

然后准备一下中途要用的方法（这些方法均不是重点，都不讲了）
方法1：图片从Texture转换到Texture2D

1.     //Texture转Texture2D
2.     private Texture2D TextureToTexture2D(Texture texture)
3.     {
4.         width = texture.width;
5.         height = texture.height;
7.         Texture2D texture2D = new Texture2D(texture.width, texture.height, TextureFormat.RGBA32, false);
8.         RenderTexture currentRT = RenderTexture.active;
9.         RenderTexture renderTexture = RenderTexture.GetTemporary(texture.width, texture.height, 32);
10.         Graphics.Blit(texture, renderTexture);
12.         RenderTexture.active = renderTexture;
13.         texture2D.ReadPixels(new Rect(0, 0, renderTexture.width, renderTexture.height), 0, 0);
14.         texture2D.Apply();
16.         RenderTexture.active = currentRT;
17.         RenderTexture.ReleaseTemporary(renderTexture);
19.         return texture2D;
20.     }

复制代码

方法2：图片从Texture2D转换为Base64

1.     //texture2D转base64
2.     public string TextureToBase64(Texture2D texture2D)
3.     {
4.         byte[] bytes;
5.         bytes = texture2D.EncodeToPNG();
6.         return Convert.ToBase64String(bytes);
7.     }

复制代码

方法3：Base64转texture2D

1.     //base转texture2D
2.     public Texture2D Base64ToTexture2d(string base64)
3.     {
4.         byte[] bytes = Convert.FromBase64String(base64);
5.         Texture2D tex = new Texture2D(width, height, TextureFormat.RGBA32, false);
6.         tex.LoadImage(bytes);
8.         return tex;
9.     }

复制代码

1.准备地点

在前面给出地点的基础上，加上我们前面获取的token

1. //host地址
2. string host = "https://aip.baidubce.com/rest/2.0/image-classify/v1/body_seg?“+”access_token=" + token;

复制代码

2.建立链接，和根本配置

1. //设置编码格式是默认
2. Encoding encoding = Encoding.Default;
3. //发送请求到前面配好的网址
4. HttpWebRequest request = (HttpWebRequest)WebRequest.Create(host);
5. //这是前面要求的
6. request.Method = "post";
7. //一直保持链接
8. request.KeepAlive = true;

复制代码

3.图片格式转换

这里假设我们有一个RawImage，名字叫photo，末了转换成buffer

1. //获取图片并转换成texture2D
2. Texture2D texture2D = TextureToTexture2D(photo.texture);
3. //再转换成base64
4. string base64 = TextureToBase64(texture2D);
5. //转换成url格式
6. string str = "image=" + HttpUtility.UrlEncode(base64);
7. //转换成byte格式
8. byte[] buffer = encoding.GetBytes(str);

复制代码

4.开始上传

1. //获取长度
2. request.ContentLength = buffer.Length;
3. //发送请求
4. request.GetRequestStream().Write(buffer, 0, buffer.Length);

复制代码

5.获取回复

1. HttpWebResponse response = (HttpWebResponse)request.GetResponse();
2. StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.Default);
3. string result = reader.ReadToEnd();
4. Debug.Log("人像分割:" + result);

复制代码

6.剖析json

1. JsonReader jr = new JsonReader(result);
2. JsonData data = JsonMapper.ToObject<JsonData>(jr);
4. //拿到的扣好的数据
5. string picData = data["foreground"].ToString();
6. Texture2D tex = Base64ToTexture2d(picData);

复制代码

7.纯净代码

1. IEnumerator IBody_seg()
2. {
3.      string host = "https://aip.baidubce.com/rest/2.0/image-classify/v1/body_seg?“+”access_token=" + token;
5.      Encoding encoding = Encoding.Default;
6.      HttpWebRequest request = (HttpWebRequest)WebRequest.Create(host);
7.      request.Method = "post";
8.      request.KeepAlive = true;
10.      yield return null;
12.      Texture2D texture2D = TextureToTexture2D(photo.texture);
13.      string base64 = TextureToBase64(texture2D);
15.      string str = "image=" + HttpUtility.UrlEncode(base64);
16.      byte[] buffer = encoding.GetBytes(str);
18.      request.ContentLength = buffer.Length;
19.      request.GetRequestStream().Write(buffer, 0, buffer.Length);
21.      yield return null;
23.      HttpWebResponse response = (HttpWebResponse)request.GetResponse();
24.      StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.Default);
25.      string result = reader.ReadToEnd();
26.      Debug.Log("人像分割:" + result);
28.      yield return null;
30.      JsonReader jr = new JsonReader(result);
31.      JsonData data = JsonMapper.ToObject<JsonData>(jr);
33.      string picData = data["foreground"].ToString();
34.      Texture2D tex = Base64ToTexture2d(picData);
36.     //如果你有个image，可以使用图片
37.      pic.sprite = Sprite.Create(tex, new Rect(0, 0, tex.width, tex.height), new Vector2(0, 0));
38.      pic2.sprite = pic.sprite;
40. }

复制代码

四、作者的碎碎念

如果有什么疑问，可以在批评区发出来讨论一下，我看见了会回复。
照片是直接在网上找的，侵权立删。

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。