安卓开发 利用百度识图api进行物体识别
阅读原文时间:2023年07月09日阅读:1

前文

之前的随笔中,已经通过相机或相册获取到了我们想要的图片,接下来进行识图api的配置工作。我使用的是百度的api,利用python获取信息,并在MainActivity中进行调用来输出信息。

一、首先我们需要申请创建一个应用(管理控制台->产品服务->图像识别),百度智能云,得到api keysecret key

利用百度api进行识图的python代码,因为我们一会需要在as中调用函数,所以不需要写主函数了

# coding=utf-8

import sys
import json
import base64

保证兼容python2以及python3

IS_PY3 = sys.version_info.major == 3
if IS_PY3:
from urllib.request import urlopen
from urllib.request import Request
from urllib.error import URLError
from urllib.parse import urlencode
from urllib.parse import quote_plus
else:
import urllib2
from urllib import quote_plus
from urllib2 import urlopen
from urllib2 import Request
from urllib2 import URLError
from urllib import urlencode

防止https证书校验不正确

import ssl
ssl._create_default_https_context = ssl._create_unverified_context

API_KEY = '你的API Key'

SECRET_KEY = '你的Secret Key'

IMAGE_RECOGNIZE_URL = "https://aip.baidubce.com/rest/2.0/image-classify/v2/advanced_general"

""" TOKEN start """
TOKEN_URL = 'https://aip.baidubce.com/oauth/2.0/token'

"""
获取token
"""
def fetch_token():
params = {'grant_type': 'client_credentials',
'client_id': API_KEY,
'client_secret': SECRET_KEY}
post_data = urlencode(params)
if (IS_PY3):
post_data = post_data.encode('utf-8')
req = Request(TOKEN_URL, post_data)
try:
f = urlopen(req, timeout=5)
result_str = f.read()
except URLError as err:
print(err)
if (IS_PY3):
result_str = result_str.decode()

result = json.loads(result\_str)

if ('access\_token' in result.keys() and 'scope' in result.keys()):  
    if not 'brain\_all\_scope' in result\['scope'\].split(' '):  
        print ('please ensure has check the  ability')  
        exit()  
    return result\['access\_token'\]  
else:  
    print ('please overwrite the correct API\_KEY and SECRET\_KEY')  
    exit()

"""
读取文件
"""
def read_file(image_path):
f = None
try:
f = open(image_path, 'rb')
return f.read()
except:
print('read image file fail')
return None
finally:
if f:
f.close()

"""
调用远程服务
"""
def request(url, data):
req = Request(url, data.encode('utf-8'))
has_error = False
try:
f = urlopen(req)
result_str = f.read()
if (IS_PY3):
result_str = result_str.decode()
return result_str
except URLError as err:
print(err)

"""
调用识别接口并打印结果
"""
def print_result(filename,url):
# 获取图片
file_content = read_file(filename)

response = request(url, urlencode(  
    {  
        'image': base64.b64encode(file\_content),  
        'top\_num': 1  
    }))  
result\_json = json.loads(response)

#返回识别结果中得分最高的"keyword"  
for data in result\_json\["result"\]:  
    return data\["keyword"\]

#返回结果示例

"result": [{

"score": 0.967622,

"root": "公众人物",

"baike_info": {

"baike_url": "http://baike.baidu.com/item/%E6%96%B0%E5%9E%A3%E7%BB%93%E8%A1%A3/8035884",

"image_url": "http://imgsrc.baidu.com/baike/pic/item/91ef76c6a7efce1b27893518a451f3deb58f6546.jpg",

"description": "新垣结衣(Aragaki Yui),1988年6月11日出生于冲绳县那霸市。日本女演员、歌手、模特。毕业于日出高中。2001年,参加《nicola》模特比赛并获得最优秀奖。2005年,因出演现代剧《涩谷15》而作为演员出道。2006年,参演校园剧《我的老大,我的英雄》;同年,她还出版了个人首本写真集《水漾青春》。2007年,她从日出高校毕业后开始专注于演艺发展,并发表个人首张音乐专辑《天空》;同年,新垣结衣还主演了爱情片《恋空》,而她也凭借该片获得了多个电影新人奖项。2010年,主演爱情片《花水木》。2011年,主演都市剧《全开女孩》。2012年,相继参演现代剧《Legal High》、剧情片《剧场版新参者:麒麟之翼》。2013年,主演都市剧《飞翔情报室》。2014年,她主演了剧情片《黎明的沙耶》。2016年,主演爱情喜剧《逃避虽可耻但有用》,并凭借该剧获得了多个电视剧女主角奖项。2017年,主演爱情片《恋爱回旋》,凭借该片获得第60届蓝丝带奖最佳女主角;同年11月,她还凭借医疗剧《Code Blue 3》获得第94届日剧学院赏最佳女配角。"

},

"keyword": "新垣结衣"

},

{

"score": 0.716067,

"root": "人物-人物特写",

"keyword": "头发"

},

{

"score": 0.421281,

"root": "商品-穿戴",

"keyword": "围巾"

},

{

"score": 0.22347,

"root": "商品-五金",

"keyword": "拉链"

},

{

"score": 0.028031,

"root": "商品-穿戴",

"keyword": "脖套"

}]

二、将这个python代码插入到as中,需要用到chaquopy,具体配置教程

三、在MainActivity中调用python函数

// 初始化Python环境
void initPython(){
if (! Python.isStarted()) {
Python.start(new AndroidPlatform(this));
}
}

    mBtnFinish.setOnClickListener(new View.OnClickListener() {  
        @Override  
        public void onClick(View v) {  
            if (mTvPath.getText().toString().equals("图片路径:")){  
                // 如果一张图片都没选  
                ToastUtil.showMsg(getApplicationContext(), "您还没有选择图片呢!");  
            }else{  
                Python py = Python.getInstance();  
                PyObject token = py.getModule("hello").callAttr("fetch\_token");//获取token  
                String token2 = token.toJava(String.class);//将获取的token转换为Java中的string类型  
                String url = "https://aip.baidubce.com/rest/2.0/image-classify/v2/advanced\_general?access\_token=" + token2;//拼接url

                PyObject pyObject = py.getModule("hello").callAttr("print\_result",mTvPath.getText(),url);//调用python函数  
                String returnString = pyObject.toString();  
                System.out.println(returnString);  
                mTvResult.setText("识别成功!结果为:"+returnString);  
            }  
        }  
    });

遇到的问题:

点击拍照后,照片不会更新,但是并不影响识别结果

原因分析:在安卓7.0以上,使用了共享文件的形式,每次拍照使用了相同的路径,旧图片会被新图片顶替掉,于是在

Glide.with(MainActivity.this).load(outputUri).into(mIvPic);//使用Glide进行图片展示

的时候,glide使用了相同的uri,导致imageview没有刷新图片,但是并不影响使用python函数进行图片识别的结果,因为uri是正确的。

暂时还没有解决