掘金动手实验室 X HarmonyOS NEXT 之 MyEye应用

0. 活动介绍

携手HarmonyOS,与各位开发者共舞! 在活动中你将和志同道合的小伙伴一同深探HarmonyOS的无限可能。这里,不仅是创意的孵化基地,更是技术分享实现的平台。让我们共同激发思维的火花,将你的独特想法付诸实践,在动手实验室的舞台上绽放出绚烂的光彩。无论你是资深开发者还是技术爱好者,都能在这里找到属于你的乐趣与收获,一同创造出令人瞩目的创意成果~

1. 团队介绍

由于我本人还是在自学阶段,怕耽误其他小伙伴最初是打算一个人SOLO的,到了现场有幸遇到了两位朋友,其中一位是我之前参加线下活动就认识的杨雪堂另外一个小伙伴的缘分可以从几百年前说起了,他也姓牛,他网名是麒麟。

2. 关于我

我现在本职工作是测试开发,InfoQ的签约作者,OpenVINO领航者成员,B站一名默默无闻的小UP主。之前一直是测试别人的APP了,这会参加这个活动却要从创意到产品落地都要实现,这对我来说是一个不小的挑战,但是为了能搭上鸿蒙这趟快车,还是决定来参加这次活动了。

3. 关于MyEye(鸿观)项目

由于最近大模型非常火爆,之前用智普的API实现了一个用户上传一张图片,后端返回这个图片的内容。就想着是否可以借助鸿蒙的能力快速开发一个一个可以多端部署的APP,从而帮助视障群体来更好的享受美好的生活。

于是就有了我们这个歌项目MyEye(鸿观),其中"鸿"代表鸿蒙,而"观"则是代表"观看,观赏"这样的行为。

4. 项目的实现方式

在鸿蒙端侧还未搭载原生的大模型之前,初步打算通过API的方式来实现。通过使用HarmonyOS NEXT开发一个应用部署到手机端,用户只需点击APP的唯一按钮(拍照按钮),应用会将拍到的内容上传到服务端,服务端利用Django结合智普的API对用户上传的内容进行识别,然后将识别好的结果返回给鸿蒙设备,在设备端进行TTS的生成,从而让用户了解到刚刚眼前的事物。

makefile 复制代码
info = {
  "status":"success",
  "desc":"图片展示了一个现代办公室或会议室的室内设计。室内有一张长形的办公桌,上面放着一台苹果电脑和一些文具。桌子前面有两把黑色的旋转椅。在房间的左摆满了书籍和装饰品。房间内还有两扇大窗户,可以看到外面的城市景观。整个空间以暖色调为主,给人一种温馨舒适的感觉。"
}

5. 项目目前遇到困境

中午和下午的路演中,在华为大佬的帮助下,了解到目前已经有部分手机厂商做了类似的功能,我们的竞争优势要更突出一些,另外如果走API接口的话,会有延长,可能在辅助出行的场景还是有待考虑的,毕竟要考虑风险安全问题。

6. 最后

在经过一下午的努力最终我们"IT蜗壳队"取得并列第四名。希望在将来的正式比赛中获得更好的名次,也提前祝各位开发者能取得理想名次。

我们下次再见。

-1. 备注

下面这个链接是我在一款开发套件上实现的后端功能,大家可以先体验一下。 www.bilibili.com/video/BV1m1...

相关推荐
lilian2333 小时前
Harmony os 技术实战|拼豆制图09:把 50 张图库素材做成可复跑的生产管线
华为·harmonyos
chjif4 小时前
Android 设备管控开发实战:企业受控终端的 DNS 域名策略实现
android·华为·harmonyos
OH_TPC5 小时前
【鸿蒙优选三方库】@ohos/grpc:在 HarmonyOS 上像调本地方法一样调远程服务
华为·harmonyos·鸿蒙
达子6665 小时前
第30章_综合案例:HarmonyOs开发图解之 俄罗斯方块游戏
游戏·华为·harmonyos
云端漫步19875 小时前
HarmonyOS NEXT AI 应用开发总结:30 篇之旅
人工智能·华为·harmonyos
math_hongfan6 小时前
鸿蒙Agent高级技能自定义开发:自定义意图服务/能力注册/Agent技能编排/服务插件开发实战
android·学习·华为·harmonyos·鸿蒙
math_hongfan6 小时前
鸿蒙AI权限与隐私保护高级:智能数据脱敏/端侧处理优先/数据最小化采集/隐私计算技术栈
人工智能·学习·华为·harmonyos·鸿蒙
云端漫步19878 小时前
HarmonyOS NEXT AI 智能生活助手:项目打包与发布
人工智能·华为·生活·harmonyos
less_121389 小时前
HarmonyOS WPS Open SDK:关闭回传 URI-FD 与沙箱 filePath
华为·harmonyos·wps
math_hongfan9 小时前
鸿蒙多模态AI交互高级:图文+语音+手势融合交互/多模态大模型端侧适配/跨模态检索高阶实战
人工智能·学习·华为·交互·语音识别·harmonyos·鸿蒙