鸿蒙Harmony实战：Accessibility Kit应用开发

embedded/2024/9/24 6:30:07/

 前言：

 “Accessibility”译作“信息无障碍”，是指任何人在任何情况下都能平等、方便地获取信息并利用信息。其目的是缩小全社会不同阶层、不同地区、不同年龄、不同健康状况的人群在信息理解、信息交互、信息利用方面的数字鸿沟，使其更加方便地参与社会生活，享受数字发展带来的便利。

Accessibility Kit（无障碍开发服务）提供扩展服务的开放能力，三方可基于此开放能力开发出类似读屏软件的扩展服务，同时也为三方应用提供开放能力，使三方应用可以更好的适配扩展服务，以更好的服务于障碍人群和障碍场景。例如利用读屏软件，用户可以“听见”当前屏幕内容。

能力范围

1、为三方应用提供获取扩展服务列表、扩展服务启用状态、发送无障碍事件等能力。

2、为扩展服务提供扩展服务框架，允许三方开发类似读屏软件的扩展服务。

框架原理

无障碍扩展服务框架提供在三方应用和和扩展服务之间交换信息的标准机制。扩展服务通过AAkit向AAMS发出查询或操作请求，AAMS通过ASACkit向三方应用执行查询或操作请求，并将执行结果返回给扩展服务。

  1. Accessibility App：基于无障碍扩展服务框架开发的扩展服务，如视障用户使用的读屏App。
  2. Tartget App：被Accessibility App辅助的三方应用。
  3. AccessibilityAbilityManagerService（AAMS）：无障碍扩展服务框架主服务，用于对Accessibility App生命周期进行管理，同时为Accessibility App和Target App提供信息交互的桥梁。
  4. AccessibilityAbility（AAkit）：Accessibility App利用AAkit构建扩展服务Ability运行环境，并为Accessibility App提供可查询和操作Target App的接口，如查询节点信息、对节点执行点击/长按操作等。
  5. AccessibilitySystemAbilityClient（ASACkit）：Target App通过ASACkit向AAMS发送无障碍事件，如内容变化事件等，同时响应Accessibility App通过AAMS请求的指令，如查询节点信息、对节点执行点击/长按操作等。

AccessibilityExtensionAbility

Accessibility Kit（无障碍开发服务）通过基于ExtensionAbility框架的AccessibilityExtensionAbility提供无障碍扩展服务，开发者可以基于AccessibilityExtensionAbility模板开发自己的扩展服务，协助用户完成一些快捷的交互过程。

如何创建一个无障碍扩展服务

开发者在创建一个无障碍扩展服务时，如工程满足环境要求，开发者可自主选择是否跳过创建工程步骤，在已有工程中新增无障碍扩展服务。一个工程仅支持创建一个无障碍扩展服务。

本指南以实现以下功能为案例，讲述如何创建无障碍扩展服务，如何调用API接口实现该功能：

启动辅助功能后，在设备屏幕上绘画“右划后再下划”（rightThenDown）的手势，获取当前界面的全部节点；之后再绘画“左划后再下划”（leftThenDown）的手势，打印所有节点。

创建工程

如需新增独立的无障碍扩展服务应用，在DevEco Studio中新建一个API 9以上的Stage工程。

新建无障碍扩展服务ets文件

在已创建工程的ets文件夹下创建AccessibilityExtAbility文件夹，在该文件夹下创建AccessibilityExtAbility.ets文件，可在该文件中实现一些回调函数，并加入业务处理逻辑的调用：

import AccessibilityExtensionAbility, { AccessibilityEvent } from '@ohos.application.AccessibilityExtensionAbility';
import AccessibilityManager from './AccessibilityManager';class AccessibilityExtAbility extends AccessibilityExtensionAbility {onConnect() {console.info(`AccessibilityExtAbility onConnect`);// 执行初始化业务逻辑的操作AccessibilityManager.getInstance().onStart(this.context);}onDisconnect() {console.info(`AccessibilityExtAbility onDisconnect`);// 执行资源回收退出业务逻辑的操作AccessibilityManager.getInstance().onStop();}onAccessibilityEvent(accessibilityEvent: AccessibilityEvent) {console.info(`AccessibilityExtAbility onAccessibilityEvent: ${JSON.stringify(accessibilityEvent)}`);// 根据事件信息进行业务逻辑处理AccessibilityManager.getInstance().onEvent(accessibilityEvent);}
}export default AccessibilityExtAbility;

其中，主要定义了以下接口：

接口描述
onConnect(): void当扩展服务连接时回调。
onDisconnect(): void当扩展服务断开时回调。
onAccessibilityEvent(event: AccessibilityEvent): void当无障碍事件发生时回调。

创建AccessibilityManager.ets文件，用于存放业务逻辑代码：

import {AccessibilityElement,AccessibilityEvent,AccessibilityExtensionContext,ElementAttributeKeys
} from '@ohos.application.AccessibilityExtensionAbility';interface Rect {left: number,top: number,width: number,height: number,
}// 想要查询的属性信息
let wantedAttribute: ElementAttributeKeys[] = ['bundleName', 'text', 'description', 'windowId'];
type attributeValues = string | number | boolean | AccessibilityElement | AccessibilityElement[] | string[] | Rect;export default class AccessibilityManager {private static instance: AccessibilityManager;accessibleContext?: AccessibilityExtensionContext;currentPageElementArray: Array<AccessibilityElement> | null = null;static getInstance(): AccessibilityManager {if (!AccessibilityManager.instance) {AccessibilityManager.instance = new AccessibilityManager();}return AccessibilityManager.instance;}onStart(context: AccessibilityExtensionContext) {console.info(`AccessibilityManager onStart`);this.accessibleContext = context;}onStop() {console.info(`AccessibilityManager onStop`);this.accessibleContext = undefined;}onEvent(accessibilityEvent: AccessibilityEvent): void {console.info(`AccessibilityManager onEvent`);switch (accessibilityEvent.eventType) {case 'rightThenDown':// 获取当前页面的所有节点this.getCurrentPageAllElement();break;case 'leftThenDown':// 打印所有节点this.printAllElementInfo();break;default:break;}}async getCurrentPageAllElement(): Promise<void> {console.info(`AccessibilityManager getCurrentPageAllElement`);let rootElement: AccessibilityElement;if(!this.accessibleContext){console.error(`AccessibilityManager accessibleContext undefined`);return;}try {rootElement = await this.accessibleContext?.getWindowRootElement();this.currentPageElementArray = await this.getAttributeValue(rootElement, 'children') as AccessibilityElement[];} catch (error) {console.error(`AccessibilityExtAbility Failed to getWindowRootElement. Cause:${JSON.stringify(error)}`);}}async getElementWantedInfo(accessibilityElement: AccessibilityElement, wantedAttribute: ElementAttributeKeys[]):Promise<string | null> {console.info(`AccessibilityUtils getElementAllInfo`);if (accessibilityElement === null) {console.error(`AccessibilityUtils accessibilityElement is null`);return null;}let info = '';let value: attributeValues | null;for (let name of wantedAttribute) {value = await this.getAttributeValue(accessibilityElement, name);info = info.concat(name + ': ' + value + ' ');}return info;}async getAttributeValue(accessibilityElement: AccessibilityElement, key: ElementAttributeKeys):Promise<attributeValues | null> {console.info(`AccessibilityUtils getAttributeValue`);let value: attributeValues;let keys = await accessibilityElement.attributeNames();let isExit = false;for (let keyString of keys) {if (key == keyString) {isExit = true;}}if (isExit) {try {value = await accessibilityElement.attributeValue(key);return value;} catch (error) {console.error(`AccessibilityUtils Failed to get attributeValue of ${key} . Cause:  ${JSON.stringify(error)}`);}}return null;}async printAllElementInfo(): Promise<void> {console.info(`AccessibilityManager printAllElementInfo`);if (this.currentPageElementArray === null || this.currentPageElementArray.length === 0) {console.error(`AccessibilityManager currentPageElementArray is null`);return;}let info: string | null = null;for (let index = 0; index < this.currentPageElementArray.length; index++) {info = await this.getElementWantedInfo(this.currentPageElementArray[index], wantedAttribute);console.info(`AccessibilityManager element information: ${info}`);}}
}

如何处理一个无障碍事件

相关无障碍事件可以在onAccessibilityEvent()方法中进行业务逻辑处理，此处以手势事件rightThenDown为例：

onAccessibilityEvent(accessibilityEvent: AccessibilityEvent) {console.info('AccessibilityExtAbility onAccessibilityEvent: ' + JSON.stringify(accessibilityEvent));if (accessibilityEvent.eventType === 'rightThenDown') {console.info('AccessibilityExtAbility onAccessibilityEvent: rightThenDown');// TODO: 自定义相关逻辑开发}
}

在相应的无障碍事件中，可以使用辅助功能扩展上下文（AccessibilityExtensionContext）提供的接口进行扩展开发，包括允许配置辅助应用关注信息类型、查询节点信息、手势注入等。

此外，还可在无障碍扩展服务中对物理按键事件进行处理

如何声明无障碍扩展服务具备的能力

在完成自定义无障碍扩展服务的逻辑开发后，还需要在工程中Module对应的module.json5文件中加入新增扩展服务的配置信息。

srcEntry标签为extensionAbility对应的路径。

label标签为extensionAbility在已安装扩展服务列表中显示的名称。

description标签为extensionAbility在已安装扩展服务详情页的帮助信息。

type标签要按照与无障碍子系统的约定进行配置，需要注意的是该值固定为accessibility，否则将无法正常连接。

"extensionAbilities": [{"name": "AccessibilityExtAbility","srcEntry": "./ets/AccessibilityExtAbility/AccessibilityExtAbility.ets","label": "$string:MainAbility_label","description": "$string:MainAbility_desc","type": "accessibility","metadata": [{"name": "ohos.accessibleability","resource": "$profile:accessibility_config"}]}
]

另外，配置信息中的accessibility_config为无障碍扩展服务的具体配置，需要在resources/base/profile/下新建accessibility_config.json文件，在该文件中声明此无障碍扩展服务具备的能力类型，根据业务功能合理声明能力类型，本案例中，需要如下声明:

{"accessibilityCapabilities": ["retrieve","gesture","touchGuide"]
}

如何开启自定义的无障碍扩展服务

当前提供设备-设置中的扩展服务管理页的开关按钮来开启/关闭选择的无障碍扩展服务：

1、打开设备设置页面，进入“辅助功能”，“扩展服务”小标题下的“已安装的服务”显示当前安装的扩展服务个数，点击进入，展示安装的扩展服务列表；未安装扩展服务时，“已安装的扩展服务”不可点击，并显示“无服务”。

2、选择需要开启/关闭的扩展服务，通过开关按钮进行扩展服务的开启/关闭。

3、开启时，弹出安全提醒，在倒计时结束后，勾选“我已知晓如上风险，并自愿承担可能导致的后果。”后，可选择“开启”/“不开启”按钮； 关闭时，将开启的开关关闭，即可关闭已开启的扩展服务。

最后

小编在之前的鸿蒙系统扫盲中，有很多朋友给我留言，不同的角度的问了一些问题，我明显感觉到一点，那就是许多人参与鸿蒙开发，但是又不知道从哪里下手，因为资料太多，太杂，教授的人也多，无从选择。有很多小伙伴不知道学习哪些鸿蒙开发技术？不知道需要重点掌握哪些鸿蒙应用开发知识点？而且学习时频繁踩坑，最终浪费大量时间。所以有一份实用的鸿蒙（HarmonyOS NEXT）资料用来跟着学习是非常有必要的。 

为了确保高效学习，建议规划清晰的学习路线，涵盖以下关键阶段：

 鸿蒙（HarmonyOS NEXT）最新学习路线

​

该路线图包含基础技能、就业必备技能、多媒体技术、六大电商APP、进阶高级技能、实战就业级设备开发，不仅补充了华为官网未涉及的解决方案

路线图适合人群：

IT开发人员：想要拓展职业边界
零基础小白：鸿蒙爱好者，希望从0到1学习，增加一项技能。
技术提升/进阶跳槽：发展瓶颈期，提升职场竞争力，快速掌握鸿蒙技术

2.视频学习资料+学习PDF文档

这份鸿蒙（HarmonyOS NEXT）资料包含了鸿蒙开发必掌握的核心知识要点，内容包含了（ArkTS、ArkUI开发组件、Stage模型、多端部署、分布式应用开发、音频、视频、WebGL、OpenHarmony多媒体技术、Napi组件、OpenHarmony内核、（南向驱动、嵌入式等）鸿蒙项目实战等等）鸿蒙（HarmonyOS NEXT）技术知识点。

HarmonyOS Next 最新全套视频教程

  纯血版鸿蒙全套学习资料（面试、文档、全套视频等）              

​​

总结

参与鸿蒙开发，你要先认清适合你的方向，如果是想从事鸿蒙应用开发方向的话，可以参考本文的学习路径，简单来说就是：为了确保高效学习，建议规划清晰的学习路线


http://www.ppmy.cn/embedded/99537.html

相关文章

[数据集][目标检测]考场行为作弊检测数据集VOC+YOLO格式4413张4类别

[数据集][目标检测]考场行为作弊检测数据集VOC+YOLO格式4413张4类别

数据集格式&#xff1a;Pascal VOC格式YOLO格式(不包含分割路径的txt文件&#xff0c;仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件) 图片数量(jpg文件个数)&#xff1a;4413 标注数量(xml文件个数)&#xff1a;4413 标注数量(txt文件个数)&#xff1a;4413 标注…
阅读更多...
【数据结构】关于快速排序，归并排序，计数排序，基数排序，你到底了解多少？？？（超详解）

【数据结构】关于快速排序，归并排序，计数排序，基数排序，你到底了解多少？？？（超详解）

前言&#xff1a; &#x1f31f;&#x1f31f;Hello家人们&#xff0c;这期继续讲解排序算法的原理&#xff0c;希望你能帮到屏幕前的你。 &#x1f308;上期博客在这里&#xff1a;http://t.csdnimg.cn/g7PyB &#x1f308;感兴趣的小伙伴看一看小编主页&#xff1a;GGBondlct…
阅读更多...
Spring的笔记补充

Spring的笔记补充

控制反转实现方式 XML方式 语法 <bean id"对象名称" class"全限定类名">创建方式 方式一&#xff1a;直接创建对象 <bean class"com.xszx.service.impl.UserServiceImpl02" id"userService" />方式二&#xff1a;spr…
阅读更多...
electron-vite封装UI级的消息提示

electron-vite封装UI级的消息提示

说明 Electron Vite Vue3 Element Plus Electron中写提示有两种方案&#xff1a; 系统级&#xff1a;electron带的dialog相关APIUI级&#xff1a;UI框架内部的提示&#xff0c;如ElMessage、ElMessageBox、ElNotification等 今天来封装一下UI级别的提示 代码 效果图 源…
阅读更多...
响应式 Web 设计：纯 HTML 和 CSS 的实现技巧

响应式 Web 设计：纯 HTML 和 CSS 的实现技巧

响应式 Web 设计&#xff1a;纯 HTML 和 CSS 的实现技巧 引言 随着移动设备的普及&#xff0c;响应式 Web 设计&#xff08;Responsive Web Design, RWD&#xff09;已成为现代网页开发的标准。响应式设计的目标是使网页在不同设备上&#xff08;如手机、平板和桌面&#xff…
阅读更多...
集合及数据结构第八节（上）————栈（Stack）、栈的模拟实现和应用

集合及数据结构第八节（上）————栈（Stack）、栈的模拟实现和应用

系列文章目录 集合及数据结构第八节&#xff08;上&#xff09;————栈&#xff08;Stack&#xff09;、栈的模拟实现和应用 栈&#xff08;Stack&#xff09;、栈的模拟实现和应用&#xff08;上&#xff09; 栈的概念栈的使用栈的模拟实现栈的应用场景栈、虚拟机栈、栈…
阅读更多...
Windows—TCP编程

Windows—TCP编程

服务端骨架&#xff1a; #include <iostream> #include <WinSock2.h> #pragma comment(lib,"ws2_32.lib") #include <windows.h>int main() {WORD wVersionRequested MAKEWORD(2, 2);WSADATA WSAData;WSAStartup(wVersionRequested, &WSADat…
阅读更多...
ffmpeg6.1集成Plus-OpenGL-Patch滤镜

ffmpeg6.1集成Plus-OpenGL-Patch滤镜

可参考上一篇文章。ffmpeg6.1集成ffmpeg-gl-transition滤镜-CSDN博客 安装思路大致相同&#xff0c; 因为 Plus-OpenGL-Patch也是基于 ffmpeg 4.x 进行开发的&#xff0c;所以在高版本上安装会有很多报错。 这是我安装后的示例&#xff0c;需要安装教程或者改代码可私信我。 …
阅读更多...
最新文章

Copyright @ 2022~2023