解锁 AI,openKylin 智能交互新体验


近年来,人工智能技术取得显著进展,不断涌现出更成熟、更强大的AI产品,并且这些产品正逐渐应用到各行各业的创新发展中来。尤其在桌面操作系统领域,AI技术的深度融合将有机会重新定义人机交互方式。因此,openKylin社区积极拥抱创新,从智能输入、智能输出两方面入手,尝试探索桌面操作系统未来智能交互的发展方向。

PART 1语音助手

openKylin语音助手是一款支持语音指令的智能语音软件,用户可通过语音下达指令,无须键盘输入,即可触发应用功能。

openKylin语音助手服务端采用开源模型库paddlespeech作为语音识别服务,将客户端上传的流式语音进行识别并且返回给客户端;客户端采用Qt的Multimedia模块进行语音识别,然后进行格式封装上传到服务端,根据识别结果处理对应操作。

目前,在openKylin 1.0版本上已实现的主要功能有:

  • 识别用户的语音输入;
  • 支持快速打开应用。

 

后续我们会进一步开发,让语音助手能够拥有上下文,并计划扩展更多使用场景,包括:

  • 语音搜索:通过语音输入方式快速帮助用户使用全局搜索;
  • 天气查询:通过语音输入方式快速帮助用户查看天气状况;
  • 语音翻译:通过语音识别和机器翻译技术,将一种语言翻译成另外一种语言;
  • 系统设置:通过语音识别对系统亮度、音量等基础设置进行调整。

项目地址:

https://gitee.com/openkylin/kylin-asrassistant

AIFramework SIG地址:

https://gitee.com/openkylin/community/tree/master/sig/AIFramework

 

PART 2桌面AI大模型插件

openKylin开始尝试对AI大模型产品的生态兼容和系统级融合,探索操作系统的AI智能化发展新路径。目前,已在openKylin软件商店上架推出桌面AI大模型插件,安装后将会在开始菜单里增加AI助手模块,支持使用用户自己申请的AI大模型API Key和Secret Key,调用AI大模型接口,实现在openKylin系统上体验基于大语言模型的聊天机器人功能!

使用说明

1.打开软件商店下载安装桌面AI大模型插件后,重启系统

 

2.打开开始菜单,进入AI助手模块,如下图所示

 

备注:前往(
https://cloud.baidu.com/survey/qianfan.html)申请测试Key。

3.输入API Key和Secret Key登录后,即可开始在openKylin系统上体验基于大语言模型的聊天机器人功能!

 

项目地址:

https://gitee.com/openkylin/ukui-menu

UKUI SIG地址:

https://gitee.com/openkylin/community/tree/master/sig/UKUI

 

通过不断完善智能输入和智能输出,将使得openKylin操作系统更加智能化,能够更好地适应用户的需求和使用习惯,大幅提升用户体验。后续,随着这些技术的不断发展,也将为未来桌面操作系统的创新和发展提供更多的可能性和机会。欢迎志同道合的伙伴加入我们,携手共建!


相關推薦

2023-12-01

了让AI开发者能够更快的投入到算法设计和AI开发当中,openKylin社区AI4OS SIG组开发了AI框架安装助手,助力AI开发者实现一键安装AI框架。 AI框架安装助手采用前后端分离架构:前端负责检测系统硬件,自动推荐安装方式,提供安

2023-08-02

期待已久的UKUI 4.0伴随openKylin 1.0版本的发布终于和大家见面啦,今天我们就来聊聊UKUI 4.0的那些新特性。   相较于之前版本,UKUI 4.0版本从设计和功能上都做出了较大的改动。设计上,UKUI 4.0提出了“轻量化之路——视

2023-12-05

业人员和学生参会。 在大会系统软件教育分论坛上,openKylin社区秘书长、技术委员会委员余杰受邀分享《人工智能时代操作系统的机遇与挑战》主题演讲,从产业和学术两个维度来介绍操作系统助力人工智能快速发展(OS for A

2022-10-01

为推动社区繁荣发展,打造开源操作系统创新生态,openKylin社区在积极持续开展各种技术研究和创新。其中,9月份社区新增SIG小组9个,覆盖智能应用、基础硬件、云端融合、人机交互、互联协同等领域,目前共计有47个SIG组在

2022-11-05

、互联协同、人机交互、智能支撑的新一代操作系统。而openKylin也一直在致力于打造一款具备万物互联能力的操作系统,在经过数个月的努力研发,集合49个SIG组的力量之后,openKylin首款真正意义上具备万物互联能力的操作系统-

2022-12-19

2022年12月16日,由openKylin社区联合湖南师范大学美术学院举办的UKUI设计研讨会以线上形式顺利举行。湖南师范大学美术学院院长李少波教授、黄龙副教授、张泠泠副教授,麒麟软件终端研发部副总经理彭欢,openKylin社区技术委员

2023-04-07

为推动社区繁荣发展,打造开源操作系统创新生态, openKylin社区根据领域划分了不同的SIG组,并积极开展各种技术研究和创新。其中,3月份社区有效PR数新增1077个,仓库Fork数新增639个,SIG小组新增1个,SIG公开例会累计召开10次

2023-02-04

州捷途慧声科技有限公司(以下简称“捷途慧声”)签署openKylin社区CLA(Contributor License Agreement 贡献者许可协议),正式加入openKylin开源社区。 捷途慧声是国内领先的AI服务解决方案提供商,具有多年的人工智能行业从业经验

2023-10-21

,西安雷风电子科技有限公司(简称“雷风科技”)签署openKylin社区CLA(Contributor License Agreement贡献者许可协议),正式加入openKylin开源社区。   雷风科技运营于2015年,是业界领先的智能云计算解决方案提供商,致力于

2022-10-23

当 当 当 当~ openKylin成长体系正式上线啦!!!   不仅有各种花式玩法让你轻松获取积分, 解锁不同社区等级和权益~ 同时,还有超多社区精美礼品等你来兑换~ 话不多说 快和小K一起“研究”下这份openKylin成长攻略吧!

2022-11-17

为推动社区繁荣发展,打造开源操作系统创新生态,openKylin社区根据领域划分了不同的SIG组,并积极开展各种技术研究和创新。其中,10月份社区新增SIG小组5个,共有52个SIG组在运行,接下来,让我们一起盘点10月份openKylin社区SI

2023-09-22

正式官宣已实现大模型能力接入,多款自研应用软件实现智能化升级。 统信软件高级副总经理、CTO张磊表示:“目前UOS AI实现了国内外主流大模型的能力接入,并封装成deepin的AI底层公共能力;同时,我们也将把UOS AI逐步开源

2023-09-08

31 日,百度、字节、商汤、中科院旗下紫东太初、百川智能、智谱华章等 8 家企业 / 机构的大模型产品已经首批通过《生成式人工智能服务管理暂行办法》备案,可正式上线面向公众提供服务。 具体包括: 五家北京企业机

2023-02-11

,格兰菲智能科技有限公司(以下简称“格兰菲”)签署openKylin社区CLA(Contributor License Agreement 贡献者许可协议),正式加入openKylin开源社区。 在加入openKylin社区后,格兰菲正式加入社区GPU SIG,主要负责openKylin在显卡驱动