V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
hahaba
V2EX  ›  分享创造

使用语音助手控制电脑之完全控制 - 顺便求解决方法!

  •  
  •   hahaba · 2020-12-12 11:50:07 +08:00 · 1830 次点击
    这是一个创建于 1440 天前的主题,其中的信息可能已经有所发展或是发生改变。

    之前写过一个帖子:我撸了一个用语音助手控制电脑、树莓派的工具 https://v2ex.com/t/733180#reply40

    很多人收藏,但是反馈说不够灵活。于是我加入了类似按键精灵的功能。

    通过录制回放来实现高度自定义,可以见 B 站演示视频: https://www.bilibili.com/video/BV1Uz4y1k7KB/

    当然也有缺点,录制是根据坐标定位的,如果你的桌面图标变动、分辨率变动都会导致失败。

    使用 opencv 的方法吧,普通用户免不了要写代码才能实现,很苦恼,目前也实在想不到更好的方法

    7 条回复    2020-12-17 19:12:10 +08:00
    loading
        1
    loading  
       2020-12-12 11:55:59 +08:00 via Android
    人工智能啊,就是你人工想好会有的场景,写代码,不然你以为人工智能前面为啥要有人工二字!
    hahaba
        2
    hahaba  
    OP
       2020-12-12 12:32:55 +08:00
    @loading 用户的操作千奇百怪,毫无规律,没有逻辑。只能交给用户自行处理
    codehz
        3
    codehz  
       2020-12-12 13:28:47 +08:00 via Android
    (所以为啥不用辅助功能 api,至少国外的软件和网页应该会有适配
    hafuhafu
        4
    hafuhafu  
       2020-12-12 14:01:05 +08:00
    当然是全上咯,复杂操作给接口 /允许调用脚本让用户自己高度自定义;机械流水线操作用录制;给小白用户提供一些简单的接口比如 :“执行 XX 目录中名字为 XXX.xxx 的文件”、“等待 X s”之类的拖拉拽点的东西,然后预设一些方案。就是工程量大了些
    其实只要能让用户方便“抄作业”,写代码之类的都不是事,反正会有会写的去写。
    hahaba
        5
    hahaba  
    OP
       2020-12-12 14:32:15 +08:00
    @hafuhafu 这工作量就太庞大了,我还要上班,哈哈
    gtheone1
        6
    gtheone1  
       2020-12-15 18:57:29 +08:00
    个人意见
    没必要自身集成录制的功能。要录制可以用按键精灵,然后再用神秘鸭调用按键精灵即可。
    (神秘鸭只要做一个中间人去调用外部软件就行,具体想做什么事由那个工具来完成)。
    hahaba
        7
    hahaba  
    OP
       2020-12-17 19:12:10 +08:00
    @gtheone1 已经集成了,自己写的还是方便点
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1128 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 23:01 · PVG 07:01 · LAX 15:01 · JFK 18:01
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.