V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
bottleGuo
V2EX  ›  机器学习

本人刚跨进 Python 语言及机器学习不久,请教 V 站大佬几个问题

  •  
  •   bottleGuo · 2023-06-12 17:24:29 +08:00 · 1253 次点击
    这是一个创建于 527 天前的主题,其中的信息可能已经有所发展或是发生改变。

    业务开发背景:

    ​ 目前想做一个平台,类似与机器学习模型训练平台,可以供科学家及开发人员使用。

    功能描述:

    1. ​ 平台基于 jupyter 进行自定义算法开发
    2. ​ 开发好后的算法可以在此平台进行训练
    3. ​ 未训练好算法,微调参数继续训练;训练好后的算法进行发布,使用 Restful Api 形式进行调用

    技术壁垒:

    ​ 算法与预测数据进行对比准确无误,需要将模型进行发布,目前查阅有关资料,在对训练好的模型进行发布时,可以使用不同算法框架训练出后算法框架自带的 serving 进行开发(例如 pytorch serving 和 tensorflow serving ),且可以使用 Restful API 形式进行访问,但是有个问题,本人不清楚算法都是如何写的(都是在 github 或者查阅有关大佬开发好后的算法进行功能测试),我要是使用 pytorch serving 和 tensorflow serving 这些进行开发时,需要对每个模型编写 handle.py 文件进行重写 preprocess 、inference 和 postprocess 三个方法来完成 API 的功能

    问题:

    ​ 不同自定义的算法训练好后的模型,传入参数也不同,是不是上述 preprocess 、inference 和 postprocess 这三个方法也会不一样,而且还需要对自定义开发的算法有深刻的理解(因为牵扯到数据的处理,图片的尺寸等等)?

    2 条回复    2023-07-18 11:18:44 +08:00
    bottleGuo
        1
    bottleGuo  
    OP
       2023-06-12 17:28:32 +08:00
    shm7
        2
    shm7  
       2023-07-18 11:18:44 +08:00
    想法很不错,很多公司内部应该都做过,公开的也有很多。问题是,个人开发者的话,根本没那么多资源去训练,甚至部署资源你也没有...
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3177 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 13:31 · PVG 21:31 · LAX 05:31 · JFK 08:31
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.