明敏发自凹非寺量子位|公众号QbitAI
0代码微调一个大模型,成本不到20美元?
过程也非常简单,只需5步。
如LLaMA、GPT、StableLM等爆火的开源生成式模型,都能搞定。
这就是MonsterAPI,一个最新火起来的API平台。
有人觉得这个开源领域的新工作,能改写AI开发的游戏规则,加速AI应用的速度。
还有人兴奋提问,之后会接入GPT-3/GPT-4吗?
所以,它具体是怎么实现的?
五步零代码搞定
简单理解,MonsterAPI就是将微调步骤尽可能简易化,让开发者不用再手动进行一系列设置,同时也提供便宜的GPU资源及内存优化。
具体过程如下:
第一步,选择一个模型进行微调。
比如LLaMA-7B、GPT-J-6B、StableLM-7B等,MonsterAPI提供了至少10个基础大模型。
第二步,选择或创建微调任务。比如指令微调、文本分类等,或者自定义任务。
第三步,选择一个HuggingFace数据集。
MonsterAPI可以无缝集成HuggingFace数据集,可选择范围很大;还可以根据任务类型推荐数据集。
并且不用自己手动操作,就能自动设置好格式。
第四步,设置超参数。
第五步,检查和提交。
在设置好如上所有步骤后,确定没有错误就可以提交了。
MonsterAPI表示可以通过WandB上的日志来监测任务。
在其博客中写道,用DataBricksDolly15k微调LLaMA-7B完成3个epouch,成本仅需不到20美元。
官网显示,注册用户后会赠送2500积分。会员分为三档,收费分别是每月9美元/29美元/39美元。
除了微调以外,MonsterAPI还提供各种生成式AI的API接口,并表示成本比其他方案低80%。
背后公司已获110万美元融资
消息显示,MonsterAPI背后公司拿下了110万美元的种子前资金。
这家AI初创公司给自己的定位是要做“GPU领域的爱彼迎”,把全世界分散的GPU资源实现灵活调度,让开发者们能够以更低的价格使用。
创始人是两兄弟GauravVij和SaurabhVij。
其中GauravVij还创立了一家CV公司,正是因为CV公司需要面临巨大的云计算资本,才启发了他们要做这样一个平台。
SaurabhVij之前是欧洲核研究中心的粒子物理学家,同时也研究分布式计算。
兄弟俩表示在经过多轮技术迭代后,他们优化了消费级GPU在机器学习任务上的性能,使得运行WhisperAI模型的成本相较于AWS平台降低了90%,所以他们就想着为什么不利用这个方法来帮助数以万计的开发者们。
同时他们透露公司的一个客户使用他们的分散的GPU计算资源,已经节省了30万美元。
参考链接:https://blog.monsterapi.ai/no-code-fine-tuning-llm/https://www.enterpriseai.news/2023/06/09/monster-api-launches-the-airbnb-of-gpus-with-1-1m-pre-seed/
标签:APITERSTENSTNetwork Capital Tokentera币官网Monster GalaxyNSTE价格
FinGraph是一份图形化的财经专栏,为专注于全球市场和经济形势的专业人士提供简短、准确、全面的每日概览。文章内容不构成投资建议.
作者赵建,西京研究院创始院长。本文根据以前发表的四篇文章整理,发表于《香港国际金融评论》2023年第12期.
7月9日,岭南师范学院商学院“商之翼”社会实践队的重点课程“数字人民币”于吴川市长岐中学开讲。简单、易懂、愉快,这是支教组组长吴文琴主讲的“数字人民币”课程的特点.
一、板块回顾:冬去春来,修复在途行情与估值回顾:AI催化,传媒板块领跑大盘回顾上半年,A股传媒板块上半年走势受AI相关概念催化明显.
少年侠气,交结五都雄。肝胆洞。毛发耸。立谈中。死生同。一诺千金重。推翘勇。矜豪纵。轻盖拥。联飞鞚。斗城东。轰饮酒垆,春色浮寒瓮。吸海垂虹。闲呼鹰嗾犬,白羽摘雕弓。狡穴俄空。乐匆匆.
区块链是比特币的底层技术,是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式.