NinjaTech AI、AWS合作推出搭载亚马逊芯片的AI代理
NinjaTech AI,一家由SRI支持的生成式AI公司,由定制Ninja LLMs支持,创建了一个多代理个人AI,可以异步规划和执行现实世界的任务,例如研究多步复杂主题和代表用户安排会议。{ width=60% }
AWS的Trainium和Inferentia2机器学习芯片使NinjaTech AI能够快速、按需和可持续地训练和提供AI代理,为每个人提供生成式AI的力量,帮助每个人更加高效。
NinjaTech AI是一家总部位于硅谷的生成式AI公司,旨在通过处理耗时任务使每个人更高效,今天宣布推出其新的个人AI产品Ninja,这是AI助手和联合驾驶员的进化,发展到自治代理。NinjaTech AI利用亚马逊云服务(AWS)专门设计的机器学习(ML)芯片Trainium和Inferentia2,以及Amazon SageMaker,一个基于云的机器学习服务,构建、训练和扩展能够自主处理复杂任务的定制AI代理,例如进行研究和安排会议。这些AI代理通过将生成式AI的力量融入日常工作流程,为每个用户节省时间和金钱。使用AWS的云能力,Ninja可以同时进行多个任务,这意味着用户可以在无需等待现有任务完成的情况下指定新任务。
“与AWS的Annapurna Labs合作对NinjaTech AI来说是一个真正的改变者。Trainium和Inferentia2芯片对我们强化学习AI代理的能力和灵活性远远超出了我们的预期:它们易于集成,可以通过Amazon SageMaker弹性扩展到数千个节点。” NinjaTech AI的创始人兼首席执行官Babak Pahlavan表示,“这些新一代AWS设计的芯片可以本地支持最新热门开源模型如Llama 3 的较大70B变体,同时可以为我们节省高达80%的总成本,并且相比类似GPU,能够提供60%更高的能源效率。除了技术本身,AWS团队提供的协同技术支持在我们构建深度技术方面有着巨大的影响。”
AI代理使用高度定制的大型语言模型(LLMs),通过使用多种技术(如强化学习)进行修改,以提供准确性和速度。成功开发AI代理需要针对强化学习进行调整的经济实惠且具弹性的芯片,这对于今天GPU的稀缺性、其不可伸缩性以及计算成本如此宝贵的初创公司来说是一个棘手而昂贵的挑战。AWS通过其独特的芯片技术,解决了AI代理生态系统所面临的这一挑战,使得能够迅速进行训练,并可以根据每个训练周期的需要扩展到数千个节点。结合Amazon SageMaker,利用开源模型进行训练现在是快速、灵活且经济实惠的。
“AI代理正迅速成为下一代生产力工具,将彻底改变我们的工作方式、协作方式和学习方式。NinjaTech AI已经实现了快速、准确且经济有效的代理,用户可以利用AWS Trainium和Inferentia2 AI芯片快速扩展。” AWS Annapurna Labs高级总监Gadi Hutt表示,“我们很高兴能帮助NinjaTech AI团队将自治代理带到市场上,同时也促进AWS致力于赋能开源机器学习和流行框架如PyTorch和Jax。”
NinjaTech AI已经使用AWS Trainium(Amazon EC2 Trn1实例)对其模型进行了训练,并使用AWS Inferentia2(Amazon EC2 Inf2实例)进行部署。Trainium为在AWS上进行训练提供了高性能计算集群,可更快、更低成本且消耗更少能源地训练LLMs。Inferentia2芯片使模型能够更快地生成推断结果,而且成本更低,性能最高可提高40%。
“与AWS的合作对于加速我们开发真正新颖的生成式AI规划器和行动引擎的能力至关重要,这对于构建最先进的AI代理至关重要。由于我们需要最具弹性和性能最高、同时具有令人难以置信的准确性和速度的芯片,我们决定在Trainium和Inferentia2芯片上对Ninja进行训练和部署是完全合理的。” Pahlavan补充道,“每一家生成式AI公司在考虑到要访问具有令人难以置信的灵活性和速度的按需AI芯片时,都应该考虑AWS。”
用户可以访问myninja.ai访问Ninja。从今天开始,Ninja提供四款会话式AI代理,能够进行多步骤实时网络研究、通过电子邮件与内部和外部方面安排会议、帮助编码任务以及起草电子邮件并提供建议。此外,Ninja还提供了轻松访问来自OpenAI、Anthropic和Google等公司的一流模型的并行结果比较。最后,Ninja提供了一种最先进的异步基础架构,使用户能够同时处理几乎无限数量的任务。随着客户使用,Ninja将变得更好,使他们在日常生活中更加高效。
探索AITechPark,了解人工智能、物联网、网络安全、AITech News的最新进展,并获得来自行业专家的见解!
感谢阅读!如果您对AI的更多资讯感兴趣,可以查看更多AI文章:GPTNB。
NinjaTech AI、AWS合作推出搭载亚马逊芯片的AI代理