英伟达开源3400亿参数模型Nemotron-4 340B
飘渺九月
发表于 2024-6-15 16:13:53
131
0
0
Nemotron-4 340B包括基础模型Base、指令模型Instruct和奖励模型Reward。英伟达使用了9万亿个token(文本单位)进行训练。Nemotron-4 340B-Base在常识推理任务,如ARC-c、MMLU和BBH基准测试中,可以和Llama-3 70B、Mixtral 8x22B和Qwen-2 72B模型媲美。
CandyLake.com 系信息发布平台,仅提供信息存储空间服务。
声明:该文观点仅代表作者本人,本文不代表CandyLake.com立场,且不构成建议,请谨慎对待。
声明:该文观点仅代表作者本人,本文不代表CandyLake.com立场,且不构成建议,请谨慎对待。
猜你喜欢
- 欧洲央行温施:要支持今年降息两次以上 需确信通胀率正朝目标回落
- 股价5年暴涨35倍,英伟达老员工“人均”百万富翁 部分开始“半退休” 新员工内心不平衡
- 黄仁勋最新访谈:如果未来30天不全力以赴 英伟达确实可能破产
- 英伟达H200订单Q3开始交付 预计B100明年上半年出货
- 英伟达H200订单Q3开始交付,预计B100明年上半年出货
- 英伟达或将面临法国反垄断指控
- 机构:AMD与英伟达需求推动FOPLP发展 预估量产时间落在2027-2028年
- 英伟达反垄断麻烦不断!法国或将指控其滥用AI领域主导地位
- 英伟达量产交货潮将至!多款GPU+服务器在列 供应链已开启筹备
- 英伟达又赚了!斥资超180亿元 马斯克用了10万块H100芯片训练最新大模型
-
两名知情人士上周日(6月30日)表示,美国司法部将对波音公司提起刑事诉讼,并就两起致命坠机事件以欺诈罪立案,要求波音认罪或接受审判。 消息人士称,美国司法部计划在当天晚些时候正式向波音公司提出认 ...
- yixin66
- 前天 09:53
- 支持
- 反对
- 回复
- 收藏
-
7月1日,特斯拉宣布推出全新购车金融政策。其中,针对Model 3/Y后轮驱动版推出的1~5年0息和低息优惠购车政策,日供低至85元起;针对Model 3/Y长续航全轮驱动版推出的1~5年0息和低息购车优惠政策,日供低至107元 ...
- 覃志辉
- 前天 10:42
- 支持
- 反对
- 回复
- 收藏
-
7月1日,特斯拉在中国官网更新了Model 3和Model Y车型的购车优惠政策。7月31日前购买标准续航或长续航四轮驱动版的Model 3/Y车型的顾客,将可享受五年0利息分期付款方案。 值得注意的是,这不是特斯拉今年 ...
- shev711
- 前天 15:04
- 支持
- 反对
- 回复
- 收藏
-
马斯克当地时间7月2日在社交平台X上表示,一旦特斯拉完全解决了自动驾驶问题,并实现擎天柱机器人(Optimus)的量产,任何仍持有空头头寸的人都会“被消灭”,即便是比尔·盖茨也不例外。 ...
- cheray
- 12 小时前
- 支持
- 反对
- 回复
- 收藏