-
突破算力限制!Meta开源“记忆层”,重塑Transformer架构大模型
今天凌晨3点,全球社交巨头Meta分享了一个创新研究——Memory layers(记忆层)。目前,Transformer架构的预训练大模型在存储、查询数据时,随着参数的变大对算力的需求呈指数级增长。“记忆层”提出了新的高效查询机制替代了传统的查询方法,通过比较查询键与两个较小集合中的键,可以快速找到最相关的键,而无需遍历模型的整个记忆层。这也就是说,可以在不增加算力的情况下显著增加大模型的参数。…- 1
- 0
-
跟GPT4o、o1拜拜,Gemini2.0取代了我的AI应用们
上线一周,gemini-2.0-flash-exp、gemini-2.0-flash-thinking-exp 已经成为了我日常对话频率最高的模型之一。看着名字很长,其实就是对标 GPT-4o 和 o1。2.0-flash 在 SWE-bench(代码能力评估) 得分超过 Claude-Sonnet-3.5,2.0-flash-thinking 在 LMArena 所有类别拿到冠军,且速度比 o1…- 2
- 0
-
微软研究人员发布 AIOpsLab:面向 AIOps 代理的开源综合人工智能框架
.01概述随着云计算技术的不断演进和复杂化,企业对云基础设施的依赖越来越深。如今,几乎所有大型企业都依靠云平台确保业务顺利运营。然而,随着微服务架构和无服务器计算的兴起,云计算环境的复杂度也随之加剧,给云计算的可靠性和运维带来了前所未有的挑战。站点可靠性工程师(SREs)和DevOps团队肩负着保障云平台的稳定性、故障检测、诊断及修复等重要任务。然而,随着服务模型的复杂化,传统的运维方式显得捉襟见…- 1
- 0
-
显卡可能没那么重要了?中国公司给硅谷好好上了一课。
我是万万没想到,就在西方还沉浸在圣诞假期,疯狂 “ 过年 ” 的时候,咱们中国企业给人家放了个新年二踢脚,给人家脑瓜子崩得嗡嗡得。前有宇树科技的机器狗视频让大家惊呼,还要啥波士顿动力。紧接着又来了个国产大模型 DeepSeek,甚至有股做空英伟达的味道。具体咋回事儿,咱给你唠明白咯。前几天, DeepSeek 刚刚公布最新版本…- 2
- 0
-
Docling:开源免费,多格式文档解析神器,13.4k stars 见证卓越实力!
在当今数字化信息爆炸的时代,文档作为知识和数据的重要载体,其处理与应用的效率对于个人、企业乃至整个社会的发展都至关重要。然而,不同格式的文档以及复杂的文档结构给信息的提取和利用带来了诸多挑战。Docling项目的出现,为解决这些问题提供了一种创新且高效的解决方案,它宛如一座桥梁,将各种文档格式与先进的人工智能技术紧密连接起来,开启了文档处理与应用的新篇章.一、Docling概述Docling是一个…- 2
- 0
-
我与vLLM的2024
楔子我与 vLLM 的缘分,还得从五年前的那个暑假说起。2019 年,我在UC Berkeley的RISELab跟随Michael Jordan教授进行暑期研修。某天,我偶然遇到一位新入学的博士生,厚着脸皮加了他的微信。当时的我怎么也不会想到,这一“社交冒险”会在五年后改变我的人生轨迹。ChatGPT之变时间快进到 2022 年年底,ChatGPT 横空出世。曾经和我一起玩泥巴的青苹果同学已经成为…- 1
- 0
-
我把最近爆火的 DeepSeek-V3 接到了 Cursor!
近期被国产大模型 DeepSeek-V3 刷屏了,根据其发布的数据,DeepSeek-V3 在所有的开源大模型中位列榜首,与当今最先进的闭源模型 Claude-3.5-Sonnet、GPT-4o 相比也不分伯仲。详情参见 国产大模型 DeepSeek-V3 正式发布:代码场景逼近Claude-3.5-Sonnet和GPT-4o更重要的是价格便宜啊,每百万输入 Token 优惠期内才 0.…- 1
- 0
-
比扣子简单! Cline+MCP 快速打造Agent工作流: 实战案例解析
随着人工智能技术的不断进步,构建个性化智能体的需求日益增加。国内虽然已有一些智能体平台,如豆包扣子,但这些平台要求开发者将代码和数据上传到第三方服务器,对于一些商业信息敏感的客户来说,这种做法可能带来数据泄露的风险。而在国际市场上,Anthropic 开源的 MCP 协议 和 Cline 插件,则为开发者提供了一种更加简单、安全、可控的方式来创建智能体。本文…- 1
- 0
-
突发!刚刚,OpenAI裂变成了两块:一块营利,一块非营利
鱼上了岸,就不再是鱼?本周五晚间,OpenAI 突然宣布了公司重组的消息,不仅让马斯克,也让我们有些措手不及。根据 OpenAI 的最新声明,新一轮组织结构调整是围绕营利与非营利的矛盾展开的。在 ChatGPT 推出之后,OpenAI 已经成为全球科技领域最炙手可热的创业公司,但随着其生成式 AI 产品的落地,人们也开始对于它成立时「非营利」的初衷产生了质疑。伊隆・马斯克甚至与 OpenAI 反目…- 1
- 0
-
DeepSeek-V3最新开源,第一手评测解读速递
最近一年,大模型开源领域更加蓬勃发展,无论是模型参数规模的飞跃,还是在代码生成、数学推理、语言理解等多方面的能力提升,大模型已经成为推动 AI 应用和研究的重要基石。从 Transformer 的提出到 MoE(Mixture of Experts)技术的广泛应用,这些创新不断刷新人类对 AI 潜力的认知。12月26日,DeepSeek 上线并开源了全新系列模型 DeepSeek-V3 的首个版本…- 1
- 0
-
阿里巴巴推出可与 OpenAI o1 相媲美的人工智能,而且是开源的!
阿里巴巴通过QwQ-32B-Preview实现了能够超越现有模型极限的开源人工智能(AI)。这种独特的模型有望通过挑战当前标准来彻底改变数学推理和编程领域。人工智能不断给人带来惊喜,但在面对复杂的挑战时仍然举步维艰。数学问题、逻辑推理或编码任务,都会感受到局限性。然而,中国科技巨头阿里巴巴凭借其人工智能QwQ-32B-Preview受到关注,该产品希望克服这些弱点。锦上添花的是:这个模型是开源的。…- 1
- 0
-
2024 年最喜欢的产品、模型和技术博客:Cursor、Claude3.5-Sonnet 和 Jina
CheckMachine Learning and Data Science are awesome!更多机器学习/深度学习/LLM 和数据科学等技术博客文章欢迎访问 mloasisblog.com。Summary2024年涌现了许多令人印象深刻的产品、模型和技术博客。本文将重点介绍我最喜欢的三个:Cursor,一款革新代码编辑体验的IDE;Claude 3.5-Sonnet,拥有强大编码能力的杰…- 2
- 0
-
DeepSeek-V3 正式发布
今天,我们全新系列模型 DeepSeek-V3 首个版本上线并同步开源。登录官网 chat.deepseek.com 即可与最新版 V3 模型对话。API 服务已同步更新,接口配置无需改动。当前版本的 DeepSeek-V3 暂不支持多模态输入输出。性能对齐海外领军闭源模型DeepSeek-V3 为自研 MoE 模型,671B 参数,激活 37B,在 14.8T token 上进行了预训练。论文链…- 1
- 0
-
2024年大模型后训练(post-training)总结
前言今年工业界陆续开源了多款优秀的大语言模型,并放出了技术报告,本文整理工业界主流开源LLM的后训练方案,着重介绍训练算法和数据处理部分。以下是模型列表:Llama3(Meta,https://arxiv.org/abs/2407.21783#,https://github.com/meta-llama/llama3)Qwen2(阿里云,https://arxiv.org/pdf/2407.106…- 2
- 0
-
突破与超越:CosyVoice 2.0—— 阿里巴巴通义实验室的语音进阶新作
在当今快速发展的科技领域,语音合成技术正逐渐成为连接人与机器的关键桥梁。随着多模态大语言模型的不断进步,语音合成系统的响应速度和实时性变得尤为重要。阿里巴巴集团的通义实验室语音团队推出的CosyVoice 2.0,在继承前代产品优势的基础上,进行了深度优化,旨在解决现有问题并提供更加出色的性能。一、项目概述CosyVoice 2.0作为阿里巴巴通义实验室精心打造的开源语音生成大模型的进阶之作,是一…- 2
- 0
-
重磅开源:这个15k+ Star的项目让调用大模型像喝水一样简单!
你在调用大语言模型的时候是不是和我一样遇到过这样的问题:项目中要对接多个AI供应商,代码里充斥着各种适配逻辑不同平台的API调用方式各异,每换一个都要重新学习想要监控AI调用成本,但统计起来特别麻烦今天给大家介绍一个超赞的开源项目 - LiteLLM,它完美解决了以上所有问题,让调用各家大模型变得像喝水一样自然!为什么它这么受欢迎?—目前这个项目已经收获了15.3k+ Star,为什么这么多开发者…- 1
- 0
-
Ollama 0.5.1重磅更新:支持结构化输出,让 AI 回复更精准
最新消息!开源 AI 工具 Ollama 新增了结构化输出支持。这意味着我们可以使用预定义的格式来约束 AI 的输出,让回复更加精确和可控。让我们通过一些实际的代码示例来看看这个强大的新功能。直接从数据中提取结构化的内容并分析—使用 Ollama 进行数据提取非常简单。下面是一个提取宠物信息的示例:这里使用国产最强开源模型qwen2.5Qwen2.5是阿里巴巴通义千问团队于2024年9月发布的最新…- 1
- 0
-
自然语言处理准确率提升70%技巧–微软AI团队的NLTK
微软AI团队的NLTK:自然语言处理准确率提升70%技巧搞了这么多年的自然语言处理,真没想到微软AI团队开源的这套NLTK新玩法这么秀。用对了这些技巧,准确率蹭蹭往上涨。不光是提升准确率那么简单,还能让模型训练速度飞快,这波属实让我开了眼界。数据预处理的新思路老一套的文本清洗已经不够看了。微软团队玩出了新花样 - 递归式分词 。这玩意看着复杂,用起来贼简单: &nb…- 1
- 0
-
AI趋势:福布斯刊文预测2025
福布斯刊文预测2025年AI领域将发生哪些变化:1,Meta将开始对其LLama模型的使用收费2,将在文本以外的领域探索Scaling law——特别是在机器人技术和生物学领域3,特朗普和马斯克将会有一场混乱的决裂。这将对AI世界产生重大影响4,Web Agents将进入主流,成为消费AI中的下一个重大杀手级应用5,将AI数据中心送入太空的多项严肃尝试将成形6,AI系统将在语音领域通过图灵测试7,…- 1
- 0
-
大模型的泡沫什么时候破灭?
✎导 读 对于技术泡沫,大家可能最熟悉的就是Gartner的技术成熟度曲线图。过去几年确实出现了许多备受关注的技术,例如云计算、大数据、区块链和元宇宙。新技术让人激动,但很多企业在跟进这些技术时往往犹豫不决,担心不下注未来会被淘汰,也担心投入巨大但方向错误。例如,前几年Facebook押注元宇宙,将公司名称改为Meta,但元宇宙的技术成熟度和市场发展并未达到预期。幸好,Meta公司在大模…- 1
- 0
-
SiliconCloud x Obsidian:高效构建最懂你的AI知识库助理
Obsidian Copilot 是一款开源的 AI 助手插件,设计简洁,使用方便。用户可通过自带的 API 密钥或本地模型与多种模型交互。它支持自定义提示,快速与整个笔记库对话,获取答案和见解。旨在成为注重隐私的终极 AI 助手,深入理解你的个人知识库。 作为大模型一站式云服务平台,硅基流动SiliconCloud(https://cloud.siliconflow.cn/)致力于为…- 1
- 0
-
LLAMA3 论文精读
前言最近对之前精读的论文进行梳理,发现一些笔记还是非常有价值的,稍微改改发布出来给大家看看。LLama3是几个月前的论文了,但是每次精读还是有所收获,本文将一些重点的内容加一些自己的思考和实践进去,对每个技术点进行讨论。总体概述如上图所示,Llama3 纯文本模态的整个训练过程分为以下几个主要阶段:Pre-Training:主要包括:预训练,长文本预训练,退火预训练三个阶段。Post-Traini…- 1
- 0
-
阿里开源agent 开发平台AgentScope
项目简介AgentScope是一个创新的多智能体开发平台,旨在赋予开发人员使用大模型轻松构建多智能体应用的能力。? 高易用:AgentScope专为开发人员设计,提供了丰富的组件, 全面的文档和广泛的兼容性。同时,AgentScope Workstation提供了在线拖拉拽编程和在线小助手(copilot)功能,帮助开发者迅速上手!✅ 高鲁棒:支持自定义的容错控制和重试机制,以…- 1
- 0
-
花60元,DIY了一个AI机器人,能聊天,会认人……
前言用ESP32-S3,做了一个大模型AI桌面机器人——ESP-SparkBot!它可以做些什么?怎么设计(第2-3章)?DIY成本是多少(第1章)?开源了吗(第4章)?01功能&亮点”1天气时钟,通过IP地址显⽰当地⽇期、天⽓、温度2大模型AI对话,通过接入文心一言、OpenAI 等大语言模型,实现对话聊天功能3蓝牙音箱:支持语音控制小度,支持APP中进行音量调节、切换播报音色、还能绑定…- 2
- 0
❯
购物车
优惠劵
搜索
扫码打开当前页

联系我们
返回顶部
幸运之星正在降临...
点击领取今天的签到奖励!
恭喜!您今天获得了{{mission.data.mission.credit}}积分
我的优惠劵
-
¥优惠劵使用时效:无法使用使用时效:
之前
使用时效:永久有效优惠劵ID:×
没有优惠劵可用!






















