8394
只记录 AI 业界大新闻和最有趣的新产品。Curated by @orange_ai 如需讨论可加入关联群组
ElevenLabs 新出声音库。
一键生成随机的真人感声音，遇到喜欢的就存下来，还可以在社区里分享，支持商业使用。
彻底解决了版权问题。
https://beta.elevenlabs.io/voice-library
https://www.xiaoyuzhoufm.com/episode/648ffa1886eb9d7e47b43fd0
Читать полностью…
Meta 的音乐生成，也不错 https://vxtwitter.com/_akhaliq/status/1667175989862973453?s=20
Читать полностью…
Meta 的音频大模型，把能想到的都做了，非常厉害https://vxtwitter.com/AlphaSignalAI/status/1669788759049510917
Читать полностью…
从ChatGPT出现不久，我就制定了计划，要在我的几个主要工作流上面用AI进行改造，雇佣AI作为助手，改善我的工作流程。 https://twitter.com/tinyfool/status/1669234748466823168
Читать полностью…
最近家里小朋友要给他们的儿童播客做个网站，正好试试刚上线的 http://framer.com/ai 版式与文字内容全部生成差不多等了两分钟，这期间可以改主题色改字体，自动适配手机，很适合做活动类型的单页面网站！ https://vxtwitter.com/indigo11/status/1669101396338278401?s=20
Читать полностью…
OpenAI 最近动作慢了点，终于更新了，16K的上下文非常有用，再见 Database https://openai.com/blog/function-calling-and-other-api-updates
Читать полностью…
本周六(6月3日)上午9：30，NLG专委会真知论坛第7期，本次有幸邀请到GLM系列模型一线研发曾奥涵同学(清华大学)和MOSS系列模型一线研发孙天祥同学(复旦大学)，就主题“大模型预训练和微调技术及心得”为大家带来最一线经验的报告和分享。直接与大模型训练和应用一线专家接触，答疑解惑，干货满满，机会难得！http://t.cn/A6pbEb3c
Читать полностью…
OpenAI最新的论文：《Let’s Verify Step by Step》 https://twitter.com/_akhaliq/status/1663981726647894027
Читать полностью…
OpenAI Roadmap
2023
- 又快又便宜的 GPT4，这是首要目标，决心要把人工智能的价格压到最低
- 100k到1M的tokens上下文，更长的就需比较难了
- API 微调服务，目前ChatGPT和GPT4还不支持微调，未来也会开放
- 有记忆的 API，目前只能通过传输上文来保持记忆，大部分 token 被浪费在上文的传输中，未来会提供记忆对话历史的 API
2024
- 多模态，等待GPU足够用之后，把GPT4的多模态开放给所有人
当下的限制
GPU 不够用
GPT4，API排队、32k、多模态，不支持微调，这些都是因为算力不够。
OpenAI 并未使用 LoRa 等高效微调技术
关于插件
Sam 说，除了 Browsing 外，插件系统还没有找到 PMF
还说，很多人想把他们的产品放到 ChatGPT里，但实际上他们真正需要的是把ChatGPT放到他们的产品里。
与客户竞争
除了 ChatGPT 之外，不会再发布新产品。
ChatGPT 的愿景是成为工作中的超级智能助理。
https://humanloop.com/blog/openai-plans
今天打开邮件获得了 Google SGE 生成式搜索的体验资格。跟卖家秀有亿点点不一样
- 需要手动点击生成按钮触发
- 搜索新闻，没有返回新闻，返回的是一些新闻网站，不如 Bard
- 询问如何看书，给了一大堆简单列表，信息量不如 ChatGPT
- 画图画不出
如果想自己试试，在这里排队
https://labs.withgoogle.com
ChatGPT iOS 客户端 3天下载量 71 万（作为对比，谷歌是 26万）
对于一个有6000万月访问的爆款产品来说，这个数字还是有点少的。
Web 方面：
Bing 的月访问量下降 11%，到 38.9M
ChatGPT 则是下降 5% 到 62.4M
Bard 增长 346%，达到 6.6M
基本可以看出是 Bard 分流了
来源
https://markets.businessinsider.com/news/stocks/chatgpt-alphabet-google-stock-bofa-wall-street-search-engine-markets-2023-5
如果我们在 Minecraft 中解放 GPT-4 会怎样？ ⛏️
我很高兴地宣布 Voyager，这是第一个完全在上下文中玩 Minecraft 的终身学习代理。 Voyager 通过编写、提炼、提交和从技能库中检索*代码*不断改进自己。
GPT-4 解锁了一种新范式：“训练”是代码执行而不是梯度下降。 “训练有素的模型”是 Voyager 迭代组合的技能代码库，而不是浮点数矩阵。我们正在将无梯度架构推向极限。https://vxtwitter.com/DrJimFan/status/1662115266933972993?s=20
PI app 背后的模型即将开放 API。
不仅很聪明，说话也更像人。
如果世界上的AI都像 ChatGPT 那样说话，会是一个非常无聊的世界。https://inflection.ai/inflection-1
沉浸式翻译，支持 inline 翻译，功能越来越多了，iPad上的Safari也装了插件，看论文介绍什么的轻松了许多。 https://vxtwitter.com/immersivetran/status/1667895122426740738?s=20
Читать полностью…
从其他模型生成的数据中学习会导致模型崩溃——一种退化过程，随着时间的推移，模型会忘记真实的基础数据分布……即使在几乎理想的长期学习条件下，这个过程也是不可避免的。
https://venturebeat.com/ai/the-ai-feedback-loop-researchers-warn-of-model-collapse-as-ai-trains-on-ai-generated-content/?utm_source=bensbites&utm_medium=newsletter&utm_campaign=eu-goes-hard-on-ai
https://vxtwitter.com/beatlesearth/status/1668634850906218503
Читать полностью…
AI 歌曲不新鲜，但是 AI 披头士，这次是官方的，意义重大。
保罗·麦卡特尼在周二接受BBC的《今日》广播节目采访时表示，他利用人工智能技术从一盒歌手在1980年遇害前不久录制的演示磁带中“提取出”了列侬的声音。
这张唱片将在今年晚些时候发布。
https://www.semafor.com/article/06/13/2023/paul-mccartney-beatles-song-ai?utm_source=bensbites&utm_medium=newsletter&utm_campaign=the-final-beatles-song-with-ai-it-s-official
视频生成的新sota https://vxtwitter.com/ben_ferns/status/1668866150481162241?s=20
Читать полностью…
陆川导演的 Vision Pro 体验
包含了一段沉浸式的 AIGC
苹果早就把AI的最佳应用场景想清楚了
/imagine 一个场景，用MJ生成一副画，然后将它延展为360环绕，再生成立体的人物，配上真实立体的空间音频
Midjourney 让你在旅途中看风景
Vision Pro 则是让你浸入风景
https://m.nbd.com.cn/articles/2023-06-06/2859686.html
VisionPro 吸引了太多注意力，估计很多人没看完整发布会，其实 iOS17加入了本地的 Transformer 模型，增强了英文输入体验，并且还支持了 in line 的AI补全，类似 Gmail 那种写到一半给后半句建议，这可是系统级别的。
这个功能在中国应该无法使用。
还有 iOS17 自带的听写，也是用了类似 whisper 的技术，效果应该会有巨大的提升。
开发者可以思考如何利用这个新的听写搞些事情。
Matthias Plappert这个发现很有意思：
1. 他在HumanEval上对几个LLMs进行了基准测试，特别是在pass@1（不知道是啥）上。他的侧重是代码生成方面的比较。
https://twitter.com/dotey/status/1664345808961937426?s=20
吴恩达公布了三门新的AI短课程，限时免费中
- 使用 ChatGPT API 构建系统
- 使用 Langchain 构建应用
- 扩散模型的工作原理
特别是 langchain 的课程和资料，应用开发者都应该看看。
学习地址
https://www.deeplearning.ai/short-courses/
国内大语言模型的 Elo 机制排行榜。ChatGpt3.5 作为一个基准，还是被超越了。
GPT4 才是星辰大海。
附上链接 https://mp.weixin.qq.com/s/n7J5Tth2zmuOREtwugLbwg
OpenAI Andrej 的模型训练介绍视频讲的还是很不错的。
40分钟的视频，可以说是LLM产品经理快速入门。
模型训练的四个阶段，大部分只是走了前三个，走到第四个的屈指可数，比如这个排行榜里只有 GPT4、3.5、Claude 有，这也是为什么人们普遍觉得他们更聪明更像人。
视频地址 https://bilibili.com/video/BV1ts4y1T7UH/
FastGpt+Laf，5分钟，将AI知识库装进公众号 https://www.bilibili.com/video/BV1xh4y1t7fy/
Читать полностью…