关于AIGC人工智能、思维方式、知识拓展,能力提升等。投稿/合作: @inside1024_bot
AIGC 领域的最新工具、开源项目以及行业大事件
AIGC 领域的最新工具、开源项目以及行业大事件
而过去一些通过引入先验的方式提升模型能力,在参数量上去之后可能反过来制约了模型。
11. 语言只是世界的一个投影。真正的未来是多模态,在这一点上,OpenAI做得很慢,慢得让全世界着急,它却又走得比任何人都要快。真正的世界模型还在后头。
12. 在高校,尤其是国内高校很难再做出有意义的工作了,有机会的话还是进厂做大模型刷新认知。
11. 语言只是世界的一个投影。真正的未来是多模态,在这一点上,OpenAI做得很慢,慢得让全世界着急,它却又走得比任何人都要快。真正的世界模型还在后头。
12. 在高校,尤其是国内高校很难再做出有意义的工作了,有机会的话还是进厂做大模型刷新认知。
1. 训练起来大模型和训练出有通用能力的模型完全是两码事。
目前国内大模型只能说训练起来了,但是远无技术壁垒,这是大厂本就应该具备的能力,并不值得骄傲。
2. 具备通用能力的大模型,入门参数量可能不是GPT3.5的175B,可能是GPT4的1.8T。而且这仅仅是必要条件,大规模的高质量语料也许才是现阶段除OpenAI以外其他企业真正的瓶颈所在。
3. 如果瓶颈真的在语料,我很悲观这会成为比芯片更大的壁垒。
因为人类最高质量的语料是书籍和论文,而真正高质量的书籍和论文掌握在西方世界手里。
4. 现阶段,最关键的是把智能做上去。诸如长文本建模,性能优化,应用场景这些一点都不关键。至少对有出息企业来说是这样,如果只是想做做应用就另当别论了。
5. 拿Llama2 Finetune刷榜意义不大,在特定数据集上刷得比GPT-4高并不能说明任何问题。
国内厂商最搞笑的是把C-eval的数据丢进训练集里面,然后再在C-eval上刷榜,各种吊打GPT,这种行为跟芯片造假的性质差不多,让国人认不清差距,以为GPT-4根本没有什么壁垒,国内厂商已经很接近了。
事实是,如果GPT4是100分的话,国产的大模型能拿个10分已经烧高香了。
6. 知识能力可能不是个事,GPT4除了四则运算会犯傻逼错误之外,很少犯傻逼错误。而且推理能力比其他模型要强太多太多,我想其中可能有特别的建模方式,不清楚是不是RLHF带来的收益。
7. 数学能力不是做算术,也不是做高考题。而是有数学直觉,推导,证明的能力。目前我只在GPT4上看到了拥有数学直觉,但证明的能力还很欠缺。
8. 流量不是大模型要考虑的事情,大模型要解决的是人类面临的难题,
比如解决人类还没解决的科学问题去扩展人类的智能;
帮助企业做商业计划优化市场经济;帮助社会建立更健全体系等等,达到千金一Token的效果。否则只是陪用户聊天,ROI很难做正。
9. 在国内做LLM其实竞争不大,因为大家做事都太急太糙,目前看来大家都没太大出息。
预计两年内不会有太好的成果,而我也非常期待被打脸。
10. 两个东西需要重新思考:在过去做不Work的想法,也许在大模型下可以重新尝试,说不定就Work了;在小模型下做Work的想法,也许在一定规模之后就不再Work了。
原因很简单,过去不Work的做法也许只是模型能力不够无法按照我们的预期去拟合;
讨论中的评论包括对 AI 生成图片的辨别能力的讨论,以及一些用户分享了他们使用不同工具和技术来生成这样的图片的方法。
有些评论者对这种图片的性质和目的提出了质疑,还有一些评论者对这种技术的潜在滥用表示担忧。
总的来说,这篇文章主要是关于 AI 生成图片的讨论和技术分享。
🔗 https://redd.it/16tnjfa
AI 领域近期几个大事放一起看,那些比 Llama 2 还落后的大模型团队根本睡不着觉:
🐰 Claude 被亚马逊投资了 40 亿美金,只释放了少量股份。前者可以在第一梯队继续领跑,后者则用自家芯片能力(Tranium 和 Inferentia 技术类似Nvidia 的 GPU )换来一张靠谱的竞技场门票。
🦙 Meta AI 低调登场。以「名人数字分身」的打法,是非常接地气的;Instagram 、WhatsApp 和 Messenger 为代表的开路先锋,足以引爆战火的全面升级。
🦊 ChatGPT 受到 Google Bard 插件系统和 Meta 刺激,火速放出了各种多模态能力 GPT-V ,企图拉开距离。
以上都还没算 Bing、X AI 、Apple、 Pi 、Character.ai 这些重量级玩家。
这就为什么红色皇后常常笑着说,「你需要拼命奔跑,才能停留在原地」。
🐰 Claude 被亚马逊投资了 40 亿美金,只释放了少量股份。前者可以在第一梯队继续领跑,后者则用自家芯片能力(Tranium 和 Inferentia 技术类似Nvidia 的 GPU )换来一张靠谱的竞技场门票。
🦙 Meta AI 低调登场。以「名人数字分身」的打法,是非常接地气的;Instagram 、WhatsApp 和 Messenger 为代表的开路先锋,足以引爆战火的全面升级。
🦊 ChatGPT 受到 Google Bard 插件系统和 Meta 刺激,火速放出了各种多模态能力 GPT-V ,企图拉开距离。
以上都还没算 Bing、X AI 、Apple、 Pi 、Character.ai 这些重量级玩家。
这就为什么红色皇后常常笑着说,「你需要拼命奔跑,才能停留在原地」。
简单测试了一下ChatGPT的语音对话功能,现在的主要问题是响应速度和说英语时会吞字。响应速度实在太慢所以有剪辑。
其他都很完美了特别是cove这个音色,非常自然。
Invalid media: video
其他都很完美了特别是cove这个音色,非常自然。
Invalid media: video
Adobe 正式发布了 Photoshop 网页版,你现在可以在网页版里面使用 PS AI 了,而且不是之前那种半成品,是带图层和蒙版的完整版本。在 AI 功能的使用上基本跟本地版本区别不大。
没有推出的功能中,修补工具、钢笔工具、智能对象支持、多边形套索等等将会很快推出。
刚才买完试了一下。首先肯定是不对大陆提供服务,然后买的时候国内的卡也不行。美国的话按年订阅是 20 美元/月。按月购买是 31美元/月,还是挺贵的。土耳其区又很容易被遣返。
刚好前几天做了一个项目PS AI 帮了大忙,感兴趣的话我出一个教程,教一些门槛低的基础用法。
官方公告:https://blog.adobe.com/en/publish/2023/09/27/photoshop-streamlines-power-precision-web
使用地址:https://photoshop.adobe.com
Invalid media: video
没有推出的功能中,修补工具、钢笔工具、智能对象支持、多边形套索等等将会很快推出。
刚才买完试了一下。首先肯定是不对大陆提供服务,然后买的时候国内的卡也不行。美国的话按年订阅是 20 美元/月。按月购买是 31美元/月,还是挺贵的。土耳其区又很容易被遣返。
刚好前几天做了一个项目PS AI 帮了大忙,感兴趣的话我出一个教程,教一些门槛低的基础用法。
官方公告:https://blog.adobe.com/en/publish/2023/09/27/photoshop-streamlines-power-precision-web
使用地址:https://photoshop.adobe.com
Invalid media: video