关于AIGC人工智能、思维方式、知识拓展，能力提升等。投稿/合作： @inside1024_bot
AIGC 领域的最新工具、开源项目以及行业大事件
AIGC 领域的最新工具、开源项目以及行业大事件
又硬核，又幽默。用小本本记下几个名场面，可拍电影，
如：断头跑完马拉松，投资人评：没脑袋怎么了，脑袋不重要！
又如：人类司机带着人类工人的荣光开叉车，清理掉两人形机器人（咱们👷有力量！
提醒现实很难，不是说未来不可能。智能机器人（人形只是其中一种）会是不可阻挡的未来，会对生产力和社会地带来好坏影响，值得被仔细观察。
主要就是两类：
一类是电商商品，商品的还原度非常重要，所以原来直接生成不行。
另一类是小红书或者视频封面，一些主打 IP 的非常需要将 up 自己的人像放在封面上。
现在这两类直接全部都解决了，而且我还整理了一套生成提示词的提示词，你可以用来复刻你喜欢的博主的封面或者店铺的宣传图。
你只需要找一个支持多模态的 LLM，将你想要参考的排版和下面这段提示词放进去，就能直接生成对应的即梦智能参考提示词。
首先是电商的商品展示或者营销内容
可以看到人物和商品的 ID 都没有变化，甚至他还帮你把照片背景和封面的粉色背景做了渐变让两者更加融合。
当然你要是懒得输入提示词，其实即梦的智能参考也没问题。
比如这里我就写了一个“29.9 元蛋糕新品海报”，他就帮我生成了一个非常可爱和漂亮的蛋糕营销海报。
甚至连文案都帮我补充好了，萌趣造型，甜蜜诱惑这种词你让我想我想不出来反正，太强了。
然后是常见的小红书封面或者说视频封面。比如这种宣传旅游景点或者露营景点的，完全可以在保证照片是对应位置的情况下加上文字排版。
如果说这种风景图简单的话我们来个人像的。类似很多探店视频都是这种将人物抠出来加上其他店里的内容展示在加标题的方式，以往这一套还是挺麻烦的，现在一句话搞定。
模型信息&如何使用
刚好今天他们发了这个模型的公众号文章，原来这一个功能是有两个模型驱动的，分别是SeedEdit3.0和DreamPoster模型。
改文字、做海报功能调用的模型是字节的 DreamPoster模型。
智能参考的使用方式也很简单，选择图片图片3.0 模型，然后上传图片，默认就是智能参考，输入提示词直接生成就行。
目前这个功能在内测阶段，下周就会全量上线，到时候就可以拿着藏师傅的宝典操练起来了。
一类是电商商品，商品的还原度非常重要，所以原来直接生成不行。
另一类是小红书或者视频封面，一些主打 IP 的非常需要将 up 自己的人像放在封面上。
现在这两类直接全部都解决了，而且我还整理了一套生成提示词的提示词，你可以用来复刻你喜欢的博主的封面或者店铺的宣传图。
你只需要找一个支持多模态的 LLM，将你想要参考的排版和下面这段提示词放进去，就能直接生成对应的即梦智能参考提示词。
首先是电商的商品展示或者营销内容
可以看到人物和商品的 ID 都没有变化，甚至他还帮你把照片背景和封面的粉色背景做了渐变让两者更加融合。
当然你要是懒得输入提示词，其实即梦的智能参考也没问题。
比如这里我就写了一个“29.9 元蛋糕新品海报”，他就帮我生成了一个非常可爱和漂亮的蛋糕营销海报。
甚至连文案都帮我补充好了，萌趣造型，甜蜜诱惑这种词你让我想我想不出来反正，太强了。
然后是常见的小红书封面或者说视频封面。比如这种宣传旅游景点或者露营景点的，完全可以在保证照片是对应位置的情况下加上文字排版。
如果说这种风景图简单的话我们来个人像的。类似很多探店视频都是这种将人物抠出来加上其他店里的内容展示在加标题的方式，以往这一套还是挺麻烦的，现在一句话搞定。
模型信息&如何使用
刚好今天他们发了这个模型的公众号文章，原来这一个功能是有两个模型驱动的，分别是SeedEdit3.0和DreamPoster模型。
改文字、做海报功能调用的模型是字节的 DreamPoster模型。
智能参考的使用方式也很简单，选择图片图片3.0 模型，然后上传图片，默认就是智能参考，输入提示词直接生成就行。
目前这个功能在内测阶段，下周就会全量上线，到时候就可以拿着藏师傅的宝典操练起来了。
比方说最近在实现 IPv6 ND 协议栈，一些特定的 RA 消息构造在某些操作系统上就是无法生效，原本这可能要耗费我几天的时间去研究，阅读各种文献甚至 kernel 源码实现，而现在只需请教 AI，就能非常准确地找到答案。
AI 的这种资深，在你对某个技术的表层足够了解，但是缺乏经验和细节信息时，能够极快的帮你补全。
### 极强的 debug 能力
我的项目里有一个藏了很久的问题，在特定情况下会出现 TCP 性能下降，由于并没有产生任何明确的报错，这让修正这个问题变得异常麻烦。
我原本是单纯向 AI 描述了我的使用场景和问题表现，AI 提出了几种猜想，大部分我看一眼就知道不靠谱，剩下几个试了下也并无效果。索性，我直接把 100MB 的抓包结果丢给了 o3 让他分析。它在几分钟内就精准指出了问题所在，甚至给出了改进建议。这种调试能力在人类团队中几乎无法复现。
如此庞大的数据量，人工分析非常困难。即使借助各种工具，仅学习用法、配置环境就已令人头大。（因为 TCP 流控分析的各种工具链基本都是上个世纪的项目）
现在我已经习惯了这种 vibe debug，遇到什么问题，直接把 verbose 日志和问题描述丢给 AI，大概率就能直接找到问题，这其实也是得益于 AI 的不怕苦不怕累的精神。
### Peer review
作为独立开发者，我的 code review 一直以来只能靠自己，但是自己写的 bug，很多时候自己是看不出来的🙈，现在我只需将 git diff 的结果交给 AI，就能请它帮我 review。
同样的，我也会 review AI 给出的结果，AI 当然也会犯错，高级低级的都有。但是比起人类同事来说，AI 没有 ego，能很好地接受反馈并立即调整；很多人类做不到，或至少过程很曲折。
### 职业影响
就目前 AI 的能力来看，无疑是对初级开发者就业市场产生了巨大的压力，对于资深工程师来说，反而是一种赋能。（我目前还是能为找到 AI 的错误并指导它而沾沾自喜，但也不知道还能持续多久。）
这比较让人担忧的是，这可能导致职业断层，因为初级开发者根本没有机会得到训练机会而成长。
不过这已经早已不仅仅是软件工程师所面临的问题，本质上来说，所有脑力工作者的职业都受到了巨大威胁。像咨询、律师等职业，还可以依靠私域信息门槛维持。而像医生这样完全依赖公域信息的职业，初级职位也同样完全可以被 AI 替代了，当然最终取决于患者的接受程度。
我最近一次体检后的报告喂给 o3 进行解读，他给出的信息量、准确性、建议，均远超全科医生给出的解读。不仅仅是因为 AI 的信息更全面，AI 可以为报告中每一项异常数据，检索最新研究与各国医疗指南，并整合后给出建议，甚至由于 GPT 已经了解我的生活习惯，能更优针对性的给出意见。而这种工作量对于人类医生来说是不可接受的（当然大多数情况下也确实没有必要）。
很多人对 AI 医疗的顾虑是：AI 犯错了怎么办？然而其实人类医生也会犯错，而且就现在的 AI 水平来看，AI 犯错的概率应该已经比一般人类医生低了。当然最优解还是兼听则明，把 AI 的意见告知医生，也把医生的反馈告知 AI，基本最后都会达成一致。对于一些不重要的小问题，仅 AI 意见完全足够。
### AI 的限制
当然 AI 也不是万能的，甚至可以说局限性相当明显。claude-4 虽然非常强，但是随着 context 的增长，注意力溃散的非常严重，后面基本就像喝多了一样。
当前的最佳实践是：尽量保持 context 精简，聚焦具体任务，依靠人力来拆解复杂目标。
比方说先用一个 context 确定具体需求，再开一个 context 将明确好了的需求转换为具体任务列表，再把任务单独交给一个个 context 去具体实现。这样效果会好很多。
仔细一看，这不就是人类的团队协作模式嘛 😂
这让我想起不久前由 GPT o1 和 DeepSeek R1 的思维链引发的 AI 能力巨幅提升。其实在思维链能力出来之前，就可以靠 prompt 指引 AI 一步步思考，取得类似的效果，甚至催生了 prompt 工程师职业。然而直接在模型层面将这种能力整合后，prompt 引导就非常多余了。
那么目前编程实践中，如今常用的 context 切分技巧，我认为在不久的将来也可能被模型层原生支持，即 AI 自主可以通过切换 context 的方式维持注意力，保持高效。这可能带来 AI 能力的又一次飞跃式进步。
AI 的这种资深，在你对某个技术的表层足够了解，但是缺乏经验和细节信息时，能够极快的帮你补全。
### 极强的 debug 能力
我的项目里有一个藏了很久的问题，在特定情况下会出现 TCP 性能下降，由于并没有产生任何明确的报错，这让修正这个问题变得异常麻烦。
我原本是单纯向 AI 描述了我的使用场景和问题表现，AI 提出了几种猜想，大部分我看一眼就知道不靠谱，剩下几个试了下也并无效果。索性，我直接把 100MB 的抓包结果丢给了 o3 让他分析。它在几分钟内就精准指出了问题所在，甚至给出了改进建议。这种调试能力在人类团队中几乎无法复现。
如此庞大的数据量，人工分析非常困难。即使借助各种工具，仅学习用法、配置环境就已令人头大。（因为 TCP 流控分析的各种工具链基本都是上个世纪的项目）
现在我已经习惯了这种 vibe debug，遇到什么问题，直接把 verbose 日志和问题描述丢给 AI，大概率就能直接找到问题，这其实也是得益于 AI 的不怕苦不怕累的精神。
### Peer review
作为独立开发者，我的 code review 一直以来只能靠自己，但是自己写的 bug，很多时候自己是看不出来的🙈，现在我只需将 git diff 的结果交给 AI，就能请它帮我 review。
同样的，我也会 review AI 给出的结果，AI 当然也会犯错，高级低级的都有。但是比起人类同事来说，AI 没有 ego，能很好地接受反馈并立即调整；很多人类做不到，或至少过程很曲折。
### 职业影响
就目前 AI 的能力来看，无疑是对初级开发者就业市场产生了巨大的压力，对于资深工程师来说，反而是一种赋能。（我目前还是能为找到 AI 的错误并指导它而沾沾自喜，但也不知道还能持续多久。）
这比较让人担忧的是，这可能导致职业断层，因为初级开发者根本没有机会得到训练机会而成长。
不过这已经早已不仅仅是软件工程师所面临的问题，本质上来说，所有脑力工作者的职业都受到了巨大威胁。像咨询、律师等职业，还可以依靠私域信息门槛维持。而像医生这样完全依赖公域信息的职业，初级职位也同样完全可以被 AI 替代了，当然最终取决于患者的接受程度。
我最近一次体检后的报告喂给 o3 进行解读，他给出的信息量、准确性、建议，均远超全科医生给出的解读。不仅仅是因为 AI 的信息更全面，AI 可以为报告中每一项异常数据，检索最新研究与各国医疗指南，并整合后给出建议，甚至由于 GPT 已经了解我的生活习惯，能更优针对性的给出意见。而这种工作量对于人类医生来说是不可接受的（当然大多数情况下也确实没有必要）。
很多人对 AI 医疗的顾虑是：AI 犯错了怎么办？然而其实人类医生也会犯错，而且就现在的 AI 水平来看，AI 犯错的概率应该已经比一般人类医生低了。当然最优解还是兼听则明，把 AI 的意见告知医生，也把医生的反馈告知 AI，基本最后都会达成一致。对于一些不重要的小问题，仅 AI 意见完全足够。
### AI 的限制
当然 AI 也不是万能的，甚至可以说局限性相当明显。claude-4 虽然非常强，但是随着 context 的增长，注意力溃散的非常严重，后面基本就像喝多了一样。
当前的最佳实践是：尽量保持 context 精简，聚焦具体任务，依靠人力来拆解复杂目标。
比方说先用一个 context 确定具体需求，再开一个 context 将明确好了的需求转换为具体任务列表，再把任务单独交给一个个 context 去具体实现。这样效果会好很多。
仔细一看，这不就是人类的团队协作模式嘛 😂
这让我想起不久前由 GPT o1 和 DeepSeek R1 的思维链引发的 AI 能力巨幅提升。其实在思维链能力出来之前，就可以靠 prompt 指引 AI 一步步思考，取得类似的效果，甚至催生了 prompt 工程师职业。然而直接在模型层面将这种能力整合后，prompt 引导就非常多余了。
那么目前编程实践中，如今常用的 context 切分技巧，我认为在不久的将来也可能被模型层原生支持，即 AI 自主可以通过切换 context 的方式维持注意力，保持高效。这可能带来 AI 能力的又一次飞跃式进步。
最近大家都在聊 AI 加持下的 vibe coding，我来聊聊作为资深开发者最近高强度使用 AI 的一些感受：
一句话总结，AI 让不会写代码的人具备了“直接造辆车”的能力，而让资深开发者一个人就有了“独立建造航母”的可能。
### 项目重构
最近使用 claude-4 对我之前的一些代码进行了重构。原因是原来的实现中，为了降低编写时的心智负担，会使用一些性能偏低但是易于书写的代码。比方说自动锁管理、ARC、使用 array 数据结构代替 queue。
然而用 AI 实现就没了这些负担，我先让 AI 为原始实现编写完整测试用例，确保原代码行为明确，然后让 AI 对整个 class 进行重构，追求极致性能，写完新代码后再重新运行测试保证行为一致。
就这样，我轻松完成了部分核心数据结构的重构。尽管重构后的代码量几乎翻倍，但逻辑清晰、复杂度可控，换来的则是约 20% 的性能提升。
核心是，AI 编写代码不怕苦不怕累，没有必要为了简化代码而牺牲性能。人类工程师目前主流习惯是牺牲部分运行性能以换取开发效率。
### AI 编程语言
这牵扯出的另一个观察是，什么编程语言对 AI 更友好，我的观察是可读性越高、行为越明确的语言效果越好。语法糖等简化编码技术，反而不利于 AI 使用。（AI 在发现一些奇怪的行为是运算符重载导致的不知道会不会跟我一样跳脚骂街）
而像 SwiftUI 那些优势仅在开发效率上的技术，在 AI 时代更显得有些生不逢时。反正都是 AI 写，AI 用 UIKit/AppKit 实现不过是代码长一点而已，在可控性和行为明确性方面更适合 AI 自动化维护，性能也高的多。
### AI 的资深
虽然 AI 的编码技能，比起资深的工程师其实可能还是会有差距，但是要论知识丰富程度，则远非任何个体可比。
这个优势体现在当我要去实现一些技术盲区时，原本的流程大概是：先读几本书，再对照比较一系列 RFC，再请教下相关领域的朋友确认自己已经理解。或者先按照自己的想象做个最小工程实践，然后再根据各种问题一点点填坑。
目前最好的讲MCP的课程
Anthropic 和 Deeplearning 合作推出了MCP系列课程，希望系统了解mcp推荐看这个课程。
一样是一个小时左右，从概念讲到host，讲到 client 和 server，再讲到mcp内的各个组件 tools，prompts，resources，同时还分享了目前在逐渐支持的 stream http和正在发展的 roots sampling，mcp registry 等情况。
看完对整个mcp的当下、现在和未来的路线图一下就清晰了。
还有一个比较触动我的点是: 好的应用是实践"生长"出来的。
anthropic 说mcp，artifacts 都是由内部实践诞生出来的项目，自己用了好用，发现是刚需就打磨发布出来了，都成了口碑和价值俱佳的产品。
https://www.deeplearning.ai/short-courses/mcp-build-rich-context-ai-apps-with-anthropic/
Anthropic 和 Deeplearning 合作推出了MCP系列课程，希望系统了解mcp推荐看这个课程。
一样是一个小时左右，从概念讲到host，讲到 client 和 server，再讲到mcp内的各个组件 tools，prompts，resources，同时还分享了目前在逐渐支持的 stream http和正在发展的 roots sampling，mcp registry 等情况。
看完对整个mcp的当下、现在和未来的路线图一下就清晰了。
还有一个比较触动我的点是: 好的应用是实践"生长"出来的。
anthropic 说mcp，artifacts 都是由内部实践诞生出来的项目，自己用了好用，发现是刚需就打磨发布出来了，都成了口碑和价值俱佳的产品。
https://www.deeplearning.ai/short-courses/mcp-build-rich-context-ai-apps-with-anthropic/
众所周知，医疗和教育是压在普通人头顶的两座大山，决策成本之高，催生了为那些迫不得已需要翻山越岭的人贩卖手杖的行当，搜索就是一个重灾区，搜索疾病症状，出来的必然是各种医药服务的小广告，搜索填报志愿，充斥眼前的也全都是教育机构的留资引导。
不是说广告不好，而是一个需求入口被贴满了牛皮癣，以致于用户要从无孔不入的商业推广里学会分辨客观信息，这实在不合理，至于「天下苦xx久矣」的说法用得多了，也就不剩下多少批判性了，反而更有「日哭夜哭能哭死董卓否」的抽象感。
套用俞军老师的著名公式——产品价值=（新体验-旧体验）-迁移成本——只有在体验差距足够大的时候，才会撼动传统搜索的商业模式，这也是AI被寄予厚望的经济预期，至少在针对那两座大山的「移山工程」里，夸克塞到用户手里的铲子，是真的有用。
几乎是在同一时间，夸克的健康大模型通过了副主任医师的职称考试，在12个主流门诊学科里都超过了合格线，另外还推出了面向高考场景的深度搜索服务，可以成为一个高度定制化的志愿规划师。
从原理上，这是夸克走上「工具箱化」这条道路的必然结果，基于通义千问基座模型的底层能力，为特定的痛点需求进行额外的数据采集和后训练，最后集成到框里去。
考虑到本来用户的使用习惯都已经在转移过程中了——每次评论区都有很多现身说法的，表示自己越来越依赖遇事不决问AI、不再选择在搜索结果里翻拣网页——趁势完善端到端的体验，是百利而无一害的。
我测试下来的感受是，要说取代医生和老师，可能为时尚早，但是取代搜索，已经完全可行了，而且不是平替，是更优解。
比如查完血常规后，拍照发给夸克，在排除疑难杂症的前提下，它所给出的答案和医生问诊的结果是没什么差别的，各种用药禁忌和症状分析，也都能给出纯粹干货的说明，不再需要担心夹带私货。
我看到前几天也有医生出来表态了，他个人并不介意患者拿着AI的答案和他掰扯，在医疗资源长期紧张的环境下，患者这么做的心理实际上是怕医生在百忙之中有所遗漏，希望受到重视。而在医生看来，不管怎么样，懂得使用AI总比轻信不明网站里的野鸡专家要好，AI至少不会胡说八道，它能让医患之间产生更加顺畅的交流。
填报志愿也是类似，张雪峰的火爆和定价足以说明，在东亚这个「年年都是人生最重要的一年」的做题氛围里，错一步误一生的焦虑始终困扰着学生和家长们，现在有了AI搭把手弥补信息差，总归是件好事。
另一方面，「深耕垂直模型突破」的行业判断可能也确实成立了。首先，通用模型的能力是最关键的，若是基础智能不能保持领先，就很难适应千人千面的大众需求，反过来说，通用模型却很容易把垂直模型整合到一个入口里，让不同领域的专家时刻待命，分给不同的场景上岗。
夸克也证明了只要通用模型足够领先——通义千问俨然已成全球开源旗舰——细分出的垂直模型会有更大的进步跨度，兼具通用模型里最专业的、垂直模型里最聪明的两大优势。
夸克这次的升级就是如此，框还是那个框，后面的模型又过了不知道多少遍的万重山，用户也不需要特意去选择模型版本，只需要输入意图，模型自己就能做出判断，然后调用对应的垂直模型出来「接客」。
根据Sam Altman的说法，他对用户抱怨ChatGPT的模型版本过于复杂深有同感，让用户每次输入前都要考虑是不是选对了模型也很多余，所以GPT-5将回归「All In One」的模式，一个模型解万事。
这么来看，夸克的含金量还在上升。
不是说广告不好，而是一个需求入口被贴满了牛皮癣，以致于用户要从无孔不入的商业推广里学会分辨客观信息，这实在不合理，至于「天下苦xx久矣」的说法用得多了，也就不剩下多少批判性了，反而更有「日哭夜哭能哭死董卓否」的抽象感。
套用俞军老师的著名公式——产品价值=（新体验-旧体验）-迁移成本——只有在体验差距足够大的时候，才会撼动传统搜索的商业模式，这也是AI被寄予厚望的经济预期，至少在针对那两座大山的「移山工程」里，夸克塞到用户手里的铲子，是真的有用。
几乎是在同一时间，夸克的健康大模型通过了副主任医师的职称考试，在12个主流门诊学科里都超过了合格线，另外还推出了面向高考场景的深度搜索服务，可以成为一个高度定制化的志愿规划师。
从原理上，这是夸克走上「工具箱化」这条道路的必然结果，基于通义千问基座模型的底层能力，为特定的痛点需求进行额外的数据采集和后训练，最后集成到框里去。
考虑到本来用户的使用习惯都已经在转移过程中了——每次评论区都有很多现身说法的，表示自己越来越依赖遇事不决问AI、不再选择在搜索结果里翻拣网页——趁势完善端到端的体验，是百利而无一害的。
我测试下来的感受是，要说取代医生和老师，可能为时尚早，但是取代搜索，已经完全可行了，而且不是平替，是更优解。
比如查完血常规后，拍照发给夸克，在排除疑难杂症的前提下，它所给出的答案和医生问诊的结果是没什么差别的，各种用药禁忌和症状分析，也都能给出纯粹干货的说明，不再需要担心夹带私货。
我看到前几天也有医生出来表态了，他个人并不介意患者拿着AI的答案和他掰扯，在医疗资源长期紧张的环境下，患者这么做的心理实际上是怕医生在百忙之中有所遗漏，希望受到重视。而在医生看来，不管怎么样，懂得使用AI总比轻信不明网站里的野鸡专家要好，AI至少不会胡说八道，它能让医患之间产生更加顺畅的交流。
填报志愿也是类似，张雪峰的火爆和定价足以说明，在东亚这个「年年都是人生最重要的一年」的做题氛围里，错一步误一生的焦虑始终困扰着学生和家长们，现在有了AI搭把手弥补信息差，总归是件好事。
另一方面，「深耕垂直模型突破」的行业判断可能也确实成立了。首先，通用模型的能力是最关键的，若是基础智能不能保持领先，就很难适应千人千面的大众需求，反过来说，通用模型却很容易把垂直模型整合到一个入口里，让不同领域的专家时刻待命，分给不同的场景上岗。
夸克也证明了只要通用模型足够领先——通义千问俨然已成全球开源旗舰——细分出的垂直模型会有更大的进步跨度，兼具通用模型里最专业的、垂直模型里最聪明的两大优势。
夸克这次的升级就是如此，框还是那个框，后面的模型又过了不知道多少遍的万重山，用户也不需要特意去选择模型版本，只需要输入意图，模型自己就能做出判断，然后调用对应的垂直模型出来「接客」。
根据Sam Altman的说法，他对用户抱怨ChatGPT的模型版本过于复杂深有同感，让用户每次输入前都要考虑是不是选对了模型也很多余，所以GPT-5将回归「All In One」的模式，一个模型解万事。
这么来看，夸克的含金量还在上升。
