关于AIGC人工智能、思维方式、知识拓展,能力提升等。投稿/合作: @inside1024_bot
AIGC 领域的最新工具、开源项目以及行业大事件
AIGC 领域的最新工具、开源项目以及行业大事件
💡 感悟: Vibe Coding 并不意味着“瞎写”,它实际上对开发者的架构拆解能力和版本管理习惯提出了更高要求。AI 负责出分力,你负责出脑子。
原文参见附图
#Cursor #VibeCoding #AI编程 #独立开发 #YC
原文参见附图
#Cursor #VibeCoding #AI编程 #独立开发 #YC
搞成 SVG 以后还能扔进 Figma 里面改字体,改完就更像了
让 GPT 总结了一套提示词👇#ai创造营##ai编程#
用途:我发一张信息图或海报截图,你把它高保真还原为可编辑 SVG,整体排版尽量一致,但文字改成 {中文}(或保持原语言)。
提示词:
指令
请把我发送的图片转成可编辑 SVG:
保持版式与层级结构(标题、分区、图标、箭头、图表等)尽量一致;
所有文字保留为 <text> 可编辑(不要转路径);
所有图形用向量元素(<rect>/<circle>/<path>/<line>/<polygon>),不要嵌入位图;
颜色与风格尽量接近原图;
分组与命名清晰:01_Header、02_Section_*、Icon_*、Chart_*;
画布尺寸按原图推断;坐标/描边尽量用整数;
生成文件到 /mnt/data/infographic.svg 并给出下载链接。
若图片中有不清晰的内容,请做合理假设并在结果底部列出“假设项”。
他们 CEO 这次不只是分享里程碑数字,更重要的是他们把内部称为"圣经"的一套产品方法论公开出来了。
包含了团队内部无数次讨论、实验和踩坑之后总结出来的经验,总结一下做个笔记👇:
HeyGen 把视频分成了两类:沟通类视频和电影类视频。
沟通类视频包括业务更新、教程、采访、播客、解释性视频,目的是说明、告知或传达信息,最适合基于脚本的编辑。电影类视频是高制作广告、电影、音乐视频、预告片这种,目的是打动、激发或娱乐观众,最适合时间线编辑。
HeyGen 的重点是让沟通类视频对所有人都可用。他们说的"所有人"是真正的所有人,从初学者到专业人士的每一种技能水平。产品足够简单,任何人都能在几分钟内制作出高质量的视频。
整个方法论的核心就一句话:
快速行动,成为绝对最佳。乘着 AI 浪潮,接受研究中的不确定性,押注未来六个月,构建随着模型改进而自我升级的灵活产品,同时不牺牲质量。
传统时代是在稳固基础上构建,为长久性优化,提前规划 12-18 个月,打磨好再发布,按序开发。AI 时代的 HeyGen Way 是乘着科技浪潮,为自动改进而构建,实际规划 2 个月周期(与模型升级周期一致),发布以学习,并行试验。
为什么是两个月?这个周期与模型升级周期一致,既能快速调整策略又能保持专注。
他们的节奏包括:两个月路线图规划,与 AI 进展周期同步,与领导层、技术负责人和产品经理深入回顾并制定策略。6-12 个月战略押注,预测并为下一次重大突破做准备。每两周承诺清单,产品和工程共同决定优先级。每日发布,改进、特性或实验每天上线。
实验流程很快:第 1 天定义假设和成功指标,第 2 天构建真正最小化的 MVP,第 3-5 天向部分用户发布,第 2 周分析学习并决定下一步。
好的实验要快(以天为单位不是周),科学化且数据驱动,提供明确信号(继续、转向或停止),做大动作而不是小修小补。大多数实验会失败,这是预期之内的。带着学习的失败等于胜利,没有学习的失败才是真正的失败。
## 提出五大运营原则
可以通过 GPT 的自认语言进行检索或者要求对应的 APP 创建,还能继续对话进行修改或者筛选。
如果需要修改或者手动编辑的话直接跳转原来的应用进行处理。
如果需要调用对应应用你需要有这个应用的账号才行。
我用 Figma 做了一下测试,目前只能调用 Figjam 也就是只能用里面的白板工具,不能画 UI,不过也很好了。
以后可以把跟 GPT 讨论的技术架构、流程之类的文字结果直接变成流程图了,还能在 Figma 手动编辑#ai创造营#
新模型与原生图像生成的核心:
2.5 的核心变化,在于将图像生成、理解与编辑纳入同一多模态上下文里执行。“原生图像生成”意味着模型在一次对话流中逐步产出多张图,并且每一步都“看得到”之前生成的图像与文本,从而可以在风格、构图和语义上保持连续一致。
它更像是一条带状态的生成轨道,每一步的输出既是结果,也是下一步的条件。这一“交错式生成”范式,让复杂编辑自然拆分为多步序列,避免了在“单步巨复杂指令”中丢失细节。
当把“理解”和“生成”并置在同一训练与推理体内会有明显的“正向迁移”:图像理解能力的提升,会帮助生成学习到更多关于真实世界与视觉结构的知识;反之亦然。
文本渲染为何重要:
传统图像/视频模型优化,很依赖人类偏好作为评测信号,这类信号真实但成本高、滞后长、主观性强,难以高频爬坡。
团队因此寻找可以在训练过程中高频追踪的替代指标。文本渲染成为突破口:若模型能在图像中准确构造字形、排布与空间关系,说明其对“视觉结构”的掌握在增强。
这一代理指标的价值在于可持续追踪:无论是架构、数据、训练策略的实验,只要把文本渲染纳入固定监控,就能避免回归,并捕捉到意外有效的改动。
字是一种高度结构化的微任务。当模型学会了在复杂背景中稳定地“写字”,它也更有机会正确处理“平行线条”“规整网格”等同样结构化的视觉课题,让整体画面更可信。
多模态正向迁移:
团队把图像理解与生成称作姐妹。统一训练的目标,是在同一模型里学习多模态的理解/生成能力,并在两者之间产生“正向迁移”。
在生成中辅助理解”的路径:让模型在解题过程中画图打草稿,以更好地把抽象问题视觉化、结构化。一次会话里,模型既能接收用户图片、文本,又能生成中间图像,再用这些中间产物辅助下一步思考,形成自洽的多模态推理链。
展望,从更好看到更聪明与更靠谱:
对未来方向,团队强调两条主线:其一是聪明感”。他们希望当用户指令“不充分、甚至有误”时,模型能“越级发挥”,做出“比用户描述更好”的结果。
其二是事实性/严谨性。在图表、流程图、信息图等“既要好看又要准确”的任务里,模型需要严格遵循事实与排版约束,避免多余文本和逻辑错误,让视觉表达与内容正确双达标。
介绍了模型的可解释性和模型安全的的关系,以及两者为何重要
其中可解释性的研究流程和一些我们常见的模型概念解释比较有意思
可解释工具链的核心目标是绘制一张从「输入提示 A」到「输出文本 B」的完整“思维流程图(flowchart)”。
研究流程主要分为五步:
数据采样:向模型投喂多样化提示(对话、代码、诗歌等),记录每一层激活。
特征分解:利用聚类、稀疏编码将上亿维激活压缩成可人类理解的「概念向量」。
概念标注:通过统计「何时点亮」的方法,为向量贴上“咖啡”“Golden Gate Bridge”“拍马屁式赞美”等标签。
因果干预:人为增减激活强度,观察输出如何改变,以验证标签的因果性而非仅是相关性。
流程可视化:把多层概念依时间顺序连线,形成人读得懂的步骤图,类似可追踪代码调用栈。
团队将该系统比喻为“显微镜”,但也坦言显微镜 still 有极限:目前只能解释约 20% 的决策路径;大模型(Claude 4 级别)的规模更让工具疲于奔命。
视频里面列举了多条令人会心一笑的内部概念:
“拍马屁式赞美(sycophantic praise)”:只要上下文出现过度恭维,某一簇神经元就高亮,驱动输出“绝妙”“天才”等华丽辞藻。
Golden Gate Bridge 表征:无论输入是描述驾驶跨桥场景的文字,还是桥的图片标注,甚至仅 “金门(Golden Gate)”的暗示,该向量皆被触发,说明模型形成了跨模态、抽象且稳健的“地标”概念。
“6 + 9” 加法电路:凡遇到以 6 结尾与 9 结尾数字相加,无论在算式、参考文献年份 (1959+6)、还是故事情节中的门牌号相加,都会走进同一条计算通路,证实模型使用的是“通用算子”而非死记硬背。
Bug Tracker:当阅读代码时,特定神经簇负责标记潜在错误并在后续回答中引用,显示出“延迟呼应”能力。
这些案例共同反驳了“模型只是训练数据记忆库”的观点:若仅靠记忆,模型不可能在从未见过的跨域场景中复用同一逻辑通路。
研究员进一步发现,模型在处理长篇故事人物关系时,会给首位出现的角色分配“编号概念”,其后所有动作、情绪均与该编号绑定,从而维持叙事一致性;此策略与人类“变量绑定”高度相似,却是自发涌现。
具体包括:智能体任务与工具调用、推理与上下文复用、代码生成与协作、可控性与指令遵循、Markdown 格式化、元提示(Metaprompting)代码工具与环境说明
基本涉及了 AI 产品和 Agent 构建的各个方面,我总结了一下还是推荐看原文👇
智能体任务与工具调用
Agentic Workflow Predictability:推荐使用 Responses API 持续保存推理过程,提升智能体应用效率。
Agentic Eagerness:可通过调整 `reasoning_effort` 参数和提示词,控制模型的主动性。
降低主动性:使用低 `reasoning_effort`,明确探索范围和早停标准,减少不必要的工具调用和上下文收集。
提高主动性:提升 `reasoning_effort`,鼓励模型持续完成任务,减少向用户确认或交还的频率。
Tool Preambles:通过提示词引导模型在工具调用前,简明扼要地重述用户目标、规划执行步骤。
推理与上下文复用
Reasoning Effort:可根据任务复杂度调整推理深度。复杂任务建议高推理力度,并将任务拆分为多个步骤分批完成。
Responses API:推荐使用 Responses API 传递前序推理结果,节省 token。
代码生成与协作
前端开发推荐栈:GPT-5 在前端开发表现优异,推荐使用 Next.js、React、Tailwind CSS、shadcn/ui 等主流框架和组件库。
零到一应用生成:通过提示模型自建评估标准,并据此反复自我优化,提升一次性生成应用的质量。
代码风格与规范:明确代码编辑规则、工程原则、目录结构和 UI/UX 最佳实践,确保模型生成代码与现有项目风格一致。
协作编码案例:通过参数和提示词双重控制,平衡输出简洁性与代码可读性,鼓励模型主动提出变更并让用户审核。
可控性与指令遵循
Steerability:GPT-5 对提示词的可控性极高,可控制输出长度、风格和工具调用行为。
Verbosity:新增 `verbosity` 参数,控制最终答案的长度。可在提示词中覆盖默认设置,实现场景化定制。
Instruction Following:GPT-5 对提示词指令极为敏感,需避免矛盾或模糊的指令。