华人团队迷你GPT-4抢跑看图聊天：OpenAI有的它都有 服务器已被挤爆

华人团队迷你GPT-4抢跑看图聊天：OpenAI有的它都有服务器已被挤爆传一张商品效果图，就可以让AI写一篇带货文案。手绘一个网页，可以给出对应的HTML代码：除了生产力拉满，也支持根据常识推理图上内容是否合理、解释表情包为什么好笑，以及看截图找电影等娱乐玩法。可以说，GPT-4发布时展示过的功能，MiniGPT-4基本也都有了。这下网友直接把Demo服务器挤爆，开发团队连开4台备用服务器，都有几十人在排队。不等OpenAI了，现在就能玩除了研究团队给出的示例，网友也用MiniGPT-4玩出了各种花样有人上传自己画的画，让AI评价评价。有人上传一张从车道拍摄的飞机坠毁瞬间，让MiniGPT-4尽可能详细地描述，并思考自动驾驶AI能不能理解这个场面。做到这么好的效果，MiniGPT-4实现起来却并不复杂。把图像编码器与开源语言模型Vicuna（小羊驼）整合起来，并且冻结了两者的大部分参数，只需要训练很少一部分。传统预训练阶段，使用4张A100在10个小时内就可完成，此时训练出来的Vicuna已能够理解图像，但生成能力受到很大影响。为解决这个问题，团队让MiniGPT-4与ChatGPT合作创建了3500个图像文本的高质量数据集，也一并开源。用新的数据集微调可以显著提高模型的生成可靠性和整体可用性，而且计算效率很高，使用单个A100只需要7分钟。并且团队正在准备一个更轻量级的版本，部署起来只需要23GB显存。也就是消费级显卡中拥有24GB显存的3090或4090就可以本地运行了。MiniGPT-4开发团队来自KAUST（沙特阿卜杜拉国王科技大学），包括4位华人成员和他们的导师MohamedElhoseiny。两位正在读博的共同一作还在GitHub页面上特别标注正在找工作。有意向的公司要抓紧抢人了~在线Demo：https://minigpt-4.github.io开源代码：https://github.com/Vision-CAIR/MiniGPT-4论文：https://github.com/Vision-CAIR/MiniGPT-4/blob/main/MiniGPT_4.pdf...PC版：https://www.cnbeta.com.tw/articles/soft/1355731.htm手机版：https://m.cnbeta.com.tw/view/1355731.htm

新版 ChatGPT 可同时访问所有 GPT-4 工具

新版ChatGPT可同时访问所有GPT-4工具OpenAI计划推出一种使用多模式GPT-4的新方法，无需切换即可访问所有工具，并提供更多文档分析功能。许多ChatGPTPlus用户在X上分享的截图显示了PDF和文档分析的新功能以及"所有工具"功能。所有工具"可让用户访问GPT-4的所有功能，而无需在不同功能之间切换。此举被誉为一次重大飞跃，它超越了基于文本的查询，推动了生成式人工智能功能的发展。现在，用户可以上传一张图片，让DALL-E3做出回应，为他们的工作流程增添了新的维度。随着越来越多的用户开始使用新的多模态功能，更多关于如何将所有GPT-4工具结合在一起使用的例子也将出现。有趣的是，GPT-4的所有工具功能似乎并不包括ChatGPT插件。一些新功能可能会使许多第三方ChatGPT插件过时。这可能是为了简化用户体验而精心策划的举动，同时也是对以往提供类似功能的第三方插件的一种限制。在系统中直接分析PDF和其他文件的功能有效地消除了对第三方ChatGPT插件的需求，而这些插件一直以来都在填补这些空白。通过在最新版本的ChatGPT中整合这些功能，OpenAI回应了用户的反馈意见，创建了一个不依赖外部功能的更强大的工具。除了用户可以访问GPT-4AllTools之外，其他人也注意到了更近的知识截止日期。最新消息发布于OpenAI下周的DevDay大会之前，预计该公司将在会上与开发者探讨新工具。...PC版：https://www.cnbeta.com.tw/articles/soft/1393089.htm手机版：https://m.cnbeta.com.tw/view/1393089.htm

GPT Migrate，一个基于 GPT-4 的大胆尝试，让 AI 重写整个项目代码

GPTMigrate，一个基于GPT-4的大胆尝试，让AI重写整个项目代码使用可以将原有的Python项目，用JavaScript重写为新项目，AI会自动帮你生成新的目录结构、文件命名、项目依赖包。https://github.com/0xpayne/gpt-migrate来自：雷锋频道：@kejiqu群组：@kejiquchat投稿：@kejiqubot

AIGC Weekly #14更新了，上周又是疯狂的一周，本期主要介绍了我如何用GPT-4帮忙构建自动化程序，ChatGPT插件

AIGCWeekly#14更新了，上周又是疯狂的一周，本期主要介绍了我如何用GPT-4帮忙构建自动化程序，ChatGPT插件系统等其他动态、一堆非常值得阅读的内容。下面是上周一些行业动态和产品推荐，更多详细的内容可以去图里的竹白查看：https://op7418.zhubai.love/posts/2252030503228076032本周精选：我在GPT-4的帮助下创建了一个自动信息收集机器人：https://mp.weixin.qq.com/s?__biz=MzU0MDk3NTUxMA%3D%3D&mid=2247483868&idx=1&sn=82ef05f07a6a8a63e434b5bff69c5fbb&chksm=fb304925cc47c0337f4127e9199b0e6907dff0c01f2912a9f041e737ff25d738787ef7d52ad3&token=1127584867&lang=zh_CN#rdOpenAI发布ChatGPT插件系统：https://openai.com/blog/chatgpt-plugins这里加入等待列表：https://openai.com/waitlist/plugins这篇文章详细测试了ChatGPT插件系统的能力：https://andrewmayneblog.wordpress.com/2023/03/23/chatgpt-code-interpreter-magic/lencx写的插件开发指南：https://mp.weixin.qq.com/s/AmNkiLOqJo7tEJZPX34oegWolfram插件使ChatGPT的数学能力达到了匪夷所思的地步：https://writings.stephenwolfram.com/2023/03/chatgpt-gets-its-wolfram-superpowers/Github发布GitHubCopilotX：https://github.blog/2023-03-22-github-copilot-x-the-ai-powered-developer-experience/CopilotChat：不仅仅是一个聊天窗口。它可以识别开发人员键入的代码、显示的错误消息，并将其深度嵌入到IDE中。

我用GPT-4帮忙写了一个Midjourney增强插件，下面是插件的使用方式介绍、我总结的GPT-4使用技巧以及产品实现的具体过

我用GPT-4帮忙写了一个Midjourney增强插件，下面是插件的使用方式介绍、我总结的GPT-4使用技巧以及产品实现的具体过程，还有如何用AI工具帮助宣传产品。详细的过程可以去这里查看：https://mp.weixin.qq.com/s/A3qKAYjO6JJmfoDEOtjdPg插件已经开源在这里下载：https://github.com/op7418/Mijourney-enhanced插件介绍：像我这种英语不好的人使用Midjourney的时候一个很痛的痛点就是提示词的翻译，使用正常的翻译工具要不只能一个词一个词翻译，要不就只能整段翻译。所以就有了这个插件，主要功能是按照提示词作者原有的语义分割自动翻译提示词的部分，同时可以快速复制原有提示词。总结的GPT-4编码技巧信息输入：-提前自己梳理需求内容和目标，最好在别的地方先写好在粘贴进去。像平时写PRD那样，不要偷懒，你偷懒他就会教你做人，特别是复杂任务。-按照正常的软件开发角色的和流程给他设定角色，不同角色需要做的事情开多个聊天窗口做，比如先让它输出整体架构再去另一个聊天里输出具体代码，甚至前端和后端分开，每个模块分开输出。-详细的描述需求包括需求的背景，你希望实现的方式涉及到了哪些外部软件的联动，各个内容之间交互方式是什么样的。期望它输出的结果：包含的内容和要求，主要是明确需要他产出的内容。-你对内容的要求：明确一些具体的要求包括解释每一个方案选择的具体原因和相关文档、代码结构、每个关键的代码结构都要加上注释等。优化调整：-如果在沟通过程中频繁出现问题可以采取以下方式：-一次只实现一个模块或者一个功能渐进式的推进项目，降低问题的复杂程度；-当输出结果频繁出现问题的时候重新审视你自己给出的信息，包括是否存在描述的不够全面或者有歧义；-可以从其他渠道获取一些信息，比如要求GPT给你一些官方文档的地址去查看；-如果遇到了GPT记忆的内容出现问题你需要重新完整的将现在的内容跟他同步一次。实现过程开始我只是粗略的跟他说了一下需求。它就输出了具体需要做的步骤和具体代码，包括追问你的需求细节，查看开发文档的建议，以及项目文件结构，每个文件的具体代码。按照他的指导创建了文件夹、文件和需要的图标，并将代码粘贴了进去。我按照他给的方式开始在浏览器上运行插件开始调试果不其然开始报错了，开始不断的沟通修复问题。

▶ GPT 4: https://openai.com/research/gpt-4

▶GPT4:https://openai.com/research/gpt-4▶APIWaitlist：https://openai.com/waitlist/gpt-4-api▶GPT-4DeveloperLivestreamhttps://m.youtube.com/watch?v=outcGtbnMuQ看图……（后面补了个P9，直播里的手稿拍照转html）邮件原文（翻译byChatGPT）我们已经创建了GPT-4，这是我们最强大的模型。我们今天开始向API用户推出该模型。请于今天（3月14日）下午1点（太平洋时间）加入我们，观看GPT-4的现场演示。▶关于GPT-4由于其更广泛的通用知识和先进的推理能力，GPT-4可以更准确地解决困难问题。▶您可以通过以下方式了解更多信息：·GPT-4概述页面以及早期客户使用该模型构建的内容。·博客文章详细介绍了该模型的功能和局限性，包括评估结果。（一开始的那个链接）▶可用性·API等待列表：请注册我们的等待列表，以获得受限制的GPT-4API访问权限，该API使用与gpt-3.5-turbo相同的ChatCompletionsAPI。我们将从今天开始邀请一些开发人员，并逐渐扩大可用性和速率限制，以平衡容量和需求。（我也放在前面了）·优先访问：开发人员可以通过为OpenAIEvals贡献模型评估来获得GPT-4的优先API访问权限，这将有助于我们改进该模型，使其对所有人都更好。https://github.com/openai/evals·ChatGPTPlus：ChatGPTPlus订户将可以在chat.openai.com上使用GPT-4，并获得动态调整的使用上限。由于我们的容量非常有限，因此使用上限将取决于需求和系统性能。API访问仍将通过等待列表进行。▶API定价·具有8K上下文窗口（约13页文本）的gpt-4将每1K提示令牌收取0.03美元，每1K完成令牌收取0.06美元。·具有32K上下文窗口（约52页文本）的gpt-4-32k将每1K提示令牌收取0.06美元，每1K完成令牌收取0.12美元。▶直播