Part 1 — 背景
背景 — GPT是什么?
由来:
生成式预练习:与一种叫做变形器Transformer的模型结构相结合,就成了 Generative Pre-trained Transformer,取三个字母缩写,便是 GPT。
AI相关的产品:
- chatgpt
- DALLE 2:openai.com/dall-e-2/ 这是一款图像AI,主要功用有“依据案牍绘画”、“无限拓宽图像的边界”…
- CodeX:openai.com/blog/openai… 这是一款自然语言转化成代码的AI产品,它便是之前比较火的微软的GitHub Copilot的驱动模型。
- Midjourney
时间线:
Part 2 — 注册、运用
账号注册:
-
GPT:OpenAI 推出超神 ChatGPT 注册攻略来了
-
GPT订阅:国内开通Chat GPT Plus保姆级教程【典藏】
-
Google Bard:Google Bard(waitlist)
-
Microsoft Bing:zhuanlan.zhihu.com/p/610971881(waitlist)
-
文心一言:yiyan.baidu.com/welcome(waitlist)
-
360 GPT(暂未看到敞开体会)
运用办法:
- OpenAI Playground:
支撑的一些模型:
- GPT3.5/GPT4官网: chat.openai.com/chat
- 其他途径:NoFWL github.com/lencx/nofwl
V3.5与V4之间的差异
- GPT-4 比其前身 GPT-3.5 先进 10 倍,更准确和连接的响应;
- Token约束:GPT-4 的最大令牌约束为 32,000 个,GPT-3.5 的为4,000 个令牌;
- GPT-4能处理方言;
- GPT-4的编程才能
- 生成代码
- 处理error
- 优化代码
- 综合来自多个来历的信息来答复复杂的问题,供给更全面、更细致的答案;
- 能够生成具有更高连接性和创造力的故事、诗篇或散文;
- 处理复杂数学和科学问题的强壮才能。
API接入
- 官方(目前gpt4依然只有经过waitlist的用户能运用,官方支撑python、Ts,其他语言有社区完成,但安全性无确保 ):platform.openai.com/docs/api-re…
-
非官方:
- api2d:api2d.com/
- Node.js client:github.com/transitive-…
国内、国外模型:
-
国内
- 文心一言
- CSDN ChitGPT :so.csdn.net/so/search?t…
- 360红孩儿
- 微调(Fine Turn): github.com/THUDM/ChatG…
-
国外
- open ai
- bing
- google bard
- github.com/nomic-ai/gp… 依据meta开源模型LLaMa
- Colossal-AI 最接近gpt处理计划的完成:medium.com/@yangyou_be…
Part 3 – 运用、事例介绍
Openai fine-turn 和 embedding介绍;
- fine-turn:丢很多样例数据微调;
- embedding:树立索引,相似贴纸条,提示大语言模型做进一步处理;
链接:
- zhuanlan.zhihu.com/p/609359047;
- www.xiaoyuzhoufm.com/episode/641…
知识库
运用LLM去完成范畴/专业的知识库、机器人等运用,相关链接如下:
- grev:github.com/GerevAI/ger… (找到任何聊天记录、文档或代码片段)
- copilothub: app.copilothub.co/copilots
- bookai(书籍知识库): www.bookai.chat/
- Copilot For Docs (github Copliot X 进阶版)
- character(人物形象):beta.character.ai/
- web development:astro-labs.app/docs
- 依据LLM的技能文档实践:supabase.com/docs
- pdf版完成:www.weibo.com/1727858283/…
- markdown版完成:github.com/motifland/m…
- 抓取方针数据,依据内容答复(此处以某个人的悉数文章作为输入)github.com/mckaywrigle… twitter.com/mckaywrigle…
目前社区完成计划:
- 依据向量数据库与GPT3.5的通用本地知识库计划
-
gpt4-pdf计划:github.com/mayooear/gp…
- 链接:www.weibo.com/1727858283/…
-
文档检索完成计划:github.com/gannonh/gpt…
一些考虑:文档查找的未来
- 自然语言,不需要各种关键字反复试
- 没有语言障碍,中文输入也能够查找到英文结果
- 能够协助摘要摘要乃至直接生成代码
- 能依据错误信息协助debug
一些考虑:发展方向
- 横向扩展更大的知识库,更多的信息;
- 缓存查询;
- 用户体会改善。
编程相关
- 编程帮手:assistant.compsmatic.com/
- 基础Prompt:
Act as a senior developer, write very short comment for the following code:
-
编程场景:
-
通用:
https:///post/7199607659992907832#heading-32
- 技能完成Cover不住、获取技能计划
- 代码生成、代码优化
- 在github上找demo、找完成
- 供给测试用例
- 读源码
- 东西辅佐
-
AI to 页面 github.com/zckly/dynam…
- 无限翻滚列表
- 图片feed流
- 网站
-
gpt4编程(py爬虫):gist.github.com/hqman/62cdb…
-
-
东西类
- AI生成开发东西页面:github.com/zckly/dynam…
- 云开发自动生成代码:mp.weixin.qq.com/s/5N1mkyuja…
- 运用 GPT-4 自动化您的浏览器:github.com/TaxyAI/brow…
- 完成思路(后边会用到)
- 正则生成:regex.ai/?utm_source…
- shell指令: github.com/TheR1D/shel…
- 插件、开发环境
- Copilot X(waitlist): mp.weixin.qq.com/s/BAzOuxjUo…
- Cursor:www.cursor.so/
- Cursor是接入的GPT-4
- Cursor能支撑整个代码文件,它能够理解整个代码(长度约束肯定仍是有的)
- Cursor接入了ChatGPT,你能够针对当前代码去发问去debug,这在运行时遇到错误的时候非常有协助
- Cursor的代码重构(修改)体会很好,显示修改的部分,你能够挑选接受或者拒绝,尤其是代码
- CodeCursor:github.com/Helixform/C…
通用
-
Prompt生成类(生成内容的基础,发展出PE工程,专门对AI的)
- ClickPrompt(支撑多种依据 Prompt 的 AI 运用:www.clickprompt.org/zh-CN/click…
- 用GPT生成Prompts: github.com/jesselau76/…
- Prompt交易市场:promptbase.com/?continueFl…
- OpenPrompt:github.com/timqian/ope…
-
gpt浏览器插件:
- chatBox:github.com/josStorer/c…
-
作业套件:microsoft-365
-
风趣的小运用:
- 解析梦境AI: dreaminterpreter.ai/dreamer-map
- 动画生成: jitter.video/
- AI智能创造帮手 — 腾讯智影
- SpeechGPT:github.com/hahahumble/speechgpt
- 经过输入描绘语言构建3D国际: opus.ai/
- 文本直接生成视频: github.com/showlab/Tune-A-Video
插件 (目前只开发给了一部分plus用户运用):
介绍
已有插件列表:
- awesome-chatgpt-plugins:github.com/GerevAI/awe…
- ChatGPT 插件集市:github.com/harish-garg…
插件开发手册:
- platform.openai.com/docs/plugin…
插件事例:
- twitter-thread.com/t/164068083…
一些个人关于插件的引申考虑:
- 以后跟着时间的推移,互联网上的每个网站都会有一个API和一个ai-plugin.json文件,每个网站都会有一个ai.json文件,让我们经过AI直接和网站交互。
- 入口: PC时代 – 网站 移动端 – 运用 AI时代 – 智能署理
- 操作办法: 用户的运用需求 => AI转化为功用需求 => 调用对应插件;
- 信息分类
- feed流
- 主观操控的检索思路
- 交互性网站暴露AI.json交互;
- 信息/视频/图片 检索的才能大大上升
链接:
- mp.weixin.qq.com/s/mfmpTuoOu…
Part4 — 结合低码渠道考虑
文档帮手/客服
目前完成思路:
用 途:
-
内部文档:(输入集为渠道知识库、运用手册、API手册、QA等)
- 提高低码渠道开发、运用功率,用户体会更好;
- 跟着更多内容、QA的收录,才能会越来越强;
- 此处引用微博事例:
-
外部文档:microsoft、包括各大闻名NPM库房,eg:React
- 会将:官方文档 => 官方文档机器人
代码/编程
-
bff层:调用不同的服务接口进行聚合/过滤
- 自动生成bff事务代码
- 直接由gpt调用不同服务接口直接返回
- 逻辑编列
-
生成代码
- 通用性中心代码生成/集成单测/优化,确保质量;
- 高码类事务组件的基本模版生成。
-
编程帮手部分
- 将渠道自身文档、代码,如Schema/ts类型文件等文件作为输入,树立一个智能的编程帮手;
- 渠道才能查询,操作指南;
- 查询某个对象、类的办法、属性,比方需要知道某一模块有没有完成某个功用,或者要完成什么功用,可能选用什么样的办法;
- 渠道自身开发、高低码组件结合。
- 结合cursor或Copilot X插件
- 查询、定位问题,生成代码
- debug
- 将渠道自身文档、代码,如Schema/ts类型文件等文件作为输入,树立一个智能的编程帮手;
-
智能中台:由gpt识别自然语言,转化为对应东西的调用
- 接收用户自然语言指令
- 自动运用模版、组件,生成布局树、更改组件款式、prop;
- 对接编程辅佐东西,如编码转换、格局转换、生成正则等一系列
- 东西集网站:ai-bot.cn/
- sql东西:github.com/whoiskatrin…
- AI + RPA 完成某些流程自动化,如部署,发布
- 接收用户自然语言指令
-
作业辅佐部分
- 文档、会议等材料快速问答帮手:丢一个文档给gpt,完成快速了解某个问题、知识块、或者材料的中心内容;
- OA类接入(参考上面智能中台的运用);
- 邮件/文本纠错等一系列能够运用Prompt的才能(可运用微调为某一种措辞风格)
Part5 — 展望 & 未来
- gpt必将以智能帮手,集成一系列的第三方插件、服务的办法,充任个人作业、生活的强壮帮手;
- 以后事务类网站的交互、呈现办法会有更大的改动,但图片、视频feed的网站会愈加注重用户体会;
- 初期Prompt的质量很大程度决定了问答质量,后边跟着更多运用层范畴的产品出现,会下降运用难度,范畴会更垂。
- AIGC革新来了。
Part6 — 弥补链接
- gpt 运用哲学:mirror.xyz/0x17f3F8186…
本文很多内容引自大佬宝玉xp在微博上的分享内容、其他大佬播客等资料,并收拾、分析。