AIGC（生成式AI）试用 0 — 如何测试此类应用

0. 起因

• RPA主导的机器人流程自动化风头正劲
• AI由来已久
• 生成式AI正在改变着工作和生活的方式
• 生成式AI工具不断更新换代
• 思考的问题，生成式AI：
  – 能实现什么？
  – 不同工具间的区别？
  – 如何测试此类工具？

似乎想的有点多、有点大。何是结果？何时是结束？
不论深浅，不妨试着学起来，先做起来，连走边看。

1. 几个概念

• AI
  – 人工智能，Artificial Intelligence
  – 研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统
  – 模拟人脑思考？
• AIGC
  – 生成式人工智能，Artificial Intelligence Generated Content
  – 核心思想是利用人工智能算法生成具有一定创意和质量的内容
  – 基于算法、模型、规则
  – 生成文本、图像、视频、音频
• ChatGPT
  – 聊天生成式预训练变换模型，Chat Generative Pre-trained Transformer
  – AIGC具体实现的一个产品
  – OpenAI 研发的一款聊天机器人程序

— 来源，百度百科

2. 测试目的

• 对比生成式AI查询准确性
• 对比生成式AI对未知问题处理
• 同一问题不同提问方式处理结果对比

3. 测试环境

• CSDN创作助手
• 文心一言

4. 测试方法

• 文本生成
• 设定主题
• 提问查询、来篇短文
• 对比结果：实战 / 经验 / 百度 / 必应 / 谷歌 验证测试结果

5. 测试数据

• 基本查询
• 胡言乱语
• 专业主题
• 模糊大纲 -> 精细大纲
• 简单 -> 复杂
• 桌面小程序
• C/S桌面程序开发
• B/S应用程序开发
• 手机移动应用开发
• 文档写作
• 。。。。。。

6. 测试输出

• 学会使用工具
• 应用结果对比
• 不知道该是什么。。。。。。