ChatGPT初体验

2023-02-03  本文已影响0人  三更冷

调用 ChatGPT 对话模型的接口API,测试一下 ChatGPT 在编码辅助上、解决编程问题的能力。

测试一:找出程序的bug

先给出一段向集合添加新元素的代码,但会抛并发修改异常:


发送请求

基于官方的轮子略作修改:https://beta.openai.com/docs/libraries/community-libraries

import cn.hutool.http.HttpRequest;
import com.alibaba.fastjson.JSON;
import com.google.common.collect.Lists;
import lombok.Builder;
import lombok.Data;
import lombok.extern.slf4j.Slf4j;
import org.junit.Test;

import java.util.List;

@Slf4j
public class ChatGPTDemo {

    @Test
    public void test() {
        String prompt = "这是一段JAVA代码,请找出代码中的 bug 并且描述 bug 及原因,最后自动修复 public class Demo { public static void main(String[] args) { List<Integer> list = Stream.of(1, 2, 3, 4, 5).collect(toList()); for (Integer i : list) { if(i == 1){ list.add(6); } } } }";

        String token = "填写自己注册的token";
        //发送post请求
        String postResult = HttpRequest.post("https://api.openai.com/v1/completions")
                //设置请求头
                .header("Content-Type", "application/json")
                .header("Authorization", "Bearer " + token)
                //传输参数
                .body(JSON.toJSONString(Completions.builder()
                        .model("text-davinci-003")
                        .prompt(prompt)
                        .max_tokens(2048)
                        .temperature(0)
                        .top_p(1)
                        .frequency_penalty(0)
                        .presence_penalty(0.6)
                        .stop(Lists.newArrayList(" Human:", " AI"))
                        .build()))
                .execute()
                .body();

        log.info("postResult: {}", postResult);

        ChatGPT chatGPT = JSON.parseObject(postResult, ChatGPT.class);
        for (ChatGPT.Choices choice : chatGPT.getChoices()) {
            System.out.println(choice.getText());
        }
    }

    @Data
    public static class ChatGPT {
        private String id;
        private String object;
        private long created;
        private String model;
        private List<Choices> choices;
        private Usage usage;

        @Data
        public static class Choices {
            private String text;
            private int index;
            private String logprobs;
            private String finish_reason;
        }
        @Data
        public static class Usage {
            private int prompt_tokens;
            private int completion_tokens;
            private int total_tokens;
        }
    }

    @Data
    @Builder
    public static class Completions {
        private String model;
        private String prompt;
        private int max_tokens;
        private double temperature;
        private int top_p;
        private int frequency_penalty;
        private double presence_penalty;
        private List<String> stop;
    }
}

打印返回结果

bug:在循环中修改集合内容,导致循环出现异常。
原因:在循环中修改集合内容,会导致集合的大小发生变化,从而导致循环出现异常。
自动修复:
public class Demo {
    public static void main(String[] args) {
        List<Integer> list = Stream.of(1, 2, 3, 4, 5).collect(toList());
        List<Integer> tempList = new ArrayList<>(list);
        for (Integer i : tempList) {
            if(i == 1){
                list.add(6);
            }
        }
    }
}

评价:描述正确,方法正确,复制出来一个新集合能成功添加。

测试二:编写算法

问题:实现Java版本冒泡排序算法的代码和执行样例

它给的答案:

public class BubbleSort {
    public static void main(String[] args) {
        int[] arr = {3, 9, -1, 10, 20};

        //外层循环控制排序趟数
        for (int i = 0; i < arr.length - 1; i++) {
            //内层循环控制每一趟排序多少次
            for (int j = 0; j < arr.length - 1 - i; j++) {
                if (arr[j] > arr[j + 1]) {
                    int temp = arr[j];
                    arr[j] = arr[j + 1];
                    arr[j + 1] = temp;
                }
            }
        }

        System.out.println("排序后的数组:");
        for (int i = 0; i < arr.length; i++) {
            System.out.print(arr[i] + " ");
        }
    }
}
执行样例:
排序后的数组:
-1 3 9 10 20 

评价:方法正确,也能通过运行。

测试三:回答SQL题

问题如下:

已知有如下4张表:

学生表:student(学号,学生姓名,出生年月,性别)
create table Student(Sid varchar(6), Sname varchar(10), Sage datetime, Ssex varchar(10));

成绩表:score(学号,课程号,成绩)
create table SC(Sid varchar(10), Cid varchar(10), score decimal(18,1));

课程表:course(课程号,课程名称,教师号)
create table Course(Cid varchar(10),Cname varchar(10),Tid varchar(10));

教师表:teacher(教师号,教师姓名)
create table Teacher(Tid varchar(10),Tname varchar(10));


请查询出只选修两门课程的学生学号和姓名;查询成绩表中各科成绩前两名的信息以及排名

它给的答案:

查询出只选修两门课程的学生学号和姓名:
SELECT s.Sid,s.Sname 
FROM Student s 
WHERE (SELECT COUNT(*) FROM SC WHERE s.Sid=SC.Sid) = 2;

查询成绩表中各科成绩前两名的信息以及排名:
SELECT sc.Sid,sc.Cid,sc.score,RANK() OVER(PARTITION BY sc.Cid ORDER BY sc.score DESC) AS rank 
FROM SC sc 
WHERE RANK() OVER(PARTITION BY sc.Cid ORDER BY sc.score DESC) <= 2;

评价:前半正确,后半错误(不能在WHERE子句中使用窗口函数)。再试了下依旧错误,还错的更远了?返回如下:

SELECT s.Sid,s.Sname,c.Cname,sc.score,
RANK() OVER(PARTITION BY c.Cname ORDER BY sc.score DESC) AS rank 
FROM Student s,SC sc,Course c 
WHERE s.Sid=sc.Sid AND sc.Cid=c.Cid 
ORDER BY c.Cname,sc.score DESC;

正确sql应该如下:

SELECT * from 
(SELECT  Sid,Cid,score,rank() over(PARTITION by Cid ORDER BY score desc) as rank_total FROM SC ) A 
where A.rank_total<= 2;

不过 ChatGPT 还是非常强大的,已经能解决很多初级编程问题了,某种程度可以说颠覆搜索引擎!未来发展前景恐怕非常广阔。

最后做个小结

它是对现有海量存量数据进行的搜索、加工、排列和组合,可以完成很多通用的、重复度高的、格式固定的任务,从而减轻我们的工作量,但它不能超出知识边界的束缚,也就带来不了知识的增量,错误的输出还需要人为纠正、人工标注。

之前 Stack Overflow 宣布临时禁止 ChatGPT 生成答案,就恰巧暴露了它某些时候生成代码、解决方案不可靠甚至有害的一面。如若被它成功制造了一大堆“以假乱真”、“真假掺半”的文本到 Stack Overflow,可以证实AI模型训练的“成功”,但也就蒙蔽了需要解答释疑、同时分辨能力不强的那些人,最终降低论坛质量。

上一篇下一篇

猜你喜欢

热点阅读