]> git.ipfire.org Git - thirdparty/rspamd.git/commitdiff
[Minor] Remove top_p reduce temperature to 0
authorVsevolod Stakhov <vsevolod@rspamd.com>
Mon, 22 Jul 2024 12:06:51 +0000 (13:06 +0100)
committerVsevolod Stakhov <vsevolod@rspamd.com>
Mon, 22 Jul 2024 12:06:51 +0000 (13:06 +0100)
conf/modules.d/gpt.conf
src/plugins/lua/gpt.lua

index 7a2e11d40060a235420a3e5c9e33a010334082f4..eac9952e5c0f1db8e5ee0346f3be12249f723dee 100644 (file)
@@ -22,9 +22,7 @@ gpt {
   # Maximum tokens to generate
   max_tokens = 1000;
   # Temperature for sampling
-  temperature = 0.7;
-  # Top p for sampling
-  top_p = 0.9;
+  temperature = 0.0;
   # Timeout for requests
   timeout = 10s;
   # Prompt for the model (use default if not set)
index 6adbce3bf5e157bc3cdcb01f2393df3958e43c73..046fe5dd78bf610acfd4a9c42cbf913a2a3ab8c8 100644 (file)
@@ -31,9 +31,7 @@ gpt {
   # Maximum tokens to generate
   max_tokens = 1000;
   # Temperature for sampling
-  temperature = 0.7;
-  # Top p for sampling
-  top_p = 0.9;
+  temperature = 0.0;
   # Timeout for requests
   timeout = 10s;
   # Prompt for the model (use default if not set)
@@ -73,8 +71,7 @@ local settings = {
   api_key = nil,
   model = 'gpt-3.5-turbo',
   max_tokens = 1000,
-  temperature = 0.7,
-  top_p = 0.9,
+  temperature = 0.0,
   timeout = 10,
   prompt = nil,
   condition = nil,
@@ -276,7 +273,6 @@ local function openai_gpt_check(task)
     model = settings.model,
     max_tokens = settings.max_tokens,
     temperature = settings.temperature,
-    top_p = settings.top_p,
     messages = {
       {
         role = 'system',