Jyong 7 місяців тому
батько
коміт
f77f7e1437
1 змінених файлів з 4 додано та 1 видалено
  1. 4 1
      api/core/rag/splitter/fixed_text_splitter.py

+ 4 - 1
api/core/rag/splitter/fixed_text_splitter.py

@@ -88,7 +88,10 @@ class FixedRecursiveCharacterTextSplitter(EnhanceRecursiveCharacterTextSplitter)
                 break
         # Now that we have the separator, split the text
         if separator:
-            splits = text.split(separator)
+            if separator == " ":
+                splits = text.split()
+            else:
+                splits = text.split(separator)
         else:
             splits = list(text)
         # Now go merging things, recursively splitting longer texts.