Commit Graph

6 Commits

Author SHA1 Message Date
e339bfab07 [ADD]根据中文标点符号进行trunk.
可将chunking_by_token_size的实现改为: return chunking_by_chinese_splitter(content, overlap_token_size, max_token_size, tiktoken_model)
2024-11-17 12:31:50 +08:00
3970233c36 使用cursor加注释。 2024-11-16 11:59:20 +08:00
6969e4afc1 使用cursor加注释。 2024-11-16 11:40:45 +08:00
c8ee7286cb lightrag.py使用通义灵码加注释。 其他三个文件使用cursor加注释。 2024-11-16 11:29:02 +08:00
c0fa4da53d github官方项目 2024/11/12 commit: 2a13bf98331fa51babc3ac76b649068157981b57 2024-11-16 11:26:57 +08:00
whz
687b8a79ec Initial commit 2024-11-16 11:17:47 +08:00