Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

有关数据处理器、知识图谱等并未上线。 #26

Open
2 tasks done
Joe-2002 opened this issue Mar 11, 2024 · 4 comments
Open
2 tasks done

有关数据处理器、知识图谱等并未上线。 #26

Joe-2002 opened this issue Mar 11, 2024 · 4 comments
Labels
enhancement New feature or request

Comments

@Joe-2002
Copy link

Checked other resources

  • I searched the Codefuse documentation with the integrated search.
  • I used the GitHub search to find a similar question and didn't find it.

Summary 💡

🗂️ Data Processor: 数据处理器,轻松完成文档载入、数据清洗,及文本切分,整合不同来源的数据。
🔤 Text Embedding & Index::文本嵌入索引,用户可以轻松上传文件进行文档检索,优化文档分析过程。
🗄️ Vector Database & Graph Database: 向量与图数据库,提供灵活强大的数据管理解决方案。
📝 Prompt Control & Management::Prompt 控制与管理,精确定义智能体的上下文环境。

Examples 🌈

No response

Motivation 🔦

No response

@lightislost
Copy link
Collaborator

数据处理器这块儿按text_splitter切分的能力是有的,可以支持一些通用文档的上传管理。
然后向量和图数据库目前是用在代码库上,没在RAG上进行透出,内部还在持续打磨这块工作,近期不会透出

@Joe-2002
Copy link
Author

数据处理器这块儿按text_splitter切分的能力是有的,可以支持一些通用文档的上传管理。 然后向量和图数据库目前是用在代码库上,没在RAG上进行透出,内部还在持续打磨这块工作,近期不会透出

希望优先考虑在RAG上使用,比较期待效果。
RAG也是最常用的大模型应用场景,其受数据处理和向量的影响较大,且知识图谱也是个不错的尝试。
望尽早支持,从年前观望到现在了。

@lightislost
Copy link
Collaborator

感谢关注这块儿的工作,这个是在做的,后面有能够放出的版本也会及时放出。

@lightislost lightislost added the enhancement New feature or request label Mar 12, 2024
@LiujunjieALiling
Copy link

@lightislost 请问这个 #37 关注一下呢,代码检索的时候周末避免这个问题呢

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
enhancement New feature or request
Projects
Status: Todo
Development

No branches or pull requests

3 participants