Abraxas-365 / Abraxas-365/langchain-rust

Add document loader

Offen
#19 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Rust
Sterne
1.3k
Forks
177
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

Add document loaders to make it easy to implement RAG.
- [x] Add markdown document loader
- [x] Add html document loader
- [x] Add support for CSV document loader
- [ ] Add file directory document loader. Highly suggest using https://opendal.apache.org here
- [x] add support for only office document loader. This allows us to use the conversion api to get text from doc/docx/pdf/xls/ppt/rtf files and can be selfhosted. https://api.onlyoffice.com/editors/conversionapi
- [x] Add support for native pdf document loader so it can be embedded. https://crates.io/crates/pdfium-render

Beitragsleitfaden

Beitragsleitfaden öffnen

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.