Startseite Erkunden Hilfe
Anmelden
weaviate
/
transpordi_artiklid
4
0
Fork 0
Dateien Issues 0 Pull-Requests 0 Wiki

Pythoni deepseek kood transpordiartiklite salvestamiseks weaviate andmebaasi

Branch: master
Branches Tags
transpordi_arti...
ZIP TAR.GZ
ardo 31f98e8dfe Pisimuudatused vor 3 Monaten
fetch_articles d930b88da0 salvestamise asukoha muudatus vor 3 Monaten
jupyter 31f98e8dfe Pisimuudatused vor 3 Monaten
src 31f98e8dfe Pisimuudatused vor 3 Monaten
.env 31f98e8dfe Pisimuudatused vor 3 Monaten
.gitignore 6d10dc7c3a täiendus vor 3 Monaten
LICENSE d02ffb68de Initial commit vor 4 Monaten
LOEMIND.md ca37369b2b Vahetulemus 5-st 3 artikli import korras vor 4 Monaten
LOEMIND_CURL.md f5781e4a64 faili värskendus vor 3 Monaten
LOEMIND_GIT.md ca37369b2b Vahetulemus 5-st 3 artikli import korras vor 4 Monaten
README.md 1289e7e11c päringute tegemine weaviate'st vor 3 Monaten
check_weaviate.py 4f359eba6c Artiklite näidispäring baasist vor 4 Monaten
näidispäringud.txt 25a68f5804 json to markdown vor 3 Monaten
peamine.py 99161efbfb Initial commit vor 4 Monaten
query_client.py 25a68f5804 json to markdown vor 3 Monaten
recreate_schema.py ca37369b2b Vahetulemus 5-st 3 artikli import korras vor 4 Monaten
requirements.txt ca37369b2b Vahetulemus 5-st 3 artikli import korras vor 4 Monaten
save_articles_to_pdf.py f5781e4a64 faili värskendus vor 3 Monaten

README.md

Teadusartiklite Töötlussüsteem

Süsteem teadusartiklite automaatseks töötlemiseks, analüüsiks ja salvestamiseks Weaviate'i baasi.

Funktsioonid

  1. PDF töötlus: Automaatne tekstieraldus ja struktureerimine
  2. DeepSeek analüüs: Põhjalike kokkuvõtete loomine eesti keeles
  3. Võtmesõnade eraldamine: Olulisemate mõistete identifitseerimine
  4. Embeddingu loomine: SentenceTransformers abil semantiliste vektorite genereerimine
  5. Weaviate'i integreerimine: Struktureeritud salvestamine ja otsing

Paigaldus

  1. Klooni repository:

    git clone https://gots.odamus.com/weaviate/transpordi_artiklid.git
cd transpordi_artiklid

Artiklite salvestamine pdf kataloogist andmebaasi

python peamine.py

Artiklite andmebaasi sisu pärimine

Markdown (vali CTRL+SHIFT+P ja otsi pdf, siis saad tesendada pdf-ks)

python fetch_articles/fetch_and_convert.py

Päringud

Interaktiivne režiim

python query_client.py --interactive

Üksik päring

python query_client.py --query "Kuidas parandada teede ohutust?"

Päringute failist

python query_client.py --file näidispäringud.txt

Tehniline vastus semantilise otsinguga

python query_client.py --query "transpordimudelid" --type semantic --context technical