← Vissza a listához
Állás

Vezető adattudós - Agent Builder

Elastic
Data Engineer • Helyszíni • Teljes munkaidő • 📍 Portugal
📄 Eredeti hirdetés megtekintése (EN)

Senior, alkalmazott adattudományi vezetői pozíció az Elastic Search Conversational Experiences csapatában, amely a vállalat beszélgetes es ugynok-alapu keresoplatformjanak minosegi retegét építi. A feladat a chat-minoseg ertekelesenek, javitasanak es skalazasanak technikai iranyitasa a RAG, ugynokok, eszkozok, visszakereses es hivatkozasok teruleten az Elasticsearch adatain. A szerepkor kiterjed az ertekelesi strategiara, prototipizalasra, roadmap-befolyasolasra es mentoralasra.

Stack

elasticsearchPandasPythonPyTorch

Feladatok

  • ▹A beszélgetes-alapu es ugynoki kereses ertekelesi strategiajanak meghatarozasa (offline/online ertekeles, golden datasetek, rubrikak, LLM-as-judge kalibracio, megalapozottsag- es hivatkozas-ellenorzes, A/B tesztek)
  • ▹Minosegi metrikak es donteshozatali keretrendszerek tervezese RAG-hoz, ugynokokhoz, eszkozokhoz, modellvalasztashoz, ugynok-utvalasztashoz es koltseg/kesleltetes kompromisszumokhoz
  • ▹Visszakeresesi es ujrarendezesi megkozelitesek epitese es osszehasonlitasa (ritka es suru visszakereses, vektoros kereses, lekerdezes-ertelmezes, szemantikus atiratok, kontextus-gazdagitas)
  • ▹Kiserleti eredmenyek atforditasa termek- es uzleti dontesekre a modellek, keresutvalasztas, kitett eszkozok es ugynok-testreszabas teren
  • ▹Egyuttmukodes a fejlesztokkel az ertekelesi pipeline-ok, telemetria, dashboardok, CI-vedovonalak es regresszio-detektalas eles uzembe allitasaban
  • ▹Adattudosok es mernokok mentoralasa kiserlettervezesben, ertekelesi modszertanban es statisztikai szigorban

Elvárások

  • ▹Melyrehato szakertelem az LLM-ertekelesi modszertanban es statisztikai szigorban
  • ▹Tapasztalat RAG, ugynokok, eszkozok, visszakereses es ujrarendezes teruleten (ritka/suru visszakereses, vektoros kereses)
  • ▹Kepesseg minosegi metrikak es donteshozatali keretrendszerek tervezesere LLM-alapu rendszerekhez
  • ▹Tapasztalat ertekelesi pipeline-ok, telemetria es regresszio-detektalas eles uzemeltetes
  • ▹Eros kommunikacio a termek-, mernoki es vezetoi erintettekkel

Előny

  • ▹Tapasztalat multimodalitassal beszélgetes-alapu rendszerekben
  • ▹Ugynok-vezerelt vizualizaciok keszitese adatplatformok felett
  • ▹Tapasztalat ervelesi strategiakkal es eszkozvalasztasi szabalyokkal

Soft skillek

Technikai vezetes es iranymeghatarozasA kompromisszumok vilagos kommunikaciojaMentoralas es coachingKomfort a ketertelmu, ujszeru problemakkal
Nyelvtudás: angol