Business
Jobs
  • About Us
  • Solutions
    • Job Postings
      Post your job and receive qualified candidates in 48h.
    • Candidate Assessments
      500+ technical and psychological tests, plus anti-fraud.
    • Headhunting
      Tailor-made executive search from start to finish.
    • Payroll + EOR
      Payroll dispersal and EOR across 15+ LATAM countries.
  • Pricing
  • Jobs

0

113
Views
La codificación de oraciones con el modelo de Setenece BERT en FastAPI cambia el resultado de los resultados con scripts de Jupyter y python

Sistema

  • Macbook Pro
  • OSX 10.15.5 (Catalina)
  • Docker versión 19.03.12, compilación 48a66213fe

Biblioteca

  • uvicornio == 0.11.8
  • fastapi==0.61.0
  • antorcha == 1.6.0
  • transformadores==3.0.2
  • transformadores de oraciones == 0.3.2
  • scikit-learn==0.20.0
  • scipy==1.4.1
  • pandas==0.23.4
  • jupyter==1.0.0

Detalle

Usé Colaboratory para ajustar Setence BERT y guardar ese modelo. Luego fui local y construí un entorno con Docker que incluía jupyter y FastAPI, y en ese entorno pude confirmar que el modelo que guardé con Jupyter, lanzado en Docker, arrojó los mismos resultados de estimación que en Collaboratory. Cuando usé ese modelo, obtuve resultados diferentes cuando usé FastAPI iniciado en el mismo entorno de Docker que Jupyter. Todo el texto ingresado en este flujo es el mismo.

El análisis mostró que SentenceTransformer cargó el modelo y luego lo codificó, y descubrió que calculaba incrustaciones completamente diferentes.

Gracias a tu consejo.

over 4 years ago · Santiago Trujillo
1 answers
Answer question

0

lo siento, uso el modelo japonés pero olvidé traducir el BertTokenizer predeterminado a BertJapaneseTokenizer.

Cambiar tokenizador predeterminado solucionó este problema.

over 4 years ago · Santiago Trujillo Report
Answer question
Find remote jobs

Discover the new way to find a job!

Top jobs
Top job categories
Business
Post vacancy Pricing Sales
Legal
Terms and conditions Privacy policy
© 2026 PeakU Inc. All Rights Reserved.
Andres GPT
Show me some job opportunities
There's an error!