Publikation:

Demystifying the Embedding Space of Language Models

Lade...
Vorschaubild

Dateien

Zu diesem Dokument gibt es keine Dateien.

Datum

2021

Herausgeber:innen

Kontakt

ISSN der Zeitschrift

Electronic ISSN

ISBN

Bibliografische Daten

Verlag

Schriftenreihe

Auflagebezeichnung

URI (zitierfähiger Link)
DOI (zitierfähiger Link)
ArXiv-ID

Internationale Patentnummer

Angaben zur Forschungsförderung

Projekt

Open Access-Veröffentlichung
Core Facility der Universität Konstanz

Gesperrt bis

Titel in einer weiteren Sprache

Publikationstyp
Beitrag zu einem Konferenzband
Publikationsstatus
Published

Erschienen in

VisxAI : 4th Workshop on Visualization for AI Explainability. 2021

Zusammenfassung

The embeddings produced by BERT and GPT-2 are widely used in downstream tasks without questioning their usage or being aware of their differences. We want to investigate this space and shed some light on the preference of BERT over GPT-2 in NLP tasks.

Zusammenfassung in einer weiteren Sprache

Fachgebiet (DDC)
004 Informatik

Schlagwörter

Konferenz

VisxAI : 4th Workshop on Visualization for AI Explainability (online), 25. Okt. 2021
Rezension
undefined / . - undefined, undefined

Forschungsvorhaben

Organisationseinheiten

Zeitschriftenheft

Zugehörige Datensätze in KOPS

Zitieren

ISO 690KEHLBECK, Rebecca, Rita SEVASTJANOVA, Thilo SPINNER, Tobias STÄHLE, Mennatallah EL-ASSADY, 2021. Demystifying the Embedding Space of Language Models. VisxAI : 4th Workshop on Visualization for AI Explainability (online), 25. Okt. 2021. In: VisxAI : 4th Workshop on Visualization for AI Explainability. 2021
BibTex
@inproceedings{Kehlbeck2021Demys-68366,
  year={2021},
  title={Demystifying the Embedding Space of Language Models},
  url={https://bert-vs-gpt2.dbvis.de/},
  booktitle={VisxAI : 4th Workshop on Visualization for AI Explainability},
  author={Kehlbeck, Rebecca and Sevastjanova, Rita and Spinner, Thilo and Stähle, Tobias and El-Assady, Mennatallah}
}
RDF
<rdf:RDF
    xmlns:dcterms="http://purl.org/dc/terms/"
    xmlns:dc="http://purl.org/dc/elements/1.1/"
    xmlns:rdf="http://www.w3.org/1999/02/22-rdf-syntax-ns#"
    xmlns:bibo="http://purl.org/ontology/bibo/"
    xmlns:dspace="http://digital-repositories.org/ontologies/dspace/0.1.0#"
    xmlns:foaf="http://xmlns.com/foaf/0.1/"
    xmlns:void="http://rdfs.org/ns/void#"
    xmlns:xsd="http://www.w3.org/2001/XMLSchema#" > 
  <rdf:Description rdf:about="https://kops.uni-konstanz.de/server/rdf/resource/123456789/68366">
    <dc:contributor>Kehlbeck, Rebecca</dc:contributor>
    <dcterms:available rdf:datatype="http://www.w3.org/2001/XMLSchema#dateTime">2023-11-22T14:34:13Z</dcterms:available>
    <void:sparqlEndpoint rdf:resource="http://localhost/fuseki/dspace/sparql"/>
    <dc:contributor>El-Assady, Mennatallah</dc:contributor>
    <bibo:uri rdf:resource="https://kops.uni-konstanz.de/handle/123456789/68366"/>
    <dcterms:issued>2021</dcterms:issued>
    <dspace:isPartOfCollection rdf:resource="https://kops.uni-konstanz.de/server/rdf/resource/123456789/36"/>
    <foaf:homepage rdf:resource="http://localhost:8080/"/>
    <dc:contributor>Spinner, Thilo</dc:contributor>
    <dc:creator>Stähle, Tobias</dc:creator>
    <dc:date rdf:datatype="http://www.w3.org/2001/XMLSchema#dateTime">2023-11-22T14:34:13Z</dc:date>
    <dc:creator>El-Assady, Mennatallah</dc:creator>
    <dcterms:title>Demystifying the Embedding Space of Language Models</dcterms:title>
    <dcterms:abstract>The embeddings produced by BERT and GPT-2 are widely used in downstream tasks without questioning their usage or being aware of their differences. We want to investigate this space and shed some light on the preference of BERT over GPT-2 in NLP tasks.</dcterms:abstract>
    <dcterms:isPartOf rdf:resource="https://kops.uni-konstanz.de/server/rdf/resource/123456789/36"/>
    <dc:contributor>Sevastjanova, Rita</dc:contributor>
    <dc:language>eng</dc:language>
    <dc:contributor>Stähle, Tobias</dc:contributor>
    <dc:creator>Kehlbeck, Rebecca</dc:creator>
    <dc:creator>Spinner, Thilo</dc:creator>
    <dc:creator>Sevastjanova, Rita</dc:creator>
  </rdf:Description>
</rdf:RDF>

Interner Vermerk

xmlui.Submission.submit.DescribeStep.inputForms.label.kops_note_fromSubmitter

Kontakt
URL der Originalveröffentl.

Prüfdatum der URL

2023-11-22

Prüfungsdatum der Dissertation

Finanzierungsart

Kommentar zur Publikation

Allianzlizenz
Corresponding Authors der Uni Konstanz vorhanden
Internationale Co-Autor:innen
Universitätsbibliographie
Ja
Begutachtet
Diese Publikation teilen