Diccionariu morfolóxicu

Venimos diciendo que'l formatu de los diccionarios Apertium son un poco anti-intuitivos, que ye yá abondo si nun solía pensar nos diccionarios d'un mou determináu. Esta páxina enfótase en tratar de ser un entamu "básicu" a cómo funcionen y a preparalu pa lleelos y escribilos.

Esta paxina entiende que nun-y incomoda ver HTML y XML, y poro entiende que ye a distinguir un elementu d'un atributu o lo que ye'l conteníu d'una etiqueta. Si necesita un repás rápidu, valga esti:

<etiqueta atributu="valor">conteníu</valor>

Si esto nun tien nen, debería lleer un poco más sobre XML.

Entamu

Poro, a mou xeneral, el diccionariu más básicu precisa tres estayes. Vamos, pasín al pasu, a definir un diccionariu qu'analizará y xenerará el términu inglés "beer" y la so forma plural "beers". La primer estaya defín l'alfabetu que se va emplegar col diccionariu. Esto ye cenciellamente auto-desplicativo. Tien esti aspeutu:

  <alphabet>ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz</alphabet>

La segunda sición defín los símbolos gramaticales de la llingua cola que ta trabayando. Equí ye onde la xente normalmente pue dicir, pero...¿qué son los signos gramaticales? Bono, hai milenta maneres de describir les pallabres y les distintes formes qu'estes puen garrar, asina qu'entiendo tamién que conoz cuáles son les "pieces de la llingua". Por exemplu: nomes (casa, cerveza, barcu, gatu...), pallabres que somos a estremar de los axetivos (colloráo, bono, tresparente...) y de los verbos (comer, multiplicar, escribir...). La manera d'especificar estes categoríes ye la siguiente:

  <sdefs>
    <sdef n="noun"/>
    <sdef n="verb"/>
    <sdef n="adjective"/>
  </sdefs>

La xente suel quexase de lo curties que son les etiquetes (como <sdef> por exemplu), pero amás los valores tamién suelen abreviase, y asina los nomes esprésense con "n", los verbos con "vb" y los axetivos con "adj" etc. (vea la List of symbols pa les abreviatures más comunes). Por embargu la brevedá sirve a un propósitu, que ye escribir eses etiquetes nel menor tiempu posible. Y ye que nun diccionariu hai munches entraes. Como referencia, <sdef> vien de "symbol definition" (definición de símbolu), y <sdefs> ye cenciellamente lo mesmo, pero en plural.

Depués d'especificar l'alfabetu y los símbolos, necesitamos especificar lo más importante ¡les pallabres del diccionariu! P'axuntar les pallabres usamos una estaya. Nun diccionariu pue haber más d'una estaya, y estes puen ser amás de distinta mena. Nun vamos entrar en detalles equí, namás vamos dicir que la estaya más grande llámase "main" (principal) y que ye de tipu "standard" (estándar).

  <section id="main" type="standard">

  </section>

El siguiente pasu ye añadi-y la primer entrada. Esto ye un poco más enguedeyao, pero nun hai problema...

Entraes

Los diccionarios monollingües d'Apertium son "morfolóxicos", esto vien a dicir que nun son namás un contenedor de pallabres, sinon qu'algama tamién el como inflexonen, y lo que significa qu'inflexonen. N'Apertium emplegamos los diccionarios morfolóxicos pa dos coses:

1. Analís — recuperando toles posibles unidaes léxiques dende la forma superficial d'una pallabra.
2. Xeneración — produciendo la forma superficial d'una pallabra dende les unidaes léxiques.

Bono, agora vamos dexplicar el conceutu de "unidá léxica" y "forma superficial". Volvemos al exemplu col qu'entamábamos de "beer" y "beers". Sabemos que "beer" ye un nome. Tamién sabemos que ta en singular, porque pescanciamos que la diferencia ente "beer" y "beers" ye que la segunda ta en plural. Asina, resumiendo esti conocimientu, atopamos dos fechos:

1. beer — ye un nome singular,
2. beers — ya la forma plural del nome "beer".

A lo que llamamos "unidá léxica" ye a la combinación d'un lema, "beer" y los símbolos gramaticales. La forma superficial d'una pallabra ye la pallabra como pue lleese.. Al estilu Apertium esto representaríase asemeyao a esto:

Forma superficial	Unidá léxica
beer	beer<noum><singular>
beers	beer<noun><plural>

Cola fin de qu'estes dos pallabres tean vinculaes y seyan a tresformase ente elles, tenemos que definiles como par. Los pares de les unidaes superficial y de les unidaes léxiques n'Apertium señálense cola etiqueta <p>. Esto ye abondo intuitivo ¡en cuantes s'avece a la etiqueta! Esti par d'elementos debe contener un llau izquierdu (left) (<l>) y un llau drechu (right) (<r>). El llau izquierdu contién casi siempre la forma superficial de la pallabra, mentantu que'l drechu contién la unidá léxica. Asina, la nuesa primer entrada (<e>) tendría esti aspeutu:

    <e>
      <p>
        <l>beer</l>
        <r>beer<s n="noun"/><s n="singular"/></r>
      </p>
    </e>

Agora, precisa añedir tantes entraes d'esi tipu como formes superficiales haya na llingua, por embargu pescanciará que creae eses entraes pa "TOES" les pallabres d'una llingua ye una tarea imposible y eterna. La siguiente seición amosará como se pue evitar esto, pero n'esti intre yá tendríamos información abondo pa compilar el nuesu primer diccionariu:

<dictionary>
  <alphabet>abcdefghijklmnopqrstuvwxyz</alphabet>
  <sdefs>
    <sdef n="noun"/>
    <sdef n="singular"/>
    <sdef n="plural"/>
  </sdefs>

  <section id="main" type="standard">
    <e>
      <p>
        <l>beer</l>
        <r>beer<s n="noun"/><s n="singular"/></r>
      </p>
    </e>
    <e>
      <p>
        <l>beers</l>
        <r>beer<s n="noun"/><s n="plural"/></r>
      </p>
    </e>
  </section>
</dictionary>

Les entraes d'enriba permitirannos recuperar les unidaes léxiques pa "beer" y "beers", y xenerar eses dos formes superficiales dende la mesma unidá léxica.

El diccionariu ye funcional, pero ta fechu asina con propósitu divulgativu porque los archivos reales de diccionariu estrémense un poco d'esto, yá que definir cada pallabra d'un mou dafechu estremáu unes d'otres cuando siguen les mesmes regles ye dalgo bastante ineficiente.

Compilación

Ver tamién: lttoolbox

Grabe esto nun archivu llamáu dictionary.dix, y vamos compilar el diccionariu en forma binaria emplegando la ferramienta lt-comp. La comanda tien tres argumentos, el primeru ye la direición, depués l'archivu d'entrada y l'archivu de salida. La opción "direición" ye mui importante.

Si especificamos la direición como "lr" (left → right), obtendremos un analizador (esto ye, un diccionariu que garra les formes superficiales y devuelve les unidaes léxiques). Si especificamos la direición nel otru sen ("rl", right → left), obtendremos el xenerador, que garra les unidaes léxiques y devuelve les formes superficiales. Debemos faer dambos:

$ lt-comp lr dictionary.dix analyser.bin
main@standard 7 6

$ lt-comp rl dictionary.dix generator.bin
main@standard 7 6

Podemos agora usar el diccionariu p'analizar en nome "beers":

$ echo "beers" | lt-proc analyser.bin
^beers/beer<noun><plural>$

L'analís danos la forma superficial, siguida de la unidá léxica. Pongamos que queremos xenerar la forma superficial dende la unidá léxica, namás tenemos faer:

$ echo "^beer<noun><plural>$" | lt-proc -g generator.bin
beers

Paradigmes

De mou que yá tenemos un diccionariu y podemos analizar y xenerar les dos formes de la pallabra "beer". Pero ¿qué pasa cuando queremos amestar más pallabres, por exemplu "school" o "computer"? Bien, una de les posibilidaes que tenemos ye añedir cuatro entraes más col mesmu sistema (una pa cauna de "school", "schools" y "computer", "computers"). D'otru llau esto sería abondo ineficiente. En vez d'eso podemos crear una regla, ello ye dalgo asina como dici-y al sistema qu'eses dos entraes nueves siguen el mesmu patrón que la entrada "beer" que yá tenemos añadida. N'esti casu sería dalgo como especificar que basta añedir "-s" pa xenerar los plurales. Pa ello emplegaremos un "paradigma", que ye lliteralmente "un exemplu que sirve de modelu o patrón".

Pa definir paradigmes garramos una pallabra que pue servir d'exemplu pa otres pallabres qu'inflexonen del mesmu mou. N'esti casu podemos dicir, "les pallabres "school" y "computer" inflexonen como "beer".

Los paradigmes van nuna estaya nueva llamada <pardefs> (paradigm definitions) (definiciones de paradigma). Cada definición de paradigma tien que tener un atributu "id" (identificación), que contién un nome únicu. Pa esta identificación podría valir cualquier cosa, pero normalmente tien esta forma:

<lemma>__<part of speech>, (e.g. beer__n)

Cola fin de crear les unidaes léxiques pa beer, beers, computer, computers, etc... precisamos distinguir ente la parte de la forma superficial que nun camuda, (la parte idéntica) y la parte que camuda. N'esti exemplu la parte idéntica sería la propia pallabra en singular. Por embargu nun siempre ye esti el casu (p.e. el plural de "wolf" ye "wolves" y el de "tooth", "teeth").

Probablemente camentara que la definición del paradigma tendría un aspeutu asemeyáu a esti:

    <pardef n="beer__n">
      <e>
        <p>
          <l/>
          <r><s n="noun"/><s n="singular"/></r>
        </p>
      </e>
      <e>
        <p>
          <l>s</l>
          <r><s n="noun"/><s n="plural"/></r>
        </p>
      </e>
    </pardef>

La única parte que camudara ente eses dos entraes ye que la parte idéntica desapaeciera de dambos llaos del par.

La definición de paradigmas afítase na so propia estaya del diccionariu, ente les etiquetes <pardefs>, por exemplu:

  <pardefs>

    ...  

  </pardefs>

Podemos ver como casa esto nel restu del diccionariu embaxo:

<dictionary>
  <alphabet>abcdefghijklmnopqrstuvwxyz</alphabet>
  <sdefs>

   ...

  </sdefs>
  <pardefs>

    ...  

  </pardefs>
  <section id="main" type="standard">
    <e lm="beer"><i>beer</i><par n="beer__n"/></e>
    <e lm="school"><i>school</i><par n="beer__n"/></e>
    <e lm="computer"><i>computer</i><par n="beer__n"/></e>
    <e lm="house"><i>house</i><par n="beer__n"/></e>
  </section>
</dictionary>

See also

• Building dictionaries
• Finding_errors_in_dictionaries
• Cookbook
• Chunking
• Contributing to an existing pair