Web Dictionary Maintenance

Translate to PT-BR with Google Tradução

Introduction

Apertium over the years still has deficiencies so that lay people can contribute to increase the base of words in dictionaries, even with simple contributions. Collaboration is the key to developing a tool that serves a huge range of users throughout the world. We believe that it is possible to engage more users and thus give greater impact to the tool within the communities where there is involvement. We will deal in this document with requirements on non-functional and technical objectives regarding the tool proposal. _{O Apertium com o passar dos anos ainda apresenta deficiências para que pessoas leigas possam contribuir para o aumento da base de palavras em dicionários, mesmo que com contribuições simples. A colaboração é a chave para o desenvolvimento de uma ferramenta que serve a uma gama enorme de usuários ao longo do mundo. Acreditamos que é possível engajar mais usuários e com isso dar maior impacto da ferramenta dentro das comunidades em que existe envolvimento. Trataremos neste documento sobre requisitos sobre objetivos não funcionais e técnicos sobre a proposta de ferramenta.}

Original Ideias

http://wiki.apertium.org/wiki/Ideas_for_Google_Summer_of_Code

http://wiki.apertium.org/wiki/Ideas_for_Google_Summer_of_Code/Easy_dictionary_maintenance

Original GSOC2019 Application

http://wiki.apertium.org/wiki/User:Alessiojr/Easy_dictionary_-_Application-GSOC2019

Studant Information

Student: Vinícius Silva Nogueira

Unofficial Mentor: Alessio Miranda Junior

Telegram/Whatsapp: Alessio: +55 (31) 9.8888-7770

E-mail: alessio@cefetmg.br or viniciussnogueira13@gmail.com

IRC: AlessioJr

GTalk: alessiojunin@gmail.com

Description

Abstract:

The dictionaries complexity and size makes its modification extremely hard and time-consuming, and, along with the need for programming knowledge, keeps away potential contributors. A tool that facilitates the work of dictionaries developers, eliminate computer knowledge (XML, Git, etc) and that allows collaboration between members of the community is of extreme necessity because, with the removal of these barriers, a larger group of people will have the necessary requirements to participate in the development of dictionaries, thus increasing the translation capacity of Apertium.

Even with several tools that help the way you manage and create dictionaries, Apertium is far from the normal users, who have a huge contribution potential. Or even create a simple way to create contributions to recurring users with advanced knowledge. Although it is a bold plan, and there are several possible and desirable requirements, we will describe some basic premises for this step and that must be respected and aligned with the apertium developer community.

_{A complexidade e o tamanho de um dicionário tornam extremamente difícil a sua modificação, e, juntamente com a necessidade de conhecimento em programação, acaba afastando possíveis contribuidores. Uma ferramenta que facilite o trabalho dos desenvolvedores de dicionários, elimine a necessidade de conhecimento em computação (XML, Git, etc.) e que permita uma colaboração entre os membros da comunidade é de extrema necessidade pois, com a remoção dessas barreiras, um grupo maior de pessoas terá os requisitos necessários para participarem do desenvolvimento de dicionários, aumentando, consequentemente, a capacidade de tradução do Apertium. Mesmo com várias ferramentas que auxiliam a forma de gerir e criar dicionários ainda o apertium se mostra distante dos usuários normais que tem um enorme potencial de contribuição. Ou mesmo criar uma forma simples de criar contribuições para usuários recorrentes com conhecimento avançado. Apesar de ser um plano ousado, e existirem vários requisitos possíveis e desejáveis, vamos descrever algumas premisas básicas para este etapa e que devem ser respeitadas e devem estar alinhadas com a comunidade de desenvolvedores apertium.}

Definitions

• Lay users do not need to know Apertium's internal structure,
• Intermediate users need to have a knowledge of dictionary management methodology
• Advanced users are those who know the structure of Apertium.
• Communities are user groups that merge characteristics to the database extension of a dictionary of a specific language.
• Official dictionaries are dictionaries managed and with seal of the apertium community.
• Unofficial dictionaries are dictionaries run by an independent community
• Test dictionaries are deprived of users to test their contributions

Objectives:

• The major goal of the project is to develop a web tool to facilitate the management of the Apertium (XML's) database of integrators for novice and advanced users. _{O Objetivo maior do projeto é desenvolver uma ferramenta da Web para facilitar a gestão da base de dados dos discionários Apertium (XML's) integrando usuários iniciantes e avançados.}
• New communities of contributions should be able to organize independently of a central command. The command exists but will be distributed. _{Novas comunidades de contribuições devem poder se organizar independente de um comando central. O comando existe mas será distribuído.}
• Lay users who feel motivated to contribute, should have an interface that promotes ease in contributing even with limited possibilities._{Ususários leigos que se sintam motivados para contribuir, deve ter uma interface que promova a facilidade em contribuir mesmo que com possibilidades limitadas.}

• The development of dictionaries should be collaborative and distributed. Each dictionary should have a management community, but a user may have the freedom to disagree and create a new version maintaining a history of the author. _{O desenvolvimento de dicionários deve ser colaborativo e distribuído. Cada dicionário deve ter uma comunidade que faz a gestão, mas um usuário pode ter a liberdade de discordar e criar uma nova versão mantendo um histórico do autor.}
• Any tool should maintain the traditional apertium structure and not be interoperable between existing tools. _{Qualquer ferramenta deve manter a estrutura tradicional do apertium e não ser interoperãvel entre as ferramentas já existentes.}
• There must be a methodology for communities to maintain the quality of their dictionaries. Although they are distributed the goal is to create a unified and mature dictionary. _{Deve haver uma metodologia para que as comunidades possam manter a qualidade de seus dicionários. Embora eles sejam distribuídos o objetivo é criar um dicionário unificado e maduro.}

• -- _--

Technical Objectives:

• Develop, initially, monolingual dictionaries but keeping the particular format of each file.
• Minimize the direct manipulation of XML files, providing features that reduce this need.
• Making use of DixTools to keep code reuse.

• _{Evitar a manipulação direta de arquivos XML, facilitando o trabalho dos desenvolvedores de dicionários e consequentemente aumentando sua produtividade;}
• _{Permitir que usuários leigos em programação possam contribuir com o desenvolvimento e manutenção dos dicionários;}
• _{Facilitar a colaboração entre membros da comunidade no desenvolvimento dos dicionários.}

• --.

Git, GitLab and Appertium

Git Flow demonstration

As the Apertium files are textual, we had the idea of seeking productivity and using existing and consolidated tools in the world. The proposal is to build a friendly web interface for lay users, but use git's own Back-End as version control and to make dictionary management GitLab as an administrative tool that already guarantees incredible power for remote collaboration. _{Como os arquivos do Apertium são de base textual, tivemos a ideai de buscar produtividade e usar ferramentas já existentes e consolidadas no mundo. A proposta é construir uma interface web amigável para usuários leigos, mas usar como Back-End o próprio git como controle de versãoe para fazer a gestão de dicionários o GitLab como ferramenta administrativa que já garante poder incrível para colaboração remota.}

To demonstrate this relationship we will highlight some concepts of Git. Over time there may be several TimeLines:

• The Official Branch (Master) has the official version of the apertium managed by official developers or maintainers.
• Users have the power to create new Branches and develop unofficial dictionaries in parallel, creating communities that may from time to time suggest modifications to Brach Master.
• These requests can be accepted or rejected by maintainers, and this format is recursive and other developers can create unofficial copies of unofficial ones.
• Integration requests will use the Merge Request concepts present in tools such as GitLab that will be the BackEng for advanced users.

• All dictionaries releases will be in a single repository and available to any member of the community to continue the work.
• Each user will have your own branch to work on, which also will be available to the entire community to contribute to it.
• The users will be able to make merge requests with other branches (official or unofficial).
• At first, we will use GitLab to manage this merges requests. The team who maintain each dictionary will judge if the modifications are valids or not.

Application-GSOC2019

Abstract:

   The idea is to develop a GUI tool to manage Apertium Monolingual and Bilingual XML files with the follow objectives:
   • Create a alternative form to edit dix files with GUI resources.
   • Develop, initially, monolingual dictionaries but keeping the particular format of each file.
   • Minimize the direct manipulation of XML files, providing features that reduce this need.
   • Making use of DixTools to keep code reuse.

Why is it you are interested in machine translation?

   My .

Why are they interested in the Apertium project?

   I’ve .

Which of the published tasks are you interested in?

   Easy.

Why should Google and Apertium sponsor it?

   I .

How and who will it benefit in society?

   I .

What do you plan to do?

   We.

Development Paradigm: MVC Paradigm
Program Language: Java/SWING
Persistence: XML (Apertium XML Files)
Framworks: Dixtools, JPA, Swing Application Framework

Stages/Milestones

Week	Stage	Description
1, 2	--	--.
2, 3	--	--.
Prototype	Milestone 1	--
5, 6	--	--.
7	--	--.
8	--	--.
Prototype	Milestone 2	--
9	--	--.
10	--	--.
11	Pré-Release	--
Prototype	--
12	Makeup	--
	Final Release

Presentation

   My name is Vinicius, a Brazilian Student at .

Resume of Skills

Apertium Knowledge:

   * Study to develop a collaborative tool for apertium.
   * A study of actual Apertium process about creating a language pair by the user point of view.
   * Analysis of the characteristics of the 2010 project of Aléssio and adaptation to current times.

Academic Skills:

   * Graduating in Computer Engineering- Federal Center for Technological Education of Minas Gerais – Brazil

Professional Skills:

   * Language developer: Java, Phyton, 

Projects for Summer:

   * No professional activities planned.
   * Planning to work in GSOC

Project

Why?

• The dictionaries complexity and size makes its modification extremely hard and time-consuming, and, along with the need for programming knowledge, keeps potential contributors away. A tool that facilitates the work of dictionaries developers, eliminate the need of computer knowledge (XML, Git, etc) and that allows collaboration between members of the community is of extreme necessity because, with the removal of these barriers, a larger group of people will have the necessary requirements to participate in the development of dictionaries, thus increasing the translation capacity of Apertium.

_{A complexidade e o tamanho de um dicionário tornam extremamente difícil a sua modificação, e, juntamente com a necessidade de conhecimento em programação, acaba afastando possíveis contribuidores. Uma ferramenta que facilite o trabalho dos desenvolvedores de dicionários, elimine a necessidade de conhecimento em computação (XML, Git, etc.) e que permita uma colaboração entre os membros da comunidade é de extrema necessidade pois, com a remoção dessas barreiras, um grupo maior de pessoas terá os requisitos necessários para participarem do desenvolvimento de dicionários, aumentando, consequentemente, a capacidade de tradução do Apertium.}

How can use?

• --.
• --.
• --.
• --.

What its the plan?

• We are planning to create a web GUI that allows the user to develop the basic tasks of dictionaries and translation pairs manipulation in an easy and practical way.
• We will use Git as an administrative and control tool, allowing the user to contribute to the work of other community members or start your own project.

_{Estamos planejando criar uma interface gráfica web que permita ao usuário desenvolver as tarefas básicas de manipulação de dicionários e pares de tradução de forma fácil e prática e usar o Git como ferramenta administrativa e de controle de versões, possibilitando ao usuário contribuir no trabalho de outros membros da comunidade ou iniciar seu próprio dicionário.}

How it Works?

• --

• --

• --

• --

• --

Components ans Technologies

Components Diagram

• --

• --

• --

• --

• --

Example of Iteraction

Example Sequence Diagram

• --

• --

• --

• --

• --