Processamento de linguagem natural - início
Neste capítulo, discutiremos o início da linguagem natural no Processamento de Linguagem Natural. Para começar, vamos primeiro entender o que é Gramática da Linguagem Natural.
Gramática da linguagem natural
Para a linguística, a linguagem é um grupo de signos vocais arbitrários. Podemos dizer que a linguagem é criativa, governada por regras, inata e universal ao mesmo tempo. Por outro lado, é humanamente também. A natureza da linguagem é diferente para pessoas diferentes. Existem muitos equívocos sobre a natureza da linguagem. É por isso que é muito importante entender o significado do termo ambíguo‘grammar’. Em linguística, o termo gramática pode ser definido como as regras ou princípios com a ajuda dos quais a linguagem funciona. Em sentido amplo, podemos dividir a gramática em duas categorias -
Gramática Descritiva
O conjunto de regras, em que os linguistas e os gramáticos formulam a gramática do falante, é denominado gramática descritiva.
Gramática de perspectiva
É um sentido gramatical muito diferente, que tenta manter um padrão de correção na linguagem. Essa categoria tem pouco a ver com o funcionamento real da linguagem.
Componentes da linguagem
A linguagem de estudo é dividida em componentes inter-relacionados, que são convencionais e também divisões arbitrárias de investigação linguística. A explicação desses componentes é a seguinte -
Fonologia
O primeiro componente da linguagem é a fonologia. É o estudo dos sons da fala de uma determinada língua. A origem da palavra pode ser atribuída ao idioma grego, onde 'telefone' significa som ou voz. Fonética, uma subdivisão da fonologia, é o estudo dos sons da fala da linguagem humana sob a perspectiva de sua produção, percepção ou de suas propriedades físicas. O IPA (Alfabeto Fonético Internacional) é uma ferramenta que representa os sons humanos de forma regular durante o estudo da fonologia. No IPA, cada símbolo escrito representa um e apenas um som de fala e vice-versa.
Fonemas
Pode ser definido como uma das unidades de som que diferencia uma palavra de outra em um idioma. Na linguística, os fonemas são escritos entre barras. Por exemplo, fonema/k/ ocorre em palavras como kit, esquete.
Morfologia
É o segundo componente da linguagem. É o estudo da estrutura e classificação das palavras em um determinado idioma. A origem da palavra é do idioma grego, onde a palavra 'morphe' significa 'forma'. A morfologia considera os princípios de formação de palavras em uma língua. Em outras palavras, como os sons se combinam em unidades significativas, como prefixos, sufixos e raízes. Também considera como as palavras podem ser agrupadas em classes gramaticais.
Lexeme
Em linguística, a unidade abstrata de análise morfológica que corresponde a um conjunto de formas assumidas por uma única palavra é chamada de lexema. A maneira como um lexema é usado em uma frase é determinada por sua categoria gramatical. Lexeme pode ser uma palavra individual ou várias palavras. Por exemplo, a palavra falar é um exemplo de lexema de uma palavra individual, que pode ter muitas variantes gramaticais como falar, falar e falar. O lexema de várias palavras pode ser composto por mais de uma palavra ortográfica. Por exemplo, speak up, pull through, etc. são os exemplos de lexemas com várias palavras.
Sintaxe
É o terceiro componente da linguagem. É o estudo da ordem e da disposição das palavras em unidades maiores. A palavra pode ser atribuída à língua grega, onde a palavra suntassein significa 'colocar em ordem'. Estuda o tipo de frases e sua estrutura, de orações, de frases.
Semântica
É o quarto componente da linguagem. É o estudo de como o significado é transmitido. O significado pode estar relacionado ao mundo externo ou pode estar relacionado à gramática da frase. A palavra pode ser rastreada até o idioma grego, onde a palavra semainein significa 'significar', 'mostrar', 'sinalizar'.
Pragmáticos
É o quinto componente da linguagem. É o estudo das funções da linguagem e seu uso no contexto. A origem da palavra pode ser rastreada até o idioma grego, onde a palavra 'pragma' significa 'ação', 'caso'.
Categorias gramaticais
Uma categoria gramatical pode ser definida como uma classe de unidades ou características da gramática de um idioma. Essas unidades são os blocos de construção da linguagem e compartilham um conjunto comum de características. As categorias gramaticais também são chamadas de características gramaticais.
O inventário de categorias gramaticais é descrito abaixo -
Número
É a categoria gramatical mais simples. Temos dois termos relacionados a esta categoria - singular e plural. Singular é o conceito de 'um', enquanto que plural é o conceito de 'mais de um'. Por exemplo, cão / cães, este / estes.
Gênero
O gênero gramatical é expresso pela variação dos pronomes pessoais e da 3ª pessoa. Exemplos de gêneros gramaticais são singulares - ele, ela, isso; os formulários de primeira e segunda pessoa - eu, nós e você; a 3ª pessoa do plural eles, é gênero comum ou gênero neutro.
Pessoa
Outra categoria gramatical simples é pessoa. De acordo com isso, os três termos a seguir são reconhecidos -
1st person - A pessoa que está falando é reconhecida como 1ª pessoa.
2nd person - A pessoa que é o ouvinte ou a pessoa com quem se fala é reconhecida como 2ª pessoa.
3rd person - A pessoa ou coisa sobre a qual estamos falando é reconhecida como 3ª pessoa.
Caso
É uma das categorias gramaticais mais difíceis. Pode ser definido como uma indicação da função de um sintagma nominal (NP) ou a relação de um sintagma nominal com um verbo ou com os outros sintagmas nominais na frase. Temos os seguintes três casos expressos em pronomes pessoais e interrogativos -
Nominative case- É função de sujeito. Por exemplo, eu, nós, você, ele, ela, isso, eles e quem são nominativos.
Genitive case- É função de possuidor. Por exemplo, meu / meu, nosso / nosso, dele, dela / dela, seu, deles / delas, cujos são genitivos.
Objective case- É a função do objeto. Por exemplo, eu, nós, você, ele, ela, eles, que são objetivos.
Grau
Esta categoria gramatical está relacionada a adjetivos e advérbios. Tem os três termos a seguir -
Positive degree- Expressa uma qualidade. Por exemplo, grande, rápido e bonito são graus positivos.
Comparative degree- Expressa maior grau ou intensidade da qualidade em um de dois itens. Por exemplo, maior, mais rápido e mais bonito são os graus comparativos.
Superlative degree- Expressa o maior grau ou intensidade da qualidade em um de três ou mais itens. Por exemplo, o maior, o mais rápido e o mais bonito são graus superlativos.
Definitividade e Indefinição
Ambos os conceitos são muito simples. A definição, como sabemos, representa um referente, que é conhecido, familiar ou identificável pelo falante ou ouvinte. Por outro lado, indefinição representa um referente que não é conhecido ou não é familiar. O conceito pode ser entendido na co-ocorrência de um artigo com um substantivo -
definite article- o
indefinite article- um / uma
Tenso
Essa categoria gramatical está relacionada ao verbo e pode ser definida como a indicação linguística do tempo de uma ação. Um tempo verbal estabelece uma relação porque indica o tempo de um evento em relação ao momento da fala. Em termos gerais, é dos três tipos a seguir -
Present tense- Representa a ocorrência de uma ação no momento presente. Por exemplo, Ram trabalha muito.
Past tense- Representa a ocorrência de uma ação antes do momento presente. Por exemplo, choveu.
Future tense- Representa a ocorrência de uma ação após o momento presente. Por exemplo, vai chover.
Aspecto
Esta categoria gramatical pode ser definida como a visão obtida de um evento. Pode ser dos seguintes tipos -
Perfective aspect- A visão é tomada como um todo e completa no aspecto. Por exemplo, o pretérito simples comoyesterday I met my friend, em inglês é de aspecto perfeito, visto que vê o evento como completo e completo.
Imperfective aspect- A visão é tida como contínua e incompleta no aspecto. Por exemplo, o particípio presente comoI am working on this problem, em inglês é imperfeito em aspecto, visto que vê o evento como incompleto e contínuo.
Humor
Esta categoria gramatical é um pouco difícil de definir, mas pode ser simplesmente expressa como uma indicação da atitude do falante em relação ao que está falando. É também a característica gramatical dos verbos. É diferente dos tempos gramaticais e do aspecto gramatical. Os exemplos de humores são indicativos, interrogativos, imperativos, injuntivos, subjuntivos, potenciais, optativos, gerúndios e particípios.
Acordo
Também é chamado de concórdia. Acontece quando uma palavra muda de acordo com as outras palavras às quais se relaciona. Em outras palavras, envolve fazer o valor de alguma categoria gramatical concordar entre diferentes palavras ou classes gramaticais. A seguir estão os acordos com base em outras categorias gramaticais -
Agreement based on Person- É a concordância entre sujeito e verbo. Por exemplo, sempre usamos “Eu sou” e “Ele é”, mas nunca “Ele é” e “Eu sou”.
Agreement based on Number- Essa concordância é entre o sujeito e o verbo. Nesse caso, existem formas verbais específicas para primeira pessoa do singular, segunda pessoa do plural e assim por diante. Por exemplo, 1ª pessoa do singular: Eu realmente sou, 2ª pessoa do plural: Nós realmente somos, 3ª pessoa do singular: O menino canta, 3ª pessoa do plural: Os meninos cantam.
Agreement based on Gender- Em inglês, há concordância de gênero entre pronomes e antecedentes. Por exemplo, Ele alcançou seu destino. O navio chegou ao seu destino.
Agreement based on Case- Este tipo de acordo não é uma característica significativa do inglês. Por exemplo, quem veio primeiro - ele ou sua irmã?
Sintaxe da linguagem falada
O inglês escrito e a gramática falada têm muitas características em comum, mas, junto com isso, também diferem em vários aspectos. Os seguintes recursos distinguem entre a gramática falada e escrita do inglês -
Disfluências e reparo
Esta característica marcante torna a gramática falada e escrita do inglês diferente uma da outra. É conhecido individualmente como fenômeno de disfluências e coletivamente como fenômeno de reparo. Disfluências incluem o uso do seguinte -
Fillers words- Às vezes, entre as frases, usamos algumas palavras de preenchimento. Eles são chamados de preenchimentos de pausa de preenchimento. Exemplos dessas palavras são uh e um.
Reparandum and repair- O segmento repetido de palavras entre a frase é chamado reparandum. No mesmo segmento, a palavra alterada é chamada de reparo. Considere o seguinte exemplo para entender isso -
Does ABC airlines offer any one-way flights uh one-way fares for 5000 rupees?
Na frase acima, o voo de ida é uma reparação e os voos de ida são um reparo.
Reinicia
Após a pausa de preenchimento, o reinício ocorre. Por exemplo, na frase acima, os reinícios ocorrem quando o locutor começa a perguntar sobre voos só de ida e depois para, corrige-se com uma pausa de preenchimento e, em seguida, reinicia perguntando sobre passagens só de ida.
Fragmentos de Palavras
Às vezes, falamos as frases com fragmentos menores de palavras. Por exemplo,wwha-what is the time? Aqui as palavras w-wha são fragmentos de palavras.