Lenguajes Independientes del Contexto Teoría del Autómata.

Lenguajes Independientes del Contexto

Teoría del Autómata

AFD como generadoresUn AFD (o AFN) puede verse como un aceptador de cadenas o como un generador de cadenas.

q0

q2

q3

q1q4

a

a

b

b

b

Acepta a(a* b*)b

Como productor haciendo las transiciones

q0- q1- q2- q2- q2- q5.

Genera: aaaab

Las cadenas están formadas por a seguidas por otra parte.

Podemos representarlo como S aE, lo que sigue pueden ser cadenas de aes o bes, de E podemos ir a generar aes mediante A y bes mediante B, es decir, E A o E B.

Las aes se producen con A aA y las bes con B bB, eventualmente A y B producirán b, es decir A b y B b.

En suma: S aE

E A

E B

A aA

B bB

A b

B b

Las reglas anteriores pueden escribirse como se muestra:S aE E A | B A aA | bB bB | b

Donde | significa “o”.Una derivación es una es una serie de sustituciones de el símbolo de la derecha de las producciones por las cadenas de la izquierda hasta obtener una cadena de símbolos terminales.Ejemplo

La siguiente es una derivación para la cadena aaab.

S aE aaA aaaA aaab

Gramáticas regularesUna gramática es un cuarteto (N, , S , P) donde:

N es un conjunto de símbolos llamados no terminales.

es un conjunto finito y no vacío de símbolos terminales.

S N es el símbolo inicial

P es una colección, de reglas de sustitución, llamadas producciones, que son de la forma A w, donde A N y w es una cadena sobre N que satisface lo siguiente:

1 w contiene un no terminal como mucho.

2 si w contiene un no terminal se encuentra al extremo derecho de la cadena

EjemploLa siguiente es una gramática

= {a, b}, N = {S, A}, S bA, A aaA | b |

Genera cadena de la forma ba2nb o ba2n.

L(G) = b(aa)*(b)

Las producciones se pueden representar como pares ordenados de N (N ).

P = {(S, bA), (A, aaA), (A, b), (S, )}

EjerciciosSea S aS | bT y T aa

Derivar abaa, aabaa, aaabaa.

Probar que deriva akba2, k >= 1.

S aS aaS aaaS … akS akbT akbaa

Obtener gramaticas para

a*b a

a*b b*a

(a*b b*a)*

AFD a gramática regular

A partir de un AFD dado por M = (Q, , s, F, ) definiendo la gramática por G = (N, , S, P) con

N = Q

=

S = s

P = {(q, ap)| (q, ap) = p} {(q, )| q F}

q1 q2 q3

a

a,b

a,b

b

q1 aq1 | bq2

q1 aq3 | bq3 |

q1 aq3 | bq3

Tarea

Obtener la expresión regular para la siguiente gramática regular.

S bA | aB |

A abaS

B babS

Gramática regular a AFDSea G una gramática regular, G = (N, , S, P). Definimos M = (Q, , s, F, ) de la siguiente manera

Q = N { f }

s = S

F = { f }

1. Si A 1…nB es una producción, añada a Q los estados q1,…, qn y las transformaciones siguientes

(A, 1…n) = (q1, 2…n) = (qn–1, n) = B

2. Si A 1…nB es una producción, añada a Q los estados q1,…, qn y las transiciones siguientes

(A, 1…n) = (q1, 2…n) = (qn–1, n) = f

Ejemplo

s q1 q2

a

a

b

S bA | aB |

A abaS

B babS

q3

b

a

q1

q4

q5

q6

a

b b

Ejercicios

Obtener AFNs para la siguientes gramáticas regulares.

S aS | bB | b

B cC

C aS

S abA | B | baB |

A bS | b

B aS

DefiniciónUna gramática libre del contexto (GIC) es un cuarteto (N, , S , P) donde:

N es un conjunto de símbolos llamados no terminales.

es un conjunto finito y no vacío de símbolos terminales.

S N es el símbolo inicial

P es una colección, de reglas de sustitución, llamadas producciones, que son de la forma A w, donde A N y w es una cadena sobre ( N)*. Es decir, las producciones pueden tener cero, uno o más no terminales que aparezcan en cualquier lugar del lado derecho.

El lenguaje generado es conocido por Lenguaje independiente del contexto (LIC).

Ejemplo

Sea la gramática S aSb |

Esta gramática genera el lenguaje (anbn | n>=0} que no es regular.

EjerciciosSea la gramática S AA

A AAA | a | bA | Ab

Obtener derivaciones para b2aba2ba.

Probar como puede obtenerse una derivación para

Para todo n > 0 y m1, m2,…, m2n+1 >= 0

12221 ... nn mmmm abbaabb

EjerciciosObtener gramáticas independientes del contexto para los siguientes lenguaje

(ambn | m >= n}

(w {a, b}*| w tiene el doble de aes que de bes}

(ambn | n <= m <= 2n} S aSb | aaSb |

(ambncpdq | m+n >= p+q} S aS | aSd | A | B | C

A bA | bAc |

B aBc | aB | A |

C bCd | bC | A |

Árboles de derivaciónConsidere la siguiente es una gramática

S AB

A aA | a

B bB | b

La cadena aabbb se puede derivar mediante

S AB AbB AbbB Abbb aAbbb aabbb

El árbol de derivación es S

A B

a A

a B

Bb

b

b

La cadena aabbb se puede derivar también mediante las siguientes derivaciones

S AB aAB aaBBB aabBB aabbB aabbb

S AB aAB aAbB aAbbB aAbbb aabbb

El árbol de derivación es el mismo que el anterior

Considere la siguiente es una gramáticaS SbS | ScS | a

Las siguientes derivaciones son para abaca

S SbS SbScS SbSca Sbaca abaca

S ScS SbScS abScS abacS abaca

Los árboles de derivación se muestran a continuación

S

S S

a S

a

Sc

a

b

S

S S

bS

a

Sa

a

c

S SbS SbScS SbSca Sbaca abaca

S ScS SbScS abScS abacS abaca

Ejemplos S → x | y | z | S + S | S – S | S *S | S/S | (S)

S S + S S + S*S S + S*(S) S + S*(S – S)

x + S*(S – S) x + y*(S – S) x + y*(z – S) x + y*(z – y)

Dibujar el árbol de derivación, ¿es ambiguo?

Una gramática libre de contexto para un lenguaje consistente en todas las cadenas que se pueden formar con las letras a y b, habiendo un número diferente de una que de otra, sería:

S → U | V

U → TaU | TaT

V → TbV | TbT

T → aTbT | bTaT | ε

T genera todas las cadenas con la misma cantidad de letras a que b, U genera todas las cadenas con más letras a, y V todas las cadenas con más letras b.

Otro ejemplo para un lenguaje es {anbncm+n | n>=0 , m>=0} puede ser generado por la siguiente gramática libre de contexto.

S → aSc | BB → bBc | ε

Es ambiguo?

Simplificación de gramáticas independientes del contexto

Sea G = (N, , S, P) una gramática independiente del contexto. Transformaremos G en G'= (N', , S, P') de forma que L(G') = L(G), y para todo A N' se obtenga que A * w para algún w *.

Algoritmo 1.

1. Iniciar N' con todos los no terminales de A para los que A w, es una producción de G, con w *.

2. Inicializar P' con todas las producciones A w para las cuales A N y w *.

3. Repetir

Añadir a N ' todos los no terminales A para los cuales A w, para algún w (N ' *) que sea una producción de P y añadirla P '.

hasta que no puedan añadir más no terminales a N '.

Eliminación de no terminales que no deriven cadenas terminales.

EjemploS Aa | B | D

B b

A aA | bA | B

C abc

C es una producción inútil

1er paso: N’ = {B, C}

2o paso: P = {B b}

3er paso: N’ = {B, C, A, S}

Algoritmo 2. Elimina aquellos terminales y no terminales que no aparezcan en las cadenas que se deriven a partir de S.

Sea G = (N, , S, P) una gramática independiente del contexto.

Transformaremos G en G '= (N', , S, P ') de forma que

L(G ') = L(G),

y para todo X N ' ', se tenga que

S aXb

para las cadenas a y b de (N ' ')*.

Algoritmo 2. (cont.)

1. Inicializar N ' de forma que contenga el símbolo inicial S, e inicializar P ' y ' a .

2. Repetir

Para A N ', si A w es una producción de P, entonces

1. Introducir A w en P '.

2. Para todo no terminal B de w, introducir B en N '.

3. Para todo terminal de w, introducir en '.

hasta que no se puedan añadir nuevas producciones

Algoritmo 3 Identifica el conjunto N, de todos los no terminales anulables en una gramática independiente del contexto.

1. Inicializar N con todos los no terminales A para los cuales existe una producción , A .

2. Repetir

Si B w para algún w (N )* y todos los símbolos de w están en N, añadir B a N.

hasta que no se añadan más no terminales a N.

Algoritmo 3 (cont.)

Una vez identificados los no terminales anulables, se modifican las reglas de producción con el fin de eliminar la producciones .

Esto se realiza sustituyendo producciones de la forma B X1X2…Xn por las producciones que se formen al eliminar los

subconjuntos de Xi que son anulables.

Algoritmo 3 (cont.)

Se crea un nuevo conjunto de producciones P’ como sigue:

Si B X1X2…Xn es una producción de P, entonces en P’

introduciremos todas las producciones de la forma B Y1Y2…Yn,

donde las Yi satisfagan:

Yi = Xi si Xi no es anulable

Yi = Xi o si Xi es anulable

Yi no es para toda i (es decir, no se introduce en P’

ninguna producción de la forma

B )

En una gramática que contenga , se pueden eliminar todas las producciones y después añadir la producción S .

EjemploN = {B, C, D}

S AB S AB | A

A aA | abB | aCa A aA | abB | ab | aCa | aa

B bA | BB | B bA | BB | B

C D dB | d | BCB | BC | CB | BB

D dB | BCB B | C

Con 1: S AB abB abbA abbaA abbaabB abbaab

Con 2: S A abB abbA abbaA abbaab

Eliminación de producciones unitarias

Producciones de la forma A B se conocen como unitarias. Para A N se define

Unitario(A) = {B N | A * B usando solamente producciones unitarias}

Las producciones unitarias agregan pasos inútiles al proceso de derivación de cadenas de terminales.

El siguiente algoritmo elimina todas las producciones unitarias de una gramática G. Sea G = (N, , S, P) se obtendrá G’, tal que G’ = (N, , S, P’) no contiene producciones unitarias como sigue:

Eliminación de producciones unitarias (cont.)

1. Inicializar P’ de forma que contenga todos los elementos de P.

2. Para cada A N, obtener el conjunto Unitario(A).

3. Para cada A para el cual Unitario(A) {A}.

Para cada B Unitario(A).

Para cada producción no unitaria B w de P

Añadir A w a P’

4. Eliminar todas las producciones unitarias que haya en P’.

S A | Aa Unitario(S) = {S, A, B, C, D}

A B Unitario(A) = {A, B, C, D}

B C | bUnitario(B) = {B, C, D}

C D | abUnitario(C) = {C, D}

D b Unitario(D) = {D}

Se introducen las producciones:

S b | ab, A b | ab, B b | ab, C b | ab

Se eliminan las unitarias y resulta:

S b | ab | Aa C b | ab

A b | ab D b

B b | ab

Forma normal de Chomsky Una gramática independiente del contexto esta en forma normal de Chomsky si no contiene producciones y todas las producciones son de la forma A a para a , o de la forma A BC, donde B y C son no terminales.

Para transformar una gramática independiente del contexto a la forma normal de Chomsky, primero se eliminan todas las transformaciones , los símbolos inútiles y las producciones unitarias de G.

Si se tiene una producción de la forma A w, con |w| > 1, donde w = X1X2…Xn. Si Xi es un símbolo terminal ,

sustituimos Xi por un nuevo no terminal C y añadimos la

producción C . De esta forma A w contendrá solo no

terminales.

Forma normal de Chomsky (cont.)

La producción tendrá la forma A B1B2…Bn, esta se puede

reemplazar por las producciones

A B1D1

D1 B2D2

…

Dn-2 Bn-1Bn

donde los Di son nuevo no terminales.

S bA | aB

A bAA | aS | a

B aBB | bS | b

Después de la primera transformación:

S CbA | CaB

A CbAA | CaS | a

B CaBB | CbS | b

Ca a

Cb b

Después de la segunda transformación:

S CbA | CaB

A CbD1 | CaS | a

D1 A A

B CaD2 | CbS | b

Ca a

Cb b

D2 BB

Propiedades de los lenguajes independientes del contexto

Se puede probar mediante inducción que, si se puede derivar w y | w | >0, la derivación tiene 2 | w | etapas en una gramática en forma normal de Chomsky.

En el nivel m del árbol de derivación hay, como máximo, 2m nodos padre, por tanto, el camino más largo en un árbol de derivación consta de m + 2 nodos, entonces 2m es la longitud máxima de la cadena derivada.

Lema del bombeo para GIC Sea L un LIC que no contiene . Existe un entero k para el

cual, si z L y | z | > k, entonces z se puede volver a escribir como z = uvwxy con las propiedades siguientes:

1. | vwx | k.

2. Al menos o v o x no es .

3. uviwxiy L para todo i 0.

Demostración. Sea G = (N, , S, P) con L = L(G) y sea n el número de no terminales de N y k = 2n. Supongamos z L con | z | > k.

Lema del bombeo para GIC (cont.)

El camino más largo de derivación debe contener n + 2 nodos, n + 1 serán no terminales, por tanto, algún no terminal se repite. Entonces

S * uAy * uvAxy * uvwxy = z

por tanto | vwx | 2n. Puesto que A * vAx, debemos tener A * viAxi para algún i 0. Por tanto S * uviwxiy para todo i 0. Como A * vAx, se debe tener que A BC * vAx * vwx. Entonces B * v y C * Ax o si no B * vA y C * x. En el primer caso | v | 1 y en el segundo | x | 1, con lo que o v o x no es .

EjemploConsiderar el lenguaje L = {aibj | j = i2}.

Si z L, z = akbk^2, por el lema del bombeo z = uvwxy.

Si v = arbs, vi = (arbs)i y por tanto no pertenece a L. Igualmente si x = arbs. Las únicas posibilidades son

v = ar y x = as

v = br y x = bs v = ar y x = bs.

En el primer caso tenemos: uv2wx2y = ak+r+sbk^2

En el segundo caso tenemos: uv2wx2y = akbk^2+r+s

En el tercer caso tenemos: uv2wx2y = ak+(i–1)rbk^2+(i–1)s

Los cuales no pertenecen a L.

Lema

Sea G = (N, , S, P) una GIC que no tiene producciones y que está en forma normal de Chomsky. Sea x una cadena de *. Se puede determinar, para cada A N y para cada subcadena w de x, si A * w.

Demostración. Sea n = | x | y sea wij la subcadena que

comienza en la posición i y tiene j caracteres. Probaremos el lema con inducción sobre j.

Si j = 1, entonces A * w si y solo si existe la producción A wij esta en P, por tanto se puede

determinar lo enunciado en el lema.

Lema

Ahora supongamos que se cumple para cadenas de longitud menor que j con j > 1. Observe que A wij si

y solo si A BC para algunos B y C, los cuales B * wik y C * wk+1,j-k para k entre 1 y j 1.

Entonces tanto wik como wk+1,j-k tiene longitud menor

que j y se puede determinar si B * wik y si C * wk+1,j-

k.

De lo anterior, si j = n entonces se puede determinar si S * w1,j = w1,n = x. Es decir si x L(G) para cada x

*.

Algoritmo CYK (Cocke, Younger y Kasami)

Sirve para determinar si x L(G).

1. Para cada i = 1, 2, …, n, sea

Ni1 = {A | A wi1}

Es decir, Ni1 es el subconjunto de todos los no terminales que producen el

i-ésimo símbolo de x.

2. Para cada j = 2, 3, …, n, hacer lo siguiente:

Para cada i = 1, 2, …, n - j + 1, hacer lo siguiente:

a. Iniciar Nij =

b. Para cada k = 1, 2, …, j 1, añadir a Nij todos los no

terminales A para los cuales A BC, con B Nik y C

Ni+k,jk.

3. Si S N1n, entonces x L(G).

Ejemplo de CYKSea la gramática

S AB | BC

A BA | a

B CC | b

C AB | a

Para la cadena bbab se genera la siguiente tabla

Para la cadena bbab se genera la siguiente tabla

j = 2, i = 1..3 y k = 1, Nij Ni+k,j–k = N12

N21, N22 N31, N32 N41,

j = 3, i = 1..2 y k = 1..2 Nij Ni+k,j–k = N13

N22, N13 N31, N23 N32, N23 N41,

j = 4, i = 1 y k = 1..3 Nij Ni+k,j–k = N14

N23, N14 N32, N14 N41,

B B A S, CB A, S S,C

A,C S, CB

j = 1 j = 2 j = 3 j = 4

j = 1

j = 2

j = 3

j = 4

b

b

a

b

Demostrar que bba, bab, babba pertenecen al lenguaje anterior

Algunos teoremas

Teorema. Si L1 y L2 son lenguajes independientes del contexto, entonces L1 L2 es un lenguaje independiente del contexto.

Teorema. Si L es un lenguaje independiente del contexto, entonces L* es un lenguaje independiente del contexto.

Teorema. La concatenación de lenguajes independientes del contexto es independiente del contexto.

Los lenguajes independientes del contexto no son cerrados respecto a la intersección ni el complemento.

Lenguajes Independientes del Contexto Teoría del Autómata.

Documents

Transcript of Lenguajes Independientes del Contexto Teoría del Autómata.