train_teste.ipynb

{
 "cells": [
  {
   "cell_type": "code",
   "execution_count": 2,
   "metadata": {},
   "outputs": [],
   "source": [
    "import re\n",
    "import pandas as pd\n",
    "import matplotlib.pyplot as plt\n",
    "from matplotlib.pyplot import figure\n",
    "\n",
    "from os      import listdir\n",
    "from os.path import isfile, join"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "metadata": {},
   "outputs": [],
   "source": [
    "def print_dataframe(df):\n",
    "    style_df = (df.style.set_properties(**{'text-align': 'left'})\n",
    "                                        .set_table_styles([ dict(selector='th',\n",
    "                                                                 props=[('text-align','left')])])\n",
    "                   )\n",
    "    return style_df\n",
    "\n",
    "def get_txts(path):\n",
    "    years = [join(path, x) for x in listdir(path) if not isfile(join(path, x))]\n",
    "    txts = []\n",
    "    for year in years:\n",
    "        months = [join(year, x) for x in listdir(year) if not isfile(join(year, x))]\n",
    "        for month in months:\n",
    "            txts += [join(month, x) for x in listdir(month) if isfile(join(month, x))]\n",
    "    return txts"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 4,
   "metadata": {},
   "outputs": [],
   "source": [
    "dodfs_space_dir = \"/exp/knedle/Regex/data/dodfs_txt_espaco\"\n",
    "dodfs_space_files = get_txts(dodfs_space_dir)\n",
    "\n",
    "dodfs_n_dir = \"/exp/knedle/Regex/data/dodfs_txt_barra_n\"\n",
    "dodfs_n_files = get_txts(dodfs_n_dir)\n",
    "\n",
    "output = \"./results\""
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 5,
   "metadata": {},
   "outputs": [],
   "source": [
    "class Regex:\n",
    "    \n",
    "    def __init__(self, text):\n",
    "        self._text = text\n",
    "        self._raw_acts = {}\n",
    "        self._acts = []\n",
    "        self._columns = []\n",
    "        self.data_frame = pd.DataFrame()\n",
    "    \n",
    "    def find_all(self, rule, flag=0):\n",
    "        return re.findall(rule, self._text, flags=flag)\n",
    "    \n",
    "    def find_in_act(self, rule, act):\n",
    "        rule = re.compile(rule, re.IGNORECASE)\n",
    "        for match in re.finditer(rule, act):\n",
    "            return match.groups()\n",
    "        return \"nan\"\n",
    "    \n",
    "    def _build_dataframe(self):\n",
    "        if len(self._acts) > 0:\n",
    "            df = pd.DataFrame(self._acts)\n",
    "            df.columns = self._columns\n",
    "            return df\n",
    "        return pd.DataFrame()\n",
    "\n",
    "class Retirements(Regex):\n",
    "    \n",
    "    def __init__(self, text):\n",
    "        super().__init__(text)\n",
    "        self._columns = [\"Tipo do Ato\", \"SEI\", \"Nome\", \"Matrícula\", \"Tipo de Aposentadoria\", \"Cargo\", \"Classe\",\n",
    "               \"Padrao\", \"Quadro\", \"Fundamento Legal\", \"Orgao\", \"Vigencia\", \"Matricula SIAPE\"]\n",
    "        \n",
    "        self.rules = {\"nome\": \"\\s([^,]*?),\\smatricula\",\n",
    "                      \"matricula\":\"matricula\\s?n?o?\\s([\\s\\S]*?)[,|\\s]\",\n",
    "                      \"tipo_ret\": \"\",\n",
    "                      \"cargo\": \"Cargo de([\\s\\S]*?)\\,\",\n",
    "                      \"classe\": \"[C|c]lasse ([\\s\\S]*?)\\,\",\n",
    "                      \"padrao\": \"[p|P]adr[a|ã]o\\s([\\s\\S]*?),\",\n",
    "                      \"quadro\": \"d?[e|a|o]?(Quadro[\\s\\S]*?)[,|;|.]\",\n",
    "                      \"fundamento\": \"nos\\stermos\\sdo\\s[a|A]rtigo([\\s\\S]*?),\\sa?\\s\",\n",
    "                      \"orgao\": \"Lotacao:|Quadro de Pessoal d[a|e|o]([\\s\\S]*?)[.|,]\",\n",
    "                      \"vigencia\": \"\",\n",
    "                      \"siape\": \"[S|s][I|i][A|a][P|p][E|e]\\s[N|n]?[o|O]?\\s([\\s\\S]*?)[,| | .]\"}\n",
    "                      \n",
    "        self._raw_acts = self._extract_instances()   \n",
    "        self._acts = self._acts_props()\n",
    "        self.data_frame = self._build_dataframe()\n",
    "        \n",
    "        \n",
    "    \n",
    "    def _act_props(self, sei, act_raw):\n",
    "        act = {}\n",
    "        act[\"tipo_ato\"] = \"Aposentadoria\"\n",
    "        act[\"sei\"] = sei\n",
    "        for key in self.rules:\n",
    "            try:\n",
    "                act[key], = self.find_in_act(self.rules[key], act_raw)\n",
    "            except:\n",
    "                act[key] = \"nan\"\n",
    "\n",
    "        return act\n",
    "    \n",
    "    def _acts_props(self):\n",
    "        acts = []\n",
    "        for sei, raw in self._raw_acts.items():\n",
    "            act = self._act_props(sei, raw)\n",
    "            acts.append(act)\n",
    "        return acts        \n",
    "        \n",
    "    \n",
    "    def _extract_instances(self):\n",
    "        start = \"(APOSENTAR|CONCEDER\\sAPOSENTADORIA),?\\s?\"\n",
    "        body = \"([\\s\\S]*?)\"\n",
    "        end = \"[P|p]rocesso:?\\s[s|S]?[e|E]?[i|I]?\\s?[n|N]?[o|O]?\\s?([\\s\\S]*?)[.]\\s\"\n",
    "        rule = start + body + end\n",
    "        found = self.find_all(rule)\n",
    "        results = {}\n",
    "        for instance in found:\n",
    "            start, body, sei = instance\n",
    "            results[sei] = body\n",
    "            \n",
    "        return results    "
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 6,
   "metadata": {},
   "outputs": [],
   "source": [
    "res_dfs = []\n",
    "raw_acts = {}\n",
    "acts = []\n",
    "for txt in dodfs_n_files:\n",
    "    txt_str = open(txt, \"r\").read()\n",
    "    ret = Retirements(txt_str)\n",
    "    raw_acts.update(ret._raw_acts)\n",
    "    acts += ret._acts\n",
    "    if not ret.data_frame.empty:\n",
    "        res_dfs.append(ret.data_frame)\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 24,
   "metadata": {},
   "outputs": [
    {
     "ename": "NameError",
     "evalue": "name 'nan' is not defined",
     "output_type": "error",
     "traceback": [
      "\u001b[0;31m---------------------------------------------------------------------------\u001b[0m",
      "\u001b[0;31mNameError\u001b[0m                                 Traceback (most recent call last)",
      "\u001b[0;32m<ipython-input-24-161e1b06730c>\u001b[0m in \u001b[0;36m<module>\u001b[0;34m()\u001b[0m\n\u001b[1;32m      4\u001b[0m     \u001b[0;32mfor\u001b[0m \u001b[0md\u001b[0m \u001b[0;32min\u001b[0m \u001b[0macts\u001b[0m\u001b[0;34m:\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m      5\u001b[0m         \u001b[0;32mif\u001b[0m \u001b[0mkey\u001b[0m \u001b[0;34m==\u001b[0m \u001b[0md\u001b[0m\u001b[0;34m[\u001b[0m\u001b[0;34m'sei'\u001b[0m\u001b[0;34m]\u001b[0m\u001b[0;34m:\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0;32m----> 6\u001b[0;31m             \u001b[0;32mif\u001b[0m \u001b[0md\u001b[0m\u001b[0;34m[\u001b[0m\u001b[0;34m'fundamento'\u001b[0m\u001b[0;34m]\u001b[0m\u001b[0;34m!=\u001b[0m\u001b[0mnan\u001b[0m\u001b[0;34m:\u001b[0m \u001b[0;32mcontinue\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0m\u001b[1;32m      7\u001b[0m             \u001b[0mfund\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0md\u001b[0m\u001b[0;34m[\u001b[0m\u001b[0;34m'fundamento'\u001b[0m\u001b[0;34m]\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mstrip\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m      8\u001b[0m             \u001b[0mraw\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0mraw_acts\u001b[0m\u001b[0;34m[\u001b[0m\u001b[0mkey\u001b[0m\u001b[0;34m]\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mstrip\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n",
      "\u001b[0;31mNameError\u001b[0m: name 'nan' is not defined"
     ]
    }
   ],
   "source": [
    "train_data = []\n",
    "LABEL = 'FUNDAMENTO'\n",
    "for i,key in enumerate(raw_acts.keys()):\n",
    "    for d in acts:\n",
    "        if key == d['sei']:\n",
    "            fund = d['fundamento'].strip()\n",
    "            raw = raw_acts[key].strip()\n",
    "            init = raw.find(fund)\n",
    "            if init != -1:\n",
    "                train_data.append(\n",
    "                    (raw, {\"entities\": [(init, init+len(fund), LABEL)]})\n",
    "                )"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 12,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "FUNDAMENTO\n"
     ]
    }
   ],
   "source": [
    "print(LABEL)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 13,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Losses {'ner': 17630.887260628446}\n",
      "Losses {'ner': 5234.509716062698}\n",
      "Losses {'ner': 3780.409081236402}\n",
      "Losses {'ner': 2670.5895904724093}\n",
      "Losses {'ner': 2951.3014396307967}\n",
      "Losses {'ner': 2336.076720316085}\n",
      "Losses {'ner': 2675.4149617356734}\n",
      "Losses {'ner': 2737.265935601434}\n",
      "Losses {'ner': 2560.16684286489}\n",
      "Losses {'ner': 2417.8846285219092}\n",
      "Losses {'ner': 2032.9189047379477}\n",
      "Losses {'ner': 1923.073726423117}\n",
      "Losses {'ner': 2539.712054512324}\n",
      "Losses {'ner': 1920.806004478319}\n",
      "Losses {'ner': 1874.8772986847134}\n",
      "Losses {'ner': 1866.7543950279187}\n",
      "Losses {'ner': 1929.770917953964}\n",
      "Losses {'ner': 2077.999766481389}\n",
      "Losses {'ner': 1878.7888288056886}\n",
      "Losses {'ner': 2192.172336645453}\n",
      "Losses {'ner': 2122.971829073325}\n",
      "Losses {'ner': 2136.7629659119293}\n",
      "Losses {'ner': 2005.7487168013415}\n",
      "Losses {'ner': 2083.755299382471}\n",
      "Losses {'ner': 2110.6965388253107}\n",
      "Losses {'ner': 1985.2573005220386}\n",
      "Losses {'ner': 2011.397399628239}\n",
      "Losses {'ner': 1865.8530672846769}\n",
      "Losses {'ner': 2220.436418302404}\n",
      "Losses {'ner': 2120.87263984331}\n"
     ]
    }
   ],
   "source": [
    "from __future__ import unicode_literals, print_function\n",
    "\n",
    "import plac\n",
    "import random\n",
    "import warnings\n",
    "from pathlib import Path\n",
    "import spacy\n",
    "from spacy.util import minibatch, compounding\n",
    "\n",
    "random.seed(0)\n",
    "n_iter=30\n",
    "nlp = spacy.blank(\"pt\")\n",
    "ner = nlp.create_pipe(\"ner\")\n",
    "nlp.add_pipe(ner)\n",
    "ner.add_label(LABEL)\n",
    "optimizer = nlp.begin_training()\n",
    "move_names = list(ner.move_names)\n",
    "# get names of other pipes to disable them during training\n",
    "pipe_exceptions = [\"ner\", \"trf_wordpiecer\", \"trf_tok2vec\"]\n",
    "other_pipes = [pipe for pipe in nlp.pipe_names if pipe not in pipe_exceptions]\n",
    "# only train NER\n",
    "with nlp.disable_pipes(*other_pipes) and warnings.catch_warnings():\n",
    "    # show warnings for misaligned entity spans once\n",
    "    warnings.filterwarnings(\"once\", category=UserWarning, module='spacy')\n",
    "    \n",
    "    sizes = compounding(1.0, 4.0, 1.001)\n",
    "    # batch up the examples using spaCy's minibatch\n",
    "    for itn in range(n_iter):\n",
    "        random.shuffle(train_data)\n",
    "        batches = minibatch(train_data, size=sizes)\n",
    "        losses = {}\n",
    "        for batch in batches:\n",
    "            texts, annotations = zip(*batch)\n",
    "            nlp.update(texts, annotations, sgd=optimizer, drop=0.35, losses=losses)\n",
    "        print(\"Losses\", losses)\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 27,
   "metadata": {
    "scrolled": false
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Entities in 'ELISANGELA JUSTINIANO GONCALVES, matricula 204.579-6, no Cargo de Professor\n",
      "de Educacao Basica, Padrao 20, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do artigo\n",
      "40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda Constitucional\n",
      "no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de marco de 2012.\n",
      "'\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda Constitucional\n",
      "no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de marco de 2012.\n",
      "\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ANDREA MASSI CARNEIRO, matricula 66.185-6, no Cargo de\n",
      "Professor de Educacao Basico, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos\n",
      "do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho de 2005,\n",
      "com as vantagens previstas no artigo 5o da Lei no 4.584, de 08 de julho de 2011. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a EDILMA TAVARES CAMILO SANTOS, matricula 26.672-8, no\n",
      "Cargo de Professor de Educacao Basico, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal,\n",
      "nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho\n",
      "de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a EUNICE GONCALVES FELIPE, matricula 66.922-9, no Cargo de\n",
      "Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 11, Padrao 1, Etapa IV, do Quadro de Pessoal\n",
      "do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional\n",
      "n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional\n",
      "n 47\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a JAMILDES PEREIRA DOS SANTOS, matricula 45.665-9, no Cargo\n",
      "de Agente de Gestao Educacional/ Conservacao e Limpeza, Nivel 10, Padrao 1, Etapa IV, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a JESUITA ROSA DE OLIVEIRA, matricula 37.078-9, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos\n",
      "do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de 2003 e artigo\n",
      "2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a JOSIAS DIAS SOARES, matricula 47.391-X, no Cargo de Agente de\n",
      "Gestao Educacional/Vigilancia, Nivel 9, Padrao 3, Etapa III, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho de\n",
      "2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARIA CRISTINA CARVALHO DE OLIVEIRA, matricula 35.847-\n",
      "9, no Cargo de Professor de Educacao Basica, Padrao 24, Etapa IV, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro\n",
      "de 2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro\n",
      "\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARIA DAS GRACAS SILVA FRANCA, matricula 67.047-2, no\n",
      "Cargo de Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 10, Padrao 3, Etapa IV, do Quadro\n",
      "de Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARLENE IONE PANTA FERREIRA, matricula 69.673-0, no Cargo\n",
      "de Agente de Gestao Educacional/Servicos Gerais, Nivel 10, Padrao 2, Etapa III, do Quadro de Pessoal do\n",
      "Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a TELMA APARECIDA CARLOS MONTEIRO, matricula 39.770-9,\n",
      "no Cargo de Professor de Educacao Basica, Padrao 23, Etapa III, do Quadro de Pessoal do Distrito Federal,\n",
      "nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho\n",
      "de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ANERCI UMBELINA DA FONSECA LIMA, matricula 69.066-\n",
      "X, no Cargo de Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 10, Padrao 3, Etapa IV,\n",
      "do Quadro de Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico\n",
      "da Emenda Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico\n",
      "\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ELIZABETH CARVALHO MARANINI, matricula 48.839-9, no\n",
      "Cargo de Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "47 de 06 de julho de 2005, com as vantagens previstas no artigo 5o da Lei no 4.584, de 08 de julho\n",
      "de 2011. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a GILMAR TAVARES, matricula 33.125-2, no Cargo de Professor\n",
      "de Educacao Basica, Padrao 24, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de 2003 e artigo\n",
      "2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARIA CRISTINA HONORATA DA COSTA GONTIJO,\n",
      "matricula 64.767-5, no Cargo de Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARIA DALVA SANTOS SILVA, matricula 22.197-X, no C a rg o\n",
      "de Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 9, Padrao 2, Etapa V, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARIA DE LOURDES SOUZA, matricula 63.291-0, no Cargo de\n",
      "Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 11, Padrao 1, Etapa III, do Quadro\n",
      "Suplementar do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da\n",
      "Emenda Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARIA ESMERALDA OLIVEIRA DA SILVA, matricula 32.096-\n",
      "X, no Cargo de Professor de Educacao Basica, Padrao 24, Etapa IV, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de\n",
      "dezembro de 2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de\n",
      "dezembro\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARILENE QUIRINO DOS SANTOS, matricula 69.465-7, no\n",
      "Cargo de Agente de Gestao Educacional/Copa e Cozinha, Nivel 10, Padrao 2, Etapa V, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARISIA APARECIDA COTA, matricula 67.523-7, no Cargo de\n",
      "Agente de Gestao Educacional/Servicos Gerais, Nivel 10, Padrao 2, Etapa III, do Quadro de Pessoal\n",
      "do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MARLENE FARIAS DOS SANTOS, matricula 69.866-0, no\n",
      "Cargo de Agente de Gestao Educacional/Servicos Gerais, Nivel 10, Padrao 2, Etapa IV, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a REGIA DANZIGER DA SILVA, matricula 29.204-4, no Cargo de\n",
      "Tecnico de Gestao Educacional/Apoio Administrativo, Nivel 8, Padrao 2, Etapa V, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ROSEMARY FRAZAO FURTADO, matricula 22.399-9, no C a rg o\n",
      "de Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 9, Padrao 2, Etapa V, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Entities in 'a ROSANE SELVINA UMBELINO AMARAL, matricula 27.916-1,\n",
      "no Cargo de Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ROSANGELA MARIA PEREIRA DIAS CUNHA, matricula\n",
      "34.456-7, no Cargo de Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do\n",
      "Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a VERA LUCIA SANTIAGO, matricula 69.785-0, no Cargo de\n",
      "Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 10, Padrao 3, Etapa V, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a WALTER DE OLIVEIRA, matricula 64.483-8, no Cargo de\n",
      "Professor de Educacao Basico, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de\n",
      "julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'ALESSANDRO MOREIRA FERRAZ PAIVA, matricula 300.384-1, no Cargo de Professor\n",
      "de Educacao Basica, Padrao 20, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do artigo\n",
      "40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de\n",
      "marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de\n",
      "marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'ALINE PEIXOTO SOUTO BURIGO, matricula 26.580-2, no Cargo de Professor de\n",
      "Educacao Basica, Padrao 23, Etapa III, do Quadro de Pessoal do Distrito Federal, nos termos do artigo\n",
      "40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de\n",
      "marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de\n",
      "marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'MARIA CELESTE DOS SANTOS SEICA GONCALVES, matricula 38.381-3, no Cargo\n",
      "de Professor de Educacao Basica, Padrao 19, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de\n",
      "marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de\n",
      "marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'RAILA RIBEIRO VIGNOLI, matricula 205.801-4, no Cargo de Professor de Educacao\n",
      "Basica, Padrao 18, Etapa III, do Quadro de Pessoal do Distrito Federal, nos termos do artigo 40, 1o,\n",
      "inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda Constitucional\n",
      "no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda Constitucional no 41, de 31\n",
      "de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o,\n",
      "inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda Constitucional\n",
      "no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda Constitucional no 41, de 31\n",
      "de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29 de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ADEMAR LOPES DA SILVA, matricula 57.726-X, no Cargo de\n",
      "Agente de Gestao Educacional/Vigilancia, Nivel 11, Padrao 1, Etapa III, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de\n",
      "06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ANTONIO FERNANDES DE MELO, matricula 300.490-2, no Cargo\n",
      "de Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de 2003\n",
      "e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a JOAQUINA LOPES DE MENDONCA, matricula 22.577-0, no\n",
      "Cargo de Agente de Gestao Educacional/Servicos Gerais, Nivel 09, Padrao 2, Etapa IV, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a OTACILIA JOAQUIM DA SILVA, matricula 32.412-4, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos\n",
      "do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho de 2005.\n",
      "'\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a RITA DE CASSIA DA SILVA, matricula 61.901-9, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos\n",
      "do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho de 2005.\n",
      "'\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a RUTH ROCHA PEREIRA VICENTE, matricula 25.243-3, no Cargo\n",
      "de Professor de Educacao Basica, Padrao 25, Etapa III, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho\n",
      "de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a TERESINHA DO SOCORRO DE NOVAIS, matricula 38.073-3, no\n",
      "Cargo de Professor de Educacao Basica, Padrao 24, Etapa IV, do Quadro de Pessoal do Distrito Federal,\n",
      "nos termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de\n",
      "2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a VILMA DA SILVA MIRANDA, matricula 61.767-9, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos\n",
      "do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de julho de 2005.\n",
      "'\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a ZILMA BATISTA matricula 65.856-1, no Cargo de Agente de\n",
      "Gestao Educacional/Conservacao e Limpeza, Nivel 11, Padrao 1, Etapa IV, do Quadro de Pessoal do\n",
      "Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional\n",
      "n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional\n",
      "n 47\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a LEA LUCIA PACHECO DA COSTA, matricula 202.827-1, no\n",
      "Cargo de Professor de Educacao Basica, Padrao 20, Etapa IV, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a LUCIENE MARIA DE MENDONCA FERREIRA, matricula\n",
      "300.478-3, no Cargo de Professor de Educacao Basica, Padrao 22, Etapa IV, do Quadro de Pessoal do\n",
      "Distrito Federal, nos termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de\n",
      "31 de dezembro de 2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005.\n",
      "'\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de\n",
      "31 de dezembro\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a LUIZ CARLOS VITORINO, matricula 300.398-1, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 22, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de\n",
      "2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a MADALENA SOARES E SILVA, matricula 40.771-2, no Ca rg o\n",
      "de Agente de Gestao Educacional/Conservacao e Limpeza, Nivel 10, Padrao 3, Etapa V, do Quadro\n",
      "de Pessoal do Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da\n",
      "Emenda Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a NORMA SUELLY NOGUEIRA GONCALVES, matricula\n",
      "200.519-0, no Cargo de Professor de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do\n",
      "Distrito Federal, nos termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n 47 de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda\n",
      "Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a RITA DE CASSIA TEIXEIRA DA SILVA GUIMARAES,\n",
      "matricula 203.091-8, no Cargo de Professor de Educacao Basica, Padrao 23, Etapa IV, do Quadro de\n",
      "Pessoal do Distrito Federal, nos termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional\n",
      "no 41, de 31 de dezembro de 2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de\n",
      "2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional\n",
      "no 41, de 31 de\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Entities in 'a RUBENS RICARDO AMADOR, matricula 38.683-9, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 22, Etapa V, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n 47 de 06 de\n",
      "julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 3o, incisos I, II e III, e paragrafo unico da Emenda Constitucional n\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'a SANDRA DE OLIVEIRA ASENJO, matricula 38.134-9, no Cargo\n",
      "de Professor de Educacao Basica, Padrao 22, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do Artigo 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro de\n",
      "2003 e artigo 2o da Emenda Constitucional no 47, de 06 de julho de 2005. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 6o, incisos I, II, III e IV, da Emenda Constitucional no 41, de 31 de dezembro\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'ANA CLAUDIA DA SILVA BARROS, matricula 48.800-3, no Cargo de Professor de\n",
      "Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'ANDREIA LUIZA DA SILVEIRA, matricula 205.968-1, no Cargo de Professor de\n",
      "Educacao Basica, Padrao 13, Etapa III, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'ANGELA MARIA VASCONCELOS DO AMARAL, matricula 202-961-8, no Cargo de\n",
      "Professor de Educacao Basica, Padrao 25, Etapa III, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada\n",
      "pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no\n",
      "70, de 29 de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada\n",
      "pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no\n",
      "70, de 29 de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'BEATRIZ DAS GRACAS DE ALMEIDA, matricula 223.667-2, no Cargo de Professor\n",
      "de Educacao Basica, Padrao 08, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, e  3o, 8o e 17, da Constituicao da Republica Federativa do Brasil, na\n",
      "redacao dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, e artigos 46 e 51 da\n",
      "Lei Complementar no 769, de 01 de julho de 2008. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, e  3o, 8o e 17, da Constituicao da Republica Federativa do Brasil, na\n",
      "redacao dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, e artigos 46 e 51 da\n",
      "Lei Complementar no\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'DEBORA RODRIGUES MANSO, matricula 25.567-X, no Cargo de Agente de Gestao\n",
      "Educacional/Portaria, Nivel 08, Padrao 2, Etapa III, do Quadro de Pessoal do Distrito Federal, nos\n",
      "termos do artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada\n",
      "pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no\n",
      "70, de 29 de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada\n",
      "pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no\n",
      "70, de 29 de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'DEBORAH ANNE BRIGATO, matricula 29.390-3, no Cargo de Tecnico de Gestao\n",
      "Educacional/Secretario Escolar, Nivel 8, Padrao 2, Etapa V, do Quadro de Pessoal do Distrito Federal,\n",
      "nos termos do artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao\n",
      "dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A\n",
      "da Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional\n",
      "no 70, de 29 de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao\n",
      "dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A\n",
      "da Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional\n",
      "no 70, de 29 de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'GERALDO MAGELA RODRIGUES VENANCIO, matricula 40.635-X, no Cargo de\n",
      "Agente de Gestao Educacional/Vigilancia, Nivel 10, Padrao 3, Etapa III, do Quadro de Pessoal do\n",
      "Distrito Federal, nos termos do artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do\n",
      "Brasil, na redacao dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado\n",
      "com o artigo 6o-A da Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela\n",
      "Emenda Constitucional no 70, de 29 de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do\n",
      "Brasil, na redacao dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado\n",
      "com o artigo 6o-A da Emenda Constitucional no 41, de 31 de dezembro de 2003, incluido pela\n",
      "Emenda Constitucional no 70, de 29 de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'LETICIA COSTA ROVO, matricula 212-940-X, no Cargo de Pedagogo/ Orientador\n",
      "Educacional, Padrao 07, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do artigo 40,\n",
      "1o, inciso I, in fine, e  3o, 8o e 17, da Constituicao da Republica Federativa do Brasil, na redacao\n",
      "dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003, e artigos 18, 5o, 46 e 51 da\n",
      "Lei Complementar no 769, de 01 de julho de 2008. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'LUCIANITA CARVALHO DE OLIVEIRA, matricula 43.691-7, no Cargo de Professor\n",
      "de Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'MARIA ROSALIA DA SILVA, matricula 48.449-0, no Cargo de Professor de Educacao\n",
      "Basica, Padrao 25, Etapa II, do Quadro de Pessoal do Distrito Federal, nos termos do artigo 40, 1o,\n",
      "inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o,\n",
      "inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'RENATA PARREIRA PEIXOTO, matricula 48.292-7, no Cargo de Professor de\n",
      "Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'ROSANGELA SANTANA OLIVEIRA, matricula 202.910-3, no Cargo de Professor de\n",
      "Educacao Basica, Padrao 25, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'SAMUEL ALESSANDRO GRANJENSE DE LIMA SARAIVA, matricula 207.567-9,\n",
      "no Cargo de Professor de Educacao Basica, Padrao 17, Etapa V, do Quadro de Pessoal do Distrito\n",
      "Federal, nos termos do artigo 40, 1o, inciso I, e  3o, 8o e 17, da Constituicao da Republica\n",
      "Federativa do Brasil, na redacao dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003,\n",
      "e artigos 46 e 51 da Lei Complementar no 769, de 01 de julho de 2008. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, e  3o, 8o e 17, da Constituicao da Republica\n",
      "Federativa do Brasil, na redacao dada pela Emenda Constitucional no 41, de 31 de dezembro de 2003\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'SINARA DE CAMPOS SOUZA, matricula 300.368-X, no Cargo de Professor de\n",
      "Educacao Basica, Padrao 24, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do\n",
      "artigo 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o, inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela\n",
      "Emenda Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n",
      "Entities in 'TERESA DE SOUSA LIMA, matricula 206.061-2, no Cargo de Professor de Educacao\n",
      "Basica, Padrao 17, Etapa IV, do Quadro de Pessoal do Distrito Federal, nos termos do artigo 40, 1o,\n",
      "inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012. '\n",
      "----- NER-----\n",
      "FUNDAMENTO 40, 1o,\n",
      "inciso I, da Constituicao da Republica Federativa do Brasil, na redacao dada pela Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, combinado com o artigo 6o-A da Emenda\n",
      "Constitucional no 41, de 31 de dezembro de 2003, incluido pela Emenda Constitucional no 70, de 29\n",
      "de marco de 2012.\n",
      "----- REGEX ------\n",
      "nan\n",
      "------------------\n",
      "\n"
     ]
    }
   ],
   "source": [
    "for i,key in enumerate(raw_acts.keys()):\n",
    "    if i > 200: break\n",
    "    for d in acts:\n",
    "        if key == d['sei']:\n",
    "            if d['fundamento'] != 'nan': continue\n",
    "            doc = nlp(raw_acts[key])\n",
    "            print(\"Entities in '%s'\" % raw_acts[key])\n",
    "            print('----- NER-----')\n",
    "            for ent in doc.ents:\n",
    "                print(ent.label_, ent.text)\n",
    "            print('----- REGEX ------')\n",
    "            print(d['fundamento'])\n",
    "            print('------------------')\n",
    "            print('')"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {},
   "outputs": [],
   "source": []
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.7.7"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 2
}