memomemy.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# мемы с мемориалом 6.02"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 8,
   "metadata": {},
   "outputs": [
    {
     "ename": "IndentationError",
     "evalue": "expected an indented block (<ipython-input-8-ef0f730754eb>, line 12)",
     "output_type": "error",
     "traceback": [
      "\u001b[0;36m  File \u001b[0;32m\"<ipython-input-8-ef0f730754eb>\"\u001b[0;36m, line \u001b[0;32m12\u001b[0m\n\u001b[0;31m    fw.write(spisok())\u001b[0m\n\u001b[0m     ^\u001b[0m\n\u001b[0;31mIndentationError\u001b[0m\u001b[0;31m:\u001b[0m expected an indented block\n"
     ]
    }
   ],
   "source": [
    "import re\n",
    "import csv\n",
    "\n",
    "def spisok():\n",
    "    with open('/Users/lizastovba/Desktop/memoir.csv', 'r', encoding=\"utf-8\") as f:\n",
    "        text = f.read()\n",
    "        text = re.sub(r'(Упомянутые имена:?\\n)(.+){,15}\\n', r'\\1<person_id base_memo_id = \"\">\\2</person_id>\\n', text, flags = re.I)\n",
    "    return text\n",
    "\n",
    "def main():\n",
    "    with open('memmem.csv', 'w', encoding = 'utf-8') as fw:\n",
    "    fw.write(spisok())\n",
    "\n",
    "#if name == 'main':\n",
    "#main()"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "readlines\n",
    "есть упомянутые имена\n",
    "если нет\n",
    "переключаемся в режим замены\n",
    "два режима - когда по упомянутым именам\n",
    "переменная флаг\n",
    "если поднят флаг, каждую строчку добавляем тэгом\n",
    "flag = 0\n",
    "if flag != 0:\n",
    "format можно применить к строке\n",
    "stripr - справа\n",
    "если нет имен, аппендим в список\n",
    "каждую строчку аппендим\n",
    "если видим, дописываем тэги и аппендим\n",
    "соединяем джойном\n",
    "дописать тэг в \n",
    "разбить по точке с запятой сплитом и добавить тэги\n",
    "\n",
    "#Упомянутые имена\\n\\w.+\\s\\w.+\\s\\w.+\n",
    "#Упомянутые имена:\\s(.+(;|.)\\s)+\n",
    "#Упомянутые имена:\\s(.+;\\s)+"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 9,
   "metadata": {},
   "outputs": [],
   "source": [
    "import re\n",
    "import csv\n",
    "\n",
    "l = []\n",
    "f = open('/Users/lizastovba/Desktop/memoir.csv', 'r', encoding=\"utf-8\")#открываем файл...относительный путь прописать пока не умеется...\n",
    "text = f.readlines() #считываем текст в файле\n",
    "#lines = text.split(\"\\n\") #разбиваем текст на строки"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 16,
   "metadata": {},
   "outputs": [
    {
     "name": "stderr",
     "output_type": "stream",
     "text": [
      "IOPub data rate exceeded.\n",
      "The notebook server will temporarily stop sending output\n",
      "to the client in order to avoid crashing it.\n",
      "To change this limit, set the config variable\n",
      "`--NotebookApp.iopub_data_rate_limit`.\n",
      "\n",
      "Current values:\n",
      "NotebookApp.iopub_data_rate_limit=1000000.0 (bytes/sec)\n",
      "NotebookApp.rate_limit_window=3.0 (secs)\n",
      "\n"
     ]
    }
   ],
   "source": [
    "for line in text:\n",
    "    if line.startswith(\"Упомянутые имена\"):\n",
    "        l.append(line)\n",
    "    elif line == '':\n",
    "        break\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {},
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {},
   "outputs": [],
   "source": [
    "f = open(\"/Users/lizastovba/Desktop/testfileresults.txt\", \"w\")\n",
    "f.write(text)\n",
    "f.close()"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {},
   "outputs": [],
   "source": [
    "import re\n",
    "import csv\n",
    "\n",
    "l = []\n",
    "f = open('/Users/lizastovba/Desktop/memoir.csv', 'r', encoding=\"utf-8\")#открываем файл...относительный путь прописать пока не умеется...\n",
    "text = f.readlines() #считываем текст в файле\n",
    "#lines = text.split(\"\\n\") #разбиваем текст на строки\n",
    "text1 = str(text)\n",
    "\n",
    "\n",
    "\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 18,
   "metadata": {},
   "outputs": [],
   "source": [
    "for line in text:\n",
    "    if line.startswith(\"Упомянутые имена\"):\n",
    "        l.append(line)\n",
    "    elif line == '':\n",
    "        break"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 21,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "['Упомянутые имена: Абрамов Алексей – уголовник-рецидивист, з/к; Баландин Алексей Александрович – академик, з/к; Башилов Иван Яковлевич – профессор, директор Института редких металлов, з/к; Берия Лаврентий Павлович; Валава, семья – друзья автора; Давыдов Георгий Савельевич – инженер-металлург, з/к; Корсаков Леонид Павлович – нач. УМГБ по Калужской обл.; Левочевский Иван Алексеевич – нач. строительства агломерационной фабрики; Лермонтов Михаил Юрьевич; Мюллер Роберт Евгеньевич (Людвигович) – профессор ЛГУ, з/к; Пушкин Александр Сергеевич; Рендел Всеволод Васильевич – физик, з/к; Розенблюм Анна Анатольевна – врач Лубянской тюрьмы, з/к; Филимонов Николай Александрович – директор завода, з/к.\\n',\n",
       " 'Упомянутые имена:\\n',\n",
       " 'Упомянутые имена:\\n',\n",
       " 'Упомянутые имена: Анненский Иннокентий Федорович - поэт; Багрицкий Эдуард Георгиевич -  поэт.\\n',\n",
       " 'Упомянутые имена: Белик - работница аппарата Коминтерна, з/к; Бредихин Александр Иосифович - нач. «АЛЖИРа»; Димитров Георгий - болгарский революционер;  Енукидзе Нина -  дочь  Т. Т.  Енукидзе,  з/к;  Енукидзе Т. Т. (Семен)  директор Гознака, репрессирован; Зильберберг Софья Александровна - врач,  з/к; Каменская Людмила - инженер, з/к; Кетчина (Кетчик) Эмилия - инженер-строитель, з/к; Ковалевич Валентина - педагог, з/к; Кравченко Леся - член ЦК ЛКСМ Украины, з/к; Куница - работник ОНКВД г. Мариуполя; Лазуркина Д. А.  сотрудница секретариата В. М. Молотова, з/к; Линин Отто Георгиевич - нач. Карлага; Морева Людмила - инженер, з/к; Матронина  (Матренина)  Ольга  Петровна -  инженер-керамист,  з/к;  Мелик Ольга  Федоровна - инженер-механик,  з/к;  Мишин -  нач. 3-й  части\\n',\n",
       " 'Упомянутые имена: Бажанова Ольга Николаевна - сестра автора; Везенер - ст. лейтенант, следователь; Денисов (псевдоним Дени) Владимир Михайлович - художник, з/к; Ежов Николай Иванович; Завенягин Авраамий Павлович - зам. наркома внутренних дел;  Зандгаген (Зандгагин) Петр Петрович-  инженер, з/к; Казаченко Михаил Алексеевич - гл. инженер строительства завода; Кибальчич - потомок революционера Н.И.Кибальчича, бывший царский офицер, з/к; Коросташевский - нач. Комдортрансстроя; Кудрявцев Андрей Федорович - профессор Института стали, з/к; Метаксопуло - нач. лагеря; Михальчук - з/к; Попов Александр Степанович - русский ученый- физик; Потапов А. Г. - нач. лагпунктов Ивдельлага; Раев Александр Николаевич -  инженер, з/к; Римский-Корсаков Дмитрий Андреевич - преподаватель,  племянник композитора, з/к; Стуков-  нач. лагеря; Тарасюк Сергей Артемьевич - майор НКВД, нач. Ивдельлага.\\n',\n",
       " 'Упомянутые имена: Баглюк Григорий – журналист, друг автора, репрессирован; Барабанов Василий Арсеньевич – нач. Воркутлага; Бухарин Николай Иванович; Горбатов Борис – писатель, друг автора; Горелов Виктор – друг автора; Гран Михаил – друг автора, репрессирован; Григорович – нач. оперчекистской части Печорлага; Зиновьев Александр Александрович – писатель, диссидент; Каганович Лазарь Моисеевич; Корнеев – нач. воркутинских шахт; Ленин Владимир Ильич; Манохин – нач. воркутинской тюрьмы; Маркс Карл; Масленников Иван Иванович – зам. министра внутренних дел; Самодуров – сержант, надзиратель; Серов Владимир – журналист, друг автора, репрессирован; Сталин Иосиф Виссарионович; Цыпин Григорий Евгеньевич – журналист, друг автора; Чучелов – нач. оперчекистской части Воркутлага; Югов Михаил – друг автора, репрессирован.\\n',\n",
       " 'Упомянутые имена: Адамов – уголовник, з/к; Александр II – российский император; Александров – инженер, эмигрант; Бабарин – балетмейстер, з/к; Баканичев Ефим – отец автора, рабочий; Бобков – морской офицер, з/к; Борченков Павел – военнопленный, друг автора; Власов Андрей Андреевич – советский генерал, организатор РОА; Голиков Филипп Иванович – советский генерал; Давыдов – подполковник, нач. УМГБ по Московскому метрополитену; Джилас Милован – югославский коммунист, впоследствии диссидент; Исе – эстонец, инженер, з/к; Кайванов Артем – военнопленный, друг автора; Краснов Петр Николаевич – генерал Белой армии, эмигрант; Максимов – офицер, з/к; Мусин-Пушкин – инженер-текстильщик, з/к; Огурцов – военнопленный, друг автора; Паулюс Фридрих – немецкий генерал-фельдмаршал; Снигиревы – крестьянская семья, репрессированы; Соболев – военнопленный, лагерный вор; Сушкин Николай – военнопленный, друг автора; Тэсс Татьяна Николаевна – журналистка; Фадеев Александр Александрович – писатель; Френкель – з/к; Хрущ Таисия Николаевна – остарбайтер, подруга автора; Хрущев Никита Сергеевич.\\n',\n",
       " 'Упомянутые имена: Арватова-Тухачевская Елизавета Николаевна – сестра М.Н.Тухачевского, з/к; Бадин – следователь Хабаровского УНКВД; Белый Матвей Осипович – работник НКВД; Белый Феликс Матвеевич (псевдоним Владимир Ленский) – сын М. О. Белого, з/к; Блюхер Василий Константинович – Маршал Советского Союза; Бородавкин – секретарь горкома партии в Забайкалье, репрессирован; Брат (Жуков) А. В. – журналист; Варейкис Григорий Михайлович – секретарь Хабаровского крайкома партии, репрессирован; Воронова Ольга — сокамерница автора; Гамарник Ян Борисович – нач. Политуправления РККА; Калмыков Иван Павлович – есаул Уссурийского казачьего войска; Крутов – председатель Хабаровского крайисполкома; Крутова Антонина – сестра Крутова, сокамерница автора; Крутова Надежда – сестра Крутова, сокамерница автора; Лаврентьев (Картвелишвили) Лаврентий Иосифович – секретарь Хабаровского крайкома партии, репрессирован; Левада Евдокия – солагерница автора; Ленин Владимир Ильич; Люшков [в тексте ошибочно: Юшков] Генрих Самуилович – нач. УНКВД Дальневосточного края; Машин замполит «АЛЖИРа»; Оганезов Павел – друг Д. Ф. Шилова; Приходько Серафима – сокамерница автора; Семенов Григорий Михайлович – генерал-лейтенант, атаман Забайкальского казачьего войска; Сидоркин Алексей Павлович – нач. отдела Хабаровского УНКВД; Собольков Сергей – практикант Хабаровского УНКВД; Тухачевский Михаил Николаевич; Угланов Николай Александрович – секретарь МК партии, репрессирован; Угланова Анна Алексеевна – жена Угланова Н.А., з/к; Шилов Дмитрий Федорович – муж автора; Шилов Федор – отец Д. Ф. Шилова.\\n',\n",
       " 'Упомянутые имена: Барская Маргарита – героиня воспоминаний; Горький Алексей Максимович; Довженко Александр Петрович – кинорежиссер; Ибсен Генрик – писатель; Комиссаржевская Вера Федоровна – актриса; Кригер – председатель ЦК Союза кинематографистов; Макаренко Антон Семенович – педагог; Радек Карл Бернгардович – журналист; Роллан Ромен – писатель; Татищев Александр Николаевич – руководитель театра «Красный факел»; Чардынин Петр Иванович кинорежиссер, муж М. Б. Барской.\\n',\n",
       " 'Упомянутые имена: Баранский Николай Николаевич – профессор ИМО; Силин – нач. Управления кадров МИДа; Тарасов Александр – студент МГИМО; Францев Юрий Павлович – директор МГИМО.\\n',\n",
       " 'Упомянутые имена: Адаскин Матвей Львович – одноделец автора; Иванов Яков Васильевич – одноделец автора.\\n',\n",
       " 'Упомянутые имена: Астахов Валентин Васильевич – дипломат, з/к; Баранов – офицер, з/к; Грязнов – лейтенант МВД; Монтан Ив – французский певец и киноактер; Петров – генерал; Пономарев Владимир – офицер, з/к; Синьоре Симона – французская киноактриса.\\n',\n",
       " 'Упомянутые имена: Артемов — майор, следователь МГБ; Балановский Леонид Эмильевич — инженер, з/к; Бейлис М. К. — обвиняемый по «еврейскому делу» в Горлаге, з/к; Бергман И. — немецкий еврей, з/к; Васюков В. В. — сокамерник автора; Гурал О. – сокамерник автора; Дюмлер Эдуард – английский разведчик, з/к; Егоров – нач. БУРа в Горлаге; Задворнов – следователь Горлага; Зименков Алексей Ильич – зам. нач. следственной части 4-го управления МГБ; Иванов – консул СССР в Корее, з/к; Карлов – комендант Норильской следственной тюрьмы; Константинова Р. – агент МГБ; Крючков Владимир Александрович – председатель КГБ СССР; Ктаторов – инженер, з/к; Леонов Дмитрий Сергеевич – генерал-майор, нач. следственной части МГБ; Мейтин Г. Л. – обвиняемый по «еврейскому делу» в Горлаге, з/к; Мильштейн – нач. особого отдела Горлага; Миронов – оперуполномоченный Горлага; Мозер – врач, з/к; Молотов Вячеслав Михайлович; Монин – нач. Норильской следственной тюрьмы; Мюллер – врач, з/к; Орефьев – ученый-пчеловод, з/к; Пантелеев – следователь МГБ; Парижер А. О. – обвиняемый по «еврейскому делу» в Горлаге, з/к; Петрованов – член коллегии МГБ; Полонников – врач, офицер МВД; Приваленко Лев В. – морской офицер, з/к; Репин А.К. – генерал-полковник авиации, з/к; Рималис – следователь Горлага; Сарычев – оперуполномоченный Горлага; Тараканчикова – врач, офицер МВД; Телегин Константин Федорович – генерал-полковник, з/к; Чижевская Юлия – з/к; Штейнфельд Леонид Григорьевич – врач, з/к; Янда – врач, з/к.\\n',\n",
       " 'Упомянутые имена: Богуцкий Вацлав Антонович – отец автора; Муклевич Ромуальд Адамович – зам. наркома оборонной промышленности, репрессирован; Новицкая Михалина Иосифовна – мать автора; Пшеденецкая Стефания – зав. польским архивом ИМЭЛ, репрессирована; Разумова Анна Лазаревна – сотрудница Коминтерна, репрессирована; Циховский Казимир – сотрудник Коминтерна, репрессирован.\\n',\n",
       " 'Упомянутые имена: Буденный Семен Михайлович; Ветлин Григорий Александрович – полковник, нач. кафедры Академии им. М.В.Фрунзе, репрессирован; Данильчук Валерий – курсант Академии им. М. В. Фрунзе; Долгоруков Владимир – курсант Академии им. М. В. Фрунзе; Евсеев Николай Иванович – комбриг, нач. кафедры Академии им. М. В. Фрунзе, репрессирован; Ефимов Николай Алексеевич – комбриг, нач. Артиллерийского управления РККА, репрессирован; Корк Август Иванович – командарм 2-го ранга, репрессирован; Неронов Иван Григорьевич – корпусной комиссар, репрессирован; Новиков Григорий Павлович – полковник, преподаватель Академии им. М. В. Фрунзе, репрессирован; Переверткин Семен – выпускник Академии им. М. В. Фрунзе; Печкуров Павел Иванович – выпускник Академии им. М. В. Фрунзе, репрессирован; Румянцев Иван М. – курсант Академии им. М. В. Фрунзе; Тухачевский Михаил Николаевич; Чалый Иван – курсант Академии им. М. В. Фрунзе.\\n',\n",
       " 'Упомянутые имена: Аллилуева Надежда Сергеевна  жена И.В.Сталина; Андреянова Татьяна  учительница, з/к; Арзамаскин  стрелок охраны; Бах Франц  поэт, з/к; Бедусенко Петр  школьник, з/к; Бесчинский Лев Михайлович  нач. лаготделения; Бочкаревы Александра и Зинаида, сестры  колхозницы, з/к; Бочоришвили  бухгалтер, з/к; Брайнин Вилли Львович  брат автора; Брайнин Лев Маркович  зам. гл. военного прокурора; Бубнов Андрей Сергеевич  нарком просвещения; Бубнова Елена Андреевна  дочь  А.С.Бубнова, з/к; Буяк Мечислав Петрович  нач. лаготделения; Вазенмюллер Владимир  внук Ф.Баха; Вашаломидзе Акакий Константинович  бывший офицер царской армии, з/к; Вебер  Александр  нарком просвещения Республики немцев Поволжья; Вереш Евгений Степанович  венгерский коммунист, з/к; Ворошилов  крестьянин, з/к, затем нач. лагпункта; Вургун Самед (Векилов Самед Юсифоглы)  азербайджанский поэт, з/к; Генкин  нач. санчасти лаготделения; Гепнер  следователь Саратовского УНКВД; Гетц Петр Адамович  нач. лагеря  трудармии Севураллага; Гефтер  Карл  политэмигрант, секретарь парт- кома завода, репрессирован; Гнучев   профессор-медик, з/к; Далингер Владимир Федорович  нач. особого отдела Саратовского НКВД; Деев  з/к, фельдшер; Джапаридзе Иосиф Платонович  прокурор, з/к; Дягилев  з/к; Жемчужин Лазарь Ефимович  выпускник Института красной профессуры, з/к; Зиннер Наталья Ивановна  сотрудник НКВД, з/к; Знаменская Анна Яковлев- на  инженер, з/к; Зражевская Серафима Романовна  зав.  столовой в Тбилиси, з/к;  Зуппес   нарком  земледелия  Республики немцев  Поволжья;  Каширин  воспитатель лагпункта Савиново; Кляйн Курт   свидетель на процессе автора,  позже профессор  Русского университета в  Чикаго;  Конюхов   нач. лагпункта;  Корселадзе Барико   з/к;  Кривоногов   нач.  лагпункта;  Кромер Эрна  з/к; Лабзов  стрелок охраны; Лопарев  з/к; Немцова Валентина  з/к;  Никитин   нач.  лагеря  трудармии  в  Корещихе;  Переверзев  нач.  лаг- пункта Усть-Ева;  Петерс Клара Мартыновна  немка, трудармейка; Петров  нач. отдела Севураллага; Пичугины, братья   нач. лагпунктов Севураллага; Погжебжинский Феликс Иосифович  артист,  з/к; Подкопаев Вениамин Петрович  ветеринар, доктор  наук,  з/к;  Пожарицкий  Иосиф  Владимирович   капитан дальнего плавания, з/к; Пожарский  нач. лагпункта «Савиново»; Поносов  нач. 3-й части лаготделения; Потоцкая  полька, з/к; Рагозин  нач. КВЧ  лаготделения; Райзер  Ганна  учительница, з/к; Сальников  командир дивизиона охраны; Сивицкая Полина Антоновна  инженер, з/к; Солоха  адъютант Фрунзе, з/к; Сталенеонис Нона  з/к; Сухенко Евгений Александрович  архиерей, з/к; Таран  нач. Корелинского лаготделения; Флейтута Мэрион (Иванова Валентина)  полька, з/к; Хрусталев Иван Яковлевич  директор обувной фабрики, з/к; Целищев  нач. лагеря  трудармии в г.Верхнетуринске; Чернов Николай  уголовник-рецидивист, з/к; Шевченко  нач. 3-й части лаготделения; Шерман  прокурор, з/к; Ширгин  следователь Саратовского  УНКВД;  Шитиков   з/к,  позже  комендант  лагпункта  Тельма; Шишкин  з/к, позже нач. тюрьмы лаготделения; Шромм Густав  пленный времен Первой мировой войны, з/к; Якир Иона Эммануилович; Якир Петр Ионович  сын И.Э.Якира, з/к; Ясенская Вера Владимировна  балерина, подруга Н.С.Аллилуевой, з/к.\\n',\n",
       " 'Упомянутые имена: Арецкий Исаак Соломонович – одноделец В.Ф.Бромберга; Белопольский Моисей Ефремович – одноделец В. Ф. Бромберга; Бромберг Вениамин Файлевич – отец автора, герой воспоминаний; Бромберг Лев Файлевич – брат В. Ф. Бромберга, репрессирован; Голодец Герц Хаймович – сионист, репрессирован; Жарковский Михаил Герцевич – одноделец В. Ф. Бромберга; Израйлович Лев Александрович – одноделец В. Ф. Бромберга; Кучин-Оранский Георгий Дмитриевич – меньшевик, з/к; Пешкова Екатерина Павловна – глава Политического Красного Креста; Ратнер Юлий – сионист, репрессирован; Розовский М. – ссыльный; Сахнин Абрам – сионист, ссыльный; Слуцкий М. – сионист, ссыльный; Шлиомович Мордух Хаймович – одноделец В. Ф. Бромберга; Явлинский Герц – сионист, репрессирован.\\n',\n",
       " 'Упомянутые имена: Барков – дипломат, з/к; Баташов – инженер; Буканов Александр Константинович – нач. экономического отдела Горьковского ГПУ; Вавилов Николай Иванович – академик, репрессирован; Ворошилов Климент Ефремович; Гаель А. Г. – сотрудник Н. И. Вавилова, з/к; Дягтерев Н. Н. – профессор, з/к; Мовчан-Кухарук Я. М. – нач. Казанской ж.д., з/к; Никулин – бывший генерал царской армии, з/к; Плейн – зам. нач. особого отдела Горьковского ГПУ; Распутин (Новых) Григорий Ефимович – фаворит царской семьи; Рудзутак Ян Эрнестович – партийный и государственный деятель; Стивенсон – английский инженер; Трахтенберг – инженер, нач. отдела ИТК-5 под Томском; Филипп – архиепископ Московский, з/к; Шейкин – председатель райисполкома в Новосибирской обл.; Шульгин – профессор, з/к.\\n',\n",
       " 'Упомянутые имена: Аксенова – следователь Ленинградского УНКВД; Басенкова Анна Михайловна – сокамерница автора; Драницын Николай Степанович – следователь Ленинградского УНКВД; Ежов Николай Иванович; Жданов Андрей Александрович; Каган Борис – первый муж автора; Собинова Наталья Николаевна – вдова певца Л. В. Собинова, репрессирована; Сталин Иосиф Виссарионович; Троицкий Андрей Николаевич – второй муж автора, репрессирован.\\n',\n",
       " 'Упомянутые имена: Баринова Зинаида Феофановна – певица, солистка Бакинской оперы, з/к; Берия Лаврентий Павлович; Блюхер Василий Константинович – Маршал Советского Союза; Верженский Адам Иванович – муж автора, репрессирован; Верженский Юрий Иванович – брат А.И.Верженского, директор авиационного завода, репрессирован; Дзыза [в тексте ошибочно: Дзыба] Григорий Антонович – пом. командующего ОКДВА В. К. Блюхера; Маяковский Владимир Владимирович; Молотов Вячеслав Михайлович; Оловейникова Екатерина Александровна – артистка Харьковского оперного театра, з/к; Руднев Борис Иванович – нач. военных сообщений Дальневосточного края; Савинков Борис Викторович – видный член партии эсеров; Федоров Иван Алексеевич – нач. военных сообщений Закавказья, репрессирован; Федорова Мария Герасимовна –жена И. А. Федорова, з/к; Фролов –работник НКВД в Москве; Хрущев Никита Сергеевич; Энкель – брат премьер-министра Финляндии, з/к.\\n',\n",
       " 'Упомянутые имена: Вилькицкий Болеслав Иванович – муж автора, репрессирован; Гусев – следователь; Данилов – следователь; Згелле – пограничник, репрессирован; Соколов Николай Иванович – шурин автора; Соколова Екатерина Васильевна – сестра автора.\\n',\n",
       " 'Упомянутые имена: Белостоцкий Григорий Семенович – инженер, з/к; Витенз – Виктор Исаакович – профессор, брат автора; Витенз Нина Игнатьевна – жена автора; Калюский Григорий Соломонович – инженер, з/к; Каттель Иосиф Абрамович – инженер, з/к; Кениг Георгий Эдуардович – инженер, з/к; Кивель Владимир Александрович – инженер, з/к; Колесников – директор завода, репрессирован; Линд Яков – инженер, сокамерник автора; Лукашевич Ольга Николаевна – нач. цеха Норильского комбината; Потапов М. Г.  – инженер, з/к; Снегов Сергей – инженер, з/к.\\n',\n",
       " 'Упомянутые имена: Войталовская – журналистка, з/к; Гавронский Александр Осипович – профессор, з/к; Зиновьев (Радомысльский) Григорий Евсеевич; Линкевичи Алексей и Мира – друзья автора, з/к; Малахов – нач. лагпункта котласских лагерей; Митрикова – врач; Рева – председатель райисполкома на Украине, репрессирован; Ржавский – следователь НКВД на Украине, репрессирован; Рузвельт Элеонора – вдова президента США Т. Рузвельта; Савинков Борис Викторович – видный член партии эсеров; Спендиарова Марина Александровна – дочь композитора А. А. Спендиарова, з/к; Такварян Долли – танцовщица, з/к; Тейтель Лазарь Михайлович – нач. райотдела НКВД на Украине, репрессирован; Успенская Наталья – жена нач. строительства ББК, з/к; Успенская Татьяна Борисовна – дочь Б. В. Савинкова, з/к; Успенский Дмитрий В. – нач. Строительства ББК; Цулукидзе Тамара Георгиевна – актриса, з/к; Ярославский Емельян Михайлович – партийный деятель.\\n',\n",
       " 'Упомянутые имена: Брауде Григорий – секретарь Тимирязевского РК ВЛКСМ в Москве; Ленин Владимир Ильич; Постышев Павел Петрович – первый секретарь ЦК КП Украины; Сталин Иосиф Виссарионович.\\n',\n",
       " 'Упомянутые имена: Астахов Василий Сергеевич – офицер, з/к; Бажина Зоя – солагерница автора; Баринова Зинаида Феофановна – певица, солистка Бакинской оперы, з/к; Борисенко Анна – солагерница автора; Волынский Моисей Яковлевич – первый муж автора; Волынский Юрий Моисеевич – сын автора; Гурич Александр Пантелеймонович – врач, з/к; Гурович Людмила – солагерница автора; Ивлева Ольга – солагерница автора; Карамян Любовь – солагерница автора; Коломийцева Хана Самойловна – врач, з/к; Колпикова Лидия – солагерница автора; Лер Марианна Иосифовна – дирижер, з/к; Матузко Наталья – партийный работник, з/к; Мессер Рахиль – солагерница автора; Осипова Лидия Степановна – солагерница автора; Паландин Владимир Сергеевич – инженер, з/к; Ракитина Вера – жена председателя Моссовета, репрессирована; Свидерская Раиса – солагерница автора; Толстых Георгий Дмитриевич строитель, з/к; Торговец Виктор Давыдович – прокурор, репрессирован; Тухачевская Мария Николаевна – сестра М. Н. Тухачевского, з/к; Цехмиструк Мартын Сергеевич – з/к; Шиндель Оксана – солагерница автора.\\n',\n",
       " 'Упомянутые имена: Востриков Митрофан Петрович – фельдшер, з/к; Вышинский Андрей Януарьевич; Гаврилова Рамона Львовна – дочь автора; Гаранин Степан Николаевич – нач. СВИТЛа; Гончаров – з/к; Кугультинов Давид Никитич – калмыцкий поэт, репрессирован; Левенстерн Эрик Ионович – военспец, з/к; Либерберг Рахмиэль – студент, з/к; Люстерник Илья Львович – математик, профессор, з/к; Морозов Федор Тихонович – философ, доцент, репрессирован; Муравлева Антонина Максимовна – жена автора, репрессирована; Мутин – артист, з/к; Новиков Евгений Иванович – ст. лейтенант МВД; Полостяной Петр – з/к, бригадир; Пономарев Петр – учитель, з/к; Прохоров Юрий – юрист, з/к; Рябцев – з/к; Сталин Иосиф Виссарионович; Топорков Петр Михайлович – врач, з/к; Храмцев Павел Ефимович – геолог, з/к.\\n',\n",
       " 'Упомянутые имена: Алиев Ю. – ученый секретарь Азербайджанского филиала АН СССР, з/к; Барончини Элио – итальянец, работник Коминтерна, з/к; Гаранин Степан Николаевич – нач. СВИТЛа; Гейнч Кирилл Цезаревич – экономист, з/к; Гиршфельд – инспектор угрозыска; Горький Алексей Максимович; Григорьев – нач. Дорлага; Добротворский Борис Борисович – искусствовед, з/к; Енукидзе Т. Т. – директор фабрики Гознак, репрессирован; Кабанов следователь; Киров Сергей Миронович; Кобылкин – нач. прииска; Мельцер – нач. дорожно-строительного управления; Муковоз Иван Иванович – врач, з/к; Никишов Иван Федорович – нач. Дальстроя; Окисянц – врач, профессор, з/к; Сталин Иосиф Виссарионович; Троцкий Лев Давидович; Толстопальцев – врач, з/к; Шмальц – нач. прииска; Штерн (Стерн) Манфред («генерал Клебер») – немецкий коммунист, командир интербригады в Испании,з/к.\\n',\n",
       " 'Упомянутые имена: Бейфус Александр Филиппович – з/к, нач. санчасти; Болховитинов – лейтенант МВД; Калинин – лейтенант, нач. лагпункта «Тамгален»; Левченко – лейтенант, нач. лагпункта; Манюков – нач. лагпункта; Мураховский Степан Несторович – нач. лагпункта; Пискун – нач. режима лагеря.\\n',\n",
       " 'Упомянутые имена: Алексеев П. Т. – языковед, з/к; Бергер (Бергер- Барзилай) (настоящее имя Исаак Железняк, Ицхак Желязник) Иосиф Михайлович – один из основателейй КП Палестины, з/к; Вейцман – лжесвидетель; Гарбузов – следователь; Гендель – солагерник, одноделец автора; Груздев – комендант лагпункта Сиблага; Давыдов – следователь; Денисов – лжесвидетель; Евтюхов – капитан авиации, з/к; Ефремов – нач. лагеря-больницы; Зимин – рабочий, з/к, бригадир; Инжир Лев Ильич – солагерник, одноделец автора; Ирванев – председатель кемеровского облсуда; Кричевский – солагерник, одноделец автора; Кузник – нач. режима лагпункта; Кучеренко – комендант лагеря; Любченко Панас Петрович – Председатель СНК Украины, репрессирован; Орлов – пред. выездной комиссии ВКВС СССР; Паршиков – нач. лаготделения; Рубинштейн – солагерник, одноделец автора; Сосунов – нач. лагпункта; Устинов – нач. конвойного городка; Хомяков – нач. лаготделения; Хрущев Никита Сергеевич; Чередниченко – нач. лагеря.\\n',\n",
       " 'Упомянутые имена: Бразайтис-Амбразявичус Ю.  учитель  гимназии; Быстрене Она   жена  репрессированного  министра  правительства Литвы; Зволинкас И.  дядя  автора; Зволинкас Юозас  отец  автора, репрессирован; Кайрис А.  учитель  пения; Карбышев Дмитрий Михайлович  генерал; Келбаускас Б.  балетмейстер; Куторгене  Е.  врач-окулист; Плехавичюс   литовский генерал; Подорожный С.Е.  художник, военнопленный, репрессирован; Укринайте Вероника  тетка автора; Укринайте Людмила  дочь  В.Укринайте; Укринас Б.  муж В.Укринайте, скрипач; Юозанайте М.  балерина.\\n',\n",
       " 'Упомянутые имена: Андреев Владимир Петрович – знакомый автора; Барышев – геолог, профессор; Батенько Серафима – знакомая автора; Безсмертная Марианна Сергеевна – геолог, подруга автора; Блоштейн Фаина Исааковна – химик, ссыльная, подруга автора; Богданович Д. М. – геолог; Браз Цецилия Ефимовна – инженер-теплотехник, ссыльная, подруга автора; Вендланд Константин Николаевич – геолог, впоследствии церковный иерарх; Волынский Игорь Сергеевич – геолог, профессор; Вольфсон Файцель Иосифович – геолог, профессор; Ворошилов Климент Ефремович; Газе Ольга Федоровна – ботаник, ссыльная; Гиттерман Людмила Анатольевна – бактериолог, ссыльная, подруга автора; Гнилощеков А. В. – работник НКВД в Ташкенте; Гобзем-Зарядова Елена Алексеевна – физиолог, ссыльная, подруга автора; Гордиенко – следователь Ленинградского УМГБ; Гурьев В. П. – знакомый автора; Елизарова Фрида – подруга автора; Жакова Нина Александровна – химик, ссыльная, подруга автора; Загорская Татьяна Александровна – геолог; Захаров Петр Андреевич – министр геологии СССР; Ильина Нина Сергеевна – геолог, подруга автора; Казаков – парторг Ташкентского геолуправления; Голынец (Китлер) Юлия – немка, знакомая автора; Крейтер Владимир Михайлович – геолог, профессор, репрессирован; Кудрявцева Г. А. – геолог; Осипова Галина Андреевна – геолог, ссыльная, подруга автора; Петров Иван Петрович – геолог; Петросянц – геолог, репрессирован; Подсвитная Наталья – знакомая автора; Подситник – физик; Поярков Владимир Эрастович – геолог; Процевич Вячеслав – рабочий, ссыльный; Пряничников – Сергей Константинович геолог; Рабинович Борис – знакомый автора; Рабков Константин Николаевич – нач. Узбекского геолуправления; Симаков А. Н. – гл. инженер Узбекского геолуправления; Скотаренко Валентина – геолог; Сырман – работник НКВД в Ташкенте; Тепикин Евгений Кронидович – геолог; Турченева Ляля – геолог, подруга автора; Тютрин Федор Афанасьевич – муж автора; Устименко (Яншина) Ирина Григорьевна – ссыльная, подруга автора; Ферсман Александр Евгеньевич – геохимик, академик; Шифрин – геолог; Щербаков Дмитрий Иванович – геолог, академик; Шпак Нина Самойловна – геолог, подруга автора; Эдельштейн Яков Самойлович – геолог, профессор, репрессирован.\\n',\n",
       " 'Упомянутые имена: Федорова Наталья Дмитриевна –учительница, з/к.\\n',\n",
       " 'Упомянутые имена: Мерин – адвокат; Растопов – прокурор в Ханты- Мансийске; Туполев Андрей Николаевич – авиационный конструктор, з/к.\\n',\n",
       " 'Упомянутые имена: Бардин Иван Павлович – академик, металлург; Бутенко К. И. – директор Сталинского металлургического комбината; Бутенко Софья – жена Бутенко; Джумук – нач. цеха Сталинского металлургического комбината; Измайлов Петр Николаевич – чемпион РСФСР по шахматам, инженер-геофизик, репрессирован; Соколов В. О. – гл. инженер рудника в Кузбассе, репрессирован; Шахнович – нач. шахты в Кузбассе, репрессирован.\\n',\n",
       " 'Упомянутые имена: \\n',\n",
       " 'Упомянутые имена: Анулов Леонид Абрамович  солагерник{13}\\n',\n",
       " 'Упомянутые имена\\n',\n",
       " 'Упомянутые имена:\\n']"
      ]
     },
     "execution_count": 21,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "l"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 51,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "39"
      ]
     },
     "execution_count": 51,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "len(l)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 22,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "'Упомянутые имена: Абрамов Алексей – уголовник-рецидивист, з/к; Баландин Алексей Александрович – академик, з/к; Башилов Иван Яковлевич – профессор, директор Института редких металлов, з/к; Берия Лаврентий Павлович; Валава, семья – друзья автора; Давыдов Георгий Савельевич – инженер-металлург, з/к; Корсаков Леонид Павлович – нач. УМГБ по Калужской обл.; Левочевский Иван Алексеевич – нач. строительства агломерационной фабрики; Лермонтов Михаил Юрьевич; Мюллер Роберт Евгеньевич (Людвигович) – профессор ЛГУ, з/к; Пушкин Александр Сергеевич; Рендел Всеволод Васильевич – физик, з/к; Розенблюм Анна Анатольевна – врач Лубянской тюрьмы, з/к; Филимонов Николай Александрович – директор завода, з/к.\\n'"
      ]
     },
     "execution_count": 22,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "l[0]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 23,
   "metadata": {},
   "outputs": [],
   "source": [
    "line_with_names = l[0].replace(\"Упомянутые имена:\", \"\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 24,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "[' Абрамов Алексей – уголовник-рецидивист, з/к',\n",
       " ' Баландин Алексей Александрович – академик, з/к',\n",
       " ' Башилов Иван Яковлевич – профессор, директор Института редких металлов, з/к',\n",
       " ' Берия Лаврентий Павлович',\n",
       " ' Валава, семья – друзья автора',\n",
       " ' Давыдов Георгий Савельевич – инженер-металлург, з/к',\n",
       " ' Корсаков Леонид Павлович – нач. УМГБ по Калужской обл.',\n",
       " ' Левочевский Иван Алексеевич – нач. строительства агломерационной фабрики',\n",
       " ' Лермонтов Михаил Юрьевич',\n",
       " ' Мюллер Роберт Евгеньевич (Людвигович) – профессор ЛГУ, з/к',\n",
       " ' Пушкин Александр Сергеевич',\n",
       " ' Рендел Всеволод Васильевич – физик, з/к',\n",
       " ' Розенблюм Анна Анатольевна – врач Лубянской тюрьмы, з/к',\n",
       " ' Филимонов Николай Александрович – директор завода, з/к.\\n']"
      ]
     },
     "execution_count": 24,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "line_with_names.split(\";\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 31,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "['Абрамов Алексей',\n",
       " 'Баландин Алексей Александрович',\n",
       " 'Башилов Иван Яковлевич',\n",
       " 'Берия Лаврентий Павлович',\n",
       " 'Валава, семья',\n",
       " 'Давыдов Георгий Савельевич',\n",
       " 'Корсаков Леонид Павлович',\n",
       " 'Левочевский Иван Алексеевич',\n",
       " 'Лермонтов Михаил Юрьевич',\n",
       " 'Мюллер Роберт Евгеньевич (Людвигович)',\n",
       " 'Пушкин Александр Сергеевич',\n",
       " 'Рендел Всеволод Васильевич',\n",
       " 'Розенблюм Анна Анатольевна',\n",
       " 'Филимонов Николай Александрович']"
      ]
     },
     "execution_count": 31,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "persons = line_with_names.split(\";\")\n",
    "names = [x.split(\"–\")[0].strip() for x in persons]\n",
    "names"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 57,
   "metadata": {},
   "outputs": [],
   "source": [
    "# возможный формат хранения списков имен - словарик: {название документа: [имя, имя, ...]}"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {},
   "outputs": [],
   "source": [
    "f = open(\"/Users/lizastovba/Загрузки/persons.csv\", 'r', encoding=\"utf-8\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 34,
   "metadata": {},
   "outputs": [],
   "source": [
    "import pandas as pd"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 38,
   "metadata": {},
   "outputs": [],
   "source": [
    "person_table = pd.read_csv(\"/Users/lizastovba/Downloads/person.csv\")"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 39,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<style scoped>\n",
       "    .dataframe tbody tr th:only-of-type {\n",
       "        vertical-align: middle;\n",
       "    }\n",
       "\n",
       "    .dataframe tbody tr th {\n",
       "        vertical-align: top;\n",
       "    }\n",
       "\n",
       "    .dataframe thead th {\n",
       "        text-align: right;\n",
       "    }\n",
       "</style>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>PersonID</th>\n",
       "      <th>Surname</th>\n",
       "      <th>FirstName</th>\n",
       "      <th>Patronymic</th>\n",
       "      <th>Gender</th>\n",
       "      <th>BirthYearMin</th>\n",
       "      <th>FirstRepressionYearMin</th>\n",
       "      <th>ViewInfoName</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>0</th>\n",
       "      <td>1</td>\n",
       "      <td>Абдулахатова</td>\n",
       "      <td>Кульше</td>\n",
       "      <td>Исмагуловна</td>\n",
       "      <td>ж</td>\n",
       "      <td>1908.0</td>\n",
       "      <td>1938.0</td>\n",
       "      <td>Абдулахатова Кульше Исмагуловна</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1</th>\n",
       "      <td>2</td>\n",
       "      <td>Абдуллаева</td>\n",
       "      <td>Мирнирия</td>\n",
       "      <td>Ибрагимовна</td>\n",
       "      <td>ж</td>\n",
       "      <td>1909.0</td>\n",
       "      <td>1937.0</td>\n",
       "      <td>Абдуллаева Мирнирия Ибрагимовна</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2</th>\n",
       "      <td>3</td>\n",
       "      <td>Абитова</td>\n",
       "      <td>Нашхо</td>\n",
       "      <td>Герентуковна</td>\n",
       "      <td>ж</td>\n",
       "      <td>1896.0</td>\n",
       "      <td>1938.0</td>\n",
       "      <td>Абитова Нашхо Герентуковна</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>3</th>\n",
       "      <td>4</td>\n",
       "      <td>Абишева</td>\n",
       "      <td>Жамал</td>\n",
       "      <td>Ахметовна</td>\n",
       "      <td>ж</td>\n",
       "      <td>1910.0</td>\n",
       "      <td>1938.0</td>\n",
       "      <td>Абишева Жамал Ахметовна</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>4</th>\n",
       "      <td>5</td>\n",
       "      <td>Абланова</td>\n",
       "      <td>Минесафа</td>\n",
       "      <td>NaN</td>\n",
       "      <td>ж</td>\n",
       "      <td>1910.0</td>\n",
       "      <td>1938.0</td>\n",
       "      <td>Абланова Минесафа</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "</div>"
      ],
      "text/plain": [
       "   PersonID       Surname FirstName    Patronymic Gender  BirthYearMin  \\\n",
       "0         1  Абдулахатова    Кульше   Исмагуловна      ж        1908.0   \n",
       "1         2    Абдуллаева  Мирнирия   Ибрагимовна      ж        1909.0   \n",
       "2         3       Абитова     Нашхо  Герентуковна      ж        1896.0   \n",
       "3         4       Абишева     Жамал     Ахметовна      ж        1910.0   \n",
       "4         5      Абланова  Минесафа           NaN      ж        1910.0   \n",
       "\n",
       "   FirstRepressionYearMin                     ViewInfoName  \n",
       "0                  1938.0  Абдулахатова Кульше Исмагуловна  \n",
       "1                  1937.0  Абдуллаева Мирнирия Ибрагимовна  \n",
       "2                  1938.0       Абитова Нашхо Герентуковна  \n",
       "3                  1938.0          Абишева Жамал Ахметовна  \n",
       "4                  1938.0                Абланова Минесафа  "
      ]
     },
     "execution_count": 39,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "person_table.head()"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 42,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/html": [
       "<div>\n",
       "<style scoped>\n",
       "    .dataframe tbody tr th:only-of-type {\n",
       "        vertical-align: middle;\n",
       "    }\n",
       "\n",
       "    .dataframe tbody tr th {\n",
       "        vertical-align: top;\n",
       "    }\n",
       "\n",
       "    .dataframe thead th {\n",
       "        text-align: right;\n",
       "    }\n",
       "</style>\n",
       "<table border=\"1\" class=\"dataframe\">\n",
       "  <thead>\n",
       "    <tr style=\"text-align: right;\">\n",
       "      <th></th>\n",
       "      <th>PersonID</th>\n",
       "      <th>Surname</th>\n",
       "      <th>FirstName</th>\n",
       "      <th>Patronymic</th>\n",
       "      <th>Gender</th>\n",
       "      <th>BirthYearMin</th>\n",
       "      <th>FirstRepressionYearMin</th>\n",
       "      <th>ViewInfoName</th>\n",
       "    </tr>\n",
       "  </thead>\n",
       "  <tbody>\n",
       "    <tr>\n",
       "      <th>56675</th>\n",
       "      <td>56676</td>\n",
       "      <td>Мюллер</td>\n",
       "      <td>Роберт</td>\n",
       "      <td>Иванович</td>\n",
       "      <td>м</td>\n",
       "      <td>1894.0</td>\n",
       "      <td>1937.0</td>\n",
       "      <td>Мюллер Роберт Иванович</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>610075</th>\n",
       "      <td>610076</td>\n",
       "      <td>Мюллер</td>\n",
       "      <td>Роберт</td>\n",
       "      <td>Францевич</td>\n",
       "      <td>м</td>\n",
       "      <td>1894.0</td>\n",
       "      <td>1932.0</td>\n",
       "      <td>Мюллер Роберт Францевич</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>1457440</th>\n",
       "      <td>1457441</td>\n",
       "      <td>Мюллер</td>\n",
       "      <td>Роберт</td>\n",
       "      <td>Францевич</td>\n",
       "      <td>м</td>\n",
       "      <td>1894.0</td>\n",
       "      <td>1937.0</td>\n",
       "      <td>Мюллер Роберт Францевич</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2083790</th>\n",
       "      <td>2083791</td>\n",
       "      <td>Мюллер</td>\n",
       "      <td>Роберт</td>\n",
       "      <td>Феликсович</td>\n",
       "      <td>м</td>\n",
       "      <td>1914.0</td>\n",
       "      <td>1938.0</td>\n",
       "      <td>Мюллер Роберт Феликсович</td>\n",
       "    </tr>\n",
       "    <tr>\n",
       "      <th>2563288</th>\n",
       "      <td>2563289</td>\n",
       "      <td>Мюллер</td>\n",
       "      <td>Роберт</td>\n",
       "      <td>Георгиевич</td>\n",
       "      <td>м</td>\n",
       "      <td>1915.0</td>\n",
       "      <td>NaN</td>\n",
       "      <td>Мюллер Роберт Георгиевич</td>\n",
       "    </tr>\n",
       "  </tbody>\n",
       "</table>\n",
       "</div>"
      ],
      "text/plain": [
       "         PersonID Surname FirstName  Patronymic Gender  BirthYearMin  \\\n",
       "56675       56676  Мюллер    Роберт    Иванович      м        1894.0   \n",
       "610075     610076  Мюллер    Роберт   Францевич      м        1894.0   \n",
       "1457440   1457441  Мюллер    Роберт   Францевич      м        1894.0   \n",
       "2083790   2083791  Мюллер    Роберт  Феликсович      м        1914.0   \n",
       "2563288   2563289  Мюллер    Роберт  Георгиевич      м        1915.0   \n",
       "\n",
       "         FirstRepressionYearMin              ViewInfoName  \n",
       "56675                    1937.0    Мюллер Роберт Иванович  \n",
       "610075                   1932.0   Мюллер Роберт Францевич  \n",
       "1457440                  1937.0   Мюллер Роберт Францевич  \n",
       "2083790                  1938.0  Мюллер Роберт Феликсович  \n",
       "2563288                     NaN  Мюллер Роберт Георгиевич  "
      ]
     },
     "execution_count": 42,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "person_table[(person_table[\"Surname\"] == \"Мюллер\") & (person_table[\"FirstName\"] == \"Роберт\")]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 44,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "я нашол:  Абрамов Алексей\n",
      "я нашол:  Баландин Алексей Александрович\n",
      "я нашол:  Башилов Иван Яковлевич\n",
      "я не нашол:  Берия Лаврентий Павлович\n",
      "я не нашол:  Валава, семья\n",
      "я не нашол:  Давыдов Георгий Савельевич\n",
      "я не нашол:  Корсаков Леонид Павлович\n",
      "я не нашол:  Левочевский Иван Алексеевич\n",
      "я не нашол:  Лермонтов Михаил Юрьевич\n",
      "я не нашол:  Мюллер Роберт Евгеньевич (Людвигович)\n",
      "я нашол:  Пушкин Александр Сергеевич\n",
      "я не нашол:  Рендел Всеволод Васильевич\n",
      "я не нашол:  Розенблюм Анна Анатольевна\n",
      "я нашол:  Филимонов Николай Александрович\n"
     ]
    }
   ],
   "source": [
    "for name in names:\n",
    "    if name in list(person_table.ViewInfoName):\n",
    "        print (\"я нашол: \", name)\n",
    "    else:\n",
    "        print (\"я не нашол: \", name)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 52,
   "metadata": {},
   "outputs": [],
   "source": [
    "memoirs = [names, names]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 55,
   "metadata": {},
   "outputs": [],
   "source": [
    "memoir_ids = []\n",
    "for memoir in memoirs:\n",
    "    names2id = {}\n",
    "    for name in names:\n",
    "        ids = []\n",
    "        for i, fio_from_memorial in enumerate(list(person_table.ViewInfoName)):\n",
    "            if name == fio_from_memorial:\n",
    "                ids.append(person_table.PersonID.iloc[i])\n",
    "        names2id[name] = ids\n",
    "    memoir_ids.append(names2id)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 56,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "[{'Абрамов Алексей': [1559452, 1559453],\n",
       "  'Баландин Алексей Александрович': [2661194, 3078447],\n",
       "  'Башилов Иван Яковлевич': [2777449, 3078483],\n",
       "  'Берия Лаврентий Павлович': [],\n",
       "  'Валава, семья': [],\n",
       "  'Давыдов Георгий Савельевич': [],\n",
       "  'Корсаков Леонид Павлович': [],\n",
       "  'Левочевский Иван Алексеевич': [],\n",
       "  'Лермонтов Михаил Юрьевич': [],\n",
       "  'Мюллер Роберт Евгеньевич (Людвигович)': [],\n",
       "  'Пушкин Александр Сергеевич': [1393733],\n",
       "  'Рендел Всеволод Васильевич': [],\n",
       "  'Розенблюм Анна Анатольевна': [],\n",
       "  'Филимонов Николай Александрович': [1285321, 1378309]},\n",
       " {'Абрамов Алексей': [1559452, 1559453],\n",
       "  'Баландин Алексей Александрович': [2661194, 3078447],\n",
       "  'Башилов Иван Яковлевич': [2777449, 3078483],\n",
       "  'Берия Лаврентий Павлович': [],\n",
       "  'Валава, семья': [],\n",
       "  'Давыдов Георгий Савельевич': [],\n",
       "  'Корсаков Леонид Павлович': [],\n",
       "  'Левочевский Иван Алексеевич': [],\n",
       "  'Лермонтов Михаил Юрьевич': [],\n",
       "  'Мюллер Роберт Евгеньевич (Людвигович)': [],\n",
       "  'Пушкин Александр Сергеевич': [1393733],\n",
       "  'Рендел Всеволод Васильевич': [],\n",
       "  'Розенблюм Анна Анатольевна': [],\n",
       "  'Филимонов Николай Александрович': [1285321, 1378309]}]"
      ]
     },
     "execution_count": 56,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "memoir_ids"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 50,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "{'Абрамов Алексей': [1559452, 1559453],\n",
       " 'Баландин Алексей Александрович': [2661194, 3078447],\n",
       " 'Башилов Иван Яковлевич': [2777449, 3078483],\n",
       " 'Берия Лаврентий Павлович': [],\n",
       " 'Валава, семья': [],\n",
       " 'Давыдов Георгий Савельевич': [],\n",
       " 'Корсаков Леонид Павлович': [],\n",
       " 'Левочевский Иван Алексеевич': [],\n",
       " 'Лермонтов Михаил Юрьевич': [],\n",
       " 'Мюллер Роберт Евгеньевич (Людвигович)': [],\n",
       " 'Пушкин Александр Сергеевич': [1393733],\n",
       " 'Рендел Всеволод Васильевич': [],\n",
       " 'Розенблюм Анна Анатольевна': [],\n",
       " 'Филимонов Николай Александрович': [1285321, 1378309]}"
      ]
     },
     "execution_count": 50,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "names2id"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 58,
   "metadata": {},
   "outputs": [],
   "source": [
    "# после того, как проверим все мемуары -- посчитать общее количество имен, количество имен для которых есть айди, \n",
    "# количество имен для которых есть один уникальный айдишник"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {},
   "outputs": [],
   "source": []
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.7.4"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 2
}