ВИТРИНА ДАННЫХ
Закрытый сервис
НГУЭУ · Витрина данных
ГИР ВУ · Сведения об обучающихся
Выплаты, академические отпуска, договоры на обучение и переводы.
Введите ОГРН и КПП, скачайте файл для входа, подпишите его откреплённой электронной подписью и загрузите подпись. Ключ электронной подписи остаётся на вашем компьютере.
Загрузите students.xlsx по шаблону. Исправьте отмеченные ошибки в исходном файле и загрузите его заново. Затем выполните сверку с ГИР ВУ.
Подготовьте JSON (до 50 записей), скачайте его и подпишите без изменения файла. Загрузите откреплённую подпись именно этого JSON и проверьте состав отправки.
Подтвердите отправку, дождитесь результата и скачайте XLSX и отчёт. Если остались новые записи, подготовьте следующий пакет. При неопределённом результате сначала выполните сверку.
Сведения с уже существующим идентификатором пропускаются: этот сценарий повторяет создание выплат из исходного архива. Изменение и удаление выплат здесь не выполняются. Получение токена и отправка — отдельные операции с отдельными файлами подписи.
Проверка файла доступна и без подключения к API. ОГРН и КПП связывают загруженную книгу с организацией. Скачать шаблон выплат ↓
Сохраните названия и порядок полей шаблона. Не подменяйте идентификаторы вручную; сверка проверит сведения в ГИР ВУ. Файл с ошибками можно просмотреть и скачать для исправления.
Текущая книга
Вы просматриваете книгу другого пользователя. Доступны только просмотр и скачивание результатов.
03 · Подпись и отправка
Подпишите скачанный JSON откреплённой электронной подписью. Не открывайте и не пересохраняйте файл в редакторе: подпись должна соответствовать его точным байтам.
| Строка | Вкл. | UID студента | Год / период | Суммы по месяцам | ID стипендии | Состояние / ошибки |
|---|
| Дата | Операция | Состояние | Результат |
|---|
Ваши загрузки, проверки и отправки.
| Книга | Загружена | Организация | Состояние | Записей | Действие |
|---|---|---|---|---|---|
| Загрузите книгу, чтобы начать работу. | |||||
Создание · изменение · удаление
Удаление необратимо. При удалении основного договора ГИР ВУ также удалит все его допсоглашения. Подпись для удаления по инструкции не требуется, но нужно отдельное подтверждение каждого пакета.
Добавьте записи в список. Затем сохраните и проверьте их.
Одна строка — одна запись. Для договоров периоды оплаты заполняются на отдельном листе. До 500 записей; отправка частями по 50.
| № | Билет / ID | Сведения | Результат |
|---|
Подготовленный файл не меняется. Для исправления данных создайте новый список и получите новую подпись.
По UID — сведения одного билета. Без UID — список организации. Список договоров может не содержать график оплаты: откройте билет перед редактированием.
Материалы проекта
Разбор файлов исходного комплекта, схема обмена и требования к веб-модулю.
Справочные материалы
Правила выгрузки и преобразования данных.
Нажмите на текст или ячейку таблицы и внесите правки. Для оформления выделите текст. Вставка из буфера — без внешнего форматирования. Изменения станут видны всем после сохранения.
Текст инструкции не меняется автоматически при корректировке SQL-запросов.
Дата применяется к срезу статусов «отчислен» и «зак. с дипломом» в SQL-запросе.
Раздел получает данные студентов из Тандем, проверяет их и готовит файлы для загрузки в витрину. Загружаемый вами CSV служит справочником уже выданных идентификаторов студбилетов.
Система сохраняет копию загруженного файла для задания, проверяет расширение, размер и наличие содержимого, определяет кодировку и разделитель. Затем проверяет два обязательных заголовка; внешние и повторяющиеся пробелы в заголовках не мешают распознаванию. Если файл нельзя прочитать или заголовка нет, обработка останавливается с сообщением.
Из CSV строится только соответствие «номер студбилета → UID». Внешние пробелы номера убираются; номер из 1–6 цифр дополняется слева нулями до шести: «123» → «000123». Строки без UID, без номера или без необходимых полей пропускаются. Если одному нормализованному номеру соответствуют разные UID, такой номер исключается из справочника. Повтор одного и того же соответствия допустим. СНИЛС и другие дополнительные колонки CSV игнорируются.
С выбранной датой среза выполняется запрос «Студенческие билеты» из раздела «Администрирование → Исходные SQL-запросы». Его версия фиксируется при создании задания. Табличный результат записывается в промежуточный файл source.xlsx на лист «Шаблон»: первая строка — заголовки, далее — полученные записи. Если запрос не вернул строк, работа заканчивается сообщением «Нет данных», архив не создаётся.
Пустые значения становятся пустыми ячейками, даты сохраняются как даты Excel, текст — как текст. Для текстов, начинающихся с «=», «+», «-» или «@», добавляется начальный апостроф, чтобы Excel не исполнил их как формулы. Текст длиннее допустимого размера ячейки сокращается с пометкой «[обрезано]».
Система открывает установленный на сервере главный шаблон и сопоставляет его заголовки с заголовками выгрузки, включая предусмотренные альтернативные названия. Результирующие столбцы идут в порядке главного шаблона. Лишние столбцы выгрузки не переносятся; если нужного столбца в выгрузке нет, его значения остаются пустыми и далее проходят проверки. Полностью пустые исходные строки не считаются записями.
Последовательно проверяются поля по правилам из таблицы ниже. Пустыми считаются и отсутствующие значения, и строки только из пробелов. Система собирает все найденные ошибки строки, а не только первую. Проверки выявляют проблемы, но автоматически не исправляют паспортные реквизиты, даты или другие исходные сведения.
Строка хотя бы с одной ошибкой попадает только в категорию «Ошибки». Для неё не выполняется поиск UID, и она не попадает в файлы корректных записей. В итоговом файле сохраняются её значения после приведения к шаблону, проблемные ячейки получают красную заливку, последней добавляется колонка «Описание ошибок» с названиями полей и причинами.
UID ищется только по нормализованному номеру студбилета из выгрузки и колонке «Номер студ. билета» CSV. Если номер отсутствует в справочнике или ему соответствуют разные UID, UID считается не найденным. Совпадение СНИЛС не используется ни как основной, ни как резервный способ поиска. Корректная строка без найденного UID попадает в «Новые» или «Новые (отчисленные)» в зависимости от сведений об отчислении. Нормализация ключа не переписывает номер билета в исходных данных.
Проверяются три поля: дата приказа об отчислении или завершении обучения, номер приказа об отчислении и причина отчисления. Без найденного UID запись попадает в «Новые», если все три поля пусты, и в «Новые (отчисленные)», если все три заполнены. С найденным UID все три заполненных поля означают категорию «Отчисленные», а все три пустых — «Обычные». Частично заполненная тройка уже отнесена к ошибкам на этапе проверки независимо от наличия UID.
Для каждой непустой категории создаются XLSX-книги с одним листом «Шаблон». В «Обычных» и «Отчисленных» найденный UID записывается в колонку «Идентификатор студбилета». В «Новых» и «Новых (отчисленных)» эта колонка целиком удаляется: система не присваивает новый UID. Порядок строк внутри категории соответствует порядку выгрузки. Даты Excel получают формат ДД.ММ.ГГГГ, текстовые коды и номера сохраняются как текст с ведущими нулями. Добавляются заголовки, фильтр и закрепление первой строки.
«Новые», «Новые (отчисленные)» и «Отчисленные» делятся отдельно по каждой категории на части максимум по 3 000 записей, без учёта заголовка. «Обычные» и «Ошибки» сохраняются по одному файлу без такого деления. Пустые категории не создают файлов. Система сверяет баланс: число проверенных строк должно равняться сумме записей в пяти категориях: «Новые», «Новые (отчисленные)», «Отчисленные», «Обычные» и «Ошибки».
В названиях всех результатов пробелы заменяются на подчёркивания: например, ДД.ММ.ГГГГ_Новые_(отчисленные)_часть_1.xlsx. Это правило действует и для имён внутри ZIP. Книги категорий упаковываются в архив ДД.ММ.ГГГГ_Студенческие_билеты.zip. Промежуточная выгрузка и UID.csv в архив не включаются. На экране появляются пять счётчиков категорий, количество срабатываний каждой проверки и предпросмотр первых 100 строк каждого файла. Одна строка может иметь несколько ошибок, поэтому число срабатываний не равно числу ошибочных строк.
| Поле | Условие прохождения проверки |
|---|---|
| Дата рождения | Заполнена корректной датой Excel либо текстом ДД.ММ.ГГГГ, обозначающим существующую календарную дату. |
| Место рождения | Поле заполнено. Пустая ячейка или строка только из пробелов — ошибка; содержание заполненного поля дополнительно не проверяется. |
| Гражданство | Значение состоит только из цифр. Пустое поле, буквы, знаки и внутренние пробелы — ошибка. Внешние пробелы игнорируются; целое число Excel (например, 643) допустимо. Длина кода и его наличие в справочнике ОКСМ не проверяются. |
| Серия и номер документа РФ | Серия состоит ровно из 4 цифр, номер — из 6. Если указан тип иностранного документа, пустые российские реквизиты допустимы; заполненные всё равно проверяются. |
| Дата выдачи документа РФ | Корректная дата Excel или текст ДД.ММ.ГГГГ. Дата не совпадает с датой рождения, не раньше даты рождения + 14 календарных лет и не позже даты запуска обработки по Новосибирску. Обе границы допустимы; дата среза статусов на проверку не влияет. Для родившихся 29 февраля нижняя граница — 28 февраля через 14 лет. Пустое поле допустимо, если указан тип иностранного документа; если дата РФ заполнена, все перечисленные проверки выполняются и в этом случае. |
| СНИЛС | Заполнен, кроме случаев с указанным типом иностранного документа. Контрольная сумма и количество цифр СНИЛС на этом этапе не проверяются. Это проверка данных студента, а не ключ поиска UID. |
| Иностранный документ | Если указан его тип, должны быть заполнены номер (реквизиты) и дата выдачи. Для этой даты проверяется наличие значения. |
| Код уровня образования и номер студбилета | Код уровня — ровно 2 цифры, номер билета — ровно 6. Например, «03» и «000123». Дополнение номера нулями при поиске UID не заменяет эту проверку исходного номера. |
| Выдача студбилета и зачисление | Заполнены дата выдачи билета, дата зачисления, дата и номер приказа о зачислении. Здесь проверяется наличие значений. |
| Планируемая дата окончания | Заполнена корректной датой Excel или текстом ДД.ММ.ГГГГ. Если дата приказа об отчислении или завершении обучения пуста, плановая дата не может быть раньше текущей даты проверки. |
| Комплектность сведений об отчислении | Дата приказа об отчислении или завершении обучения, номер приказа и причина отчисления должны быть либо заполнены все вместе, либо все пусты. При частичном заполнении ошибкой отмечаются недостающие поля. |
Например, корректная запись без UID и без сведений об отчислении попадёт в «Новые», а без UID с тремя заполненными полями отчисления — в «Новые (отчисленные)». В обеих категориях колонка идентификатора удаляется. Корректная запись с UID и тремя заполненными полями отчисления попадёт в «Отчисленные». Запись с неполным номером паспорта попадёт в «Ошибки» независимо от наличия UID. Чтобы исправить ошибочные данные в следующей выгрузке, внесите исправления в источник Тандем и запустите обработку заново.
Ход выполнения
Результат
Строки сопоставляются по колонке «Идентификатор студбилета». В результат попадут только измененные записи нового файла.
Раздел находит изменившиеся значения у записей с одинаковым идентификатором студбилета. Он использует только две загруженные книги и не обращается к Тандем или справочнику UID.
Проверяются расширение, размер и наличие содержимого. Система сохраняет рабочие копии загрузок и открывает их как Excel-книги. Повреждённый или неподдерживаемый файл останавливает сравнение; итоговый файл при ошибке не создаётся.
В каждой книге читается только лист «Шаблон». Остальные листы не участвуют. Заголовки берутся из первой строки до последнего непустого заголовка. Пустой заголовок между столбцами, повторяющееся название, отсутствие ключевой колонки или входной столбец «Комментарий» считаются ошибками. «Комментарий» зарезервирован для результата.
В названиях заголовков удаляются внешние пробелы, а последовательности пробельных символов заменяются одним пробелом. Затем сравниваются количество, названия и порядок колонок. Переставленные, добавленные или отсутствующие столбцы останавливают обработку. Исходное написание заголовков нового файла сохраняется в результате.
Начиная со второй строки собираются непустые записи в пределах исходных столбцов. Полностью пустые строки пропускаются и не входят в статистику. У каждой записи должен быть ID; внешние пробелы вокруг ID убираются. Числовой ID без дробной части сопоставляется с таким же текстовым целым значением, а ведущие нули в текстовом ID сохраняются. Отсутствующие и повторяющиеся ID проверяются в обеих книгах с указанием проблемных строк.
Для старого файла строится соответствие «ID → строка». Затем новые строки перебираются в их исходном порядке. Номер строки и положение студента в книге не влияют на сопоставление: используется только ID.
Если ID из новой книги отсутствует в старой, запись увеличивает счётчик «Игнорировано» и в результат не попадает. Записи, присутствующие только в старой книге, не анализируются: удаление записей этим разделом не отслеживается.
У найденной пары сравниваются все исходные столбцы, включая ключевой. На время сравнения убираются внешние пробелы, объединяются пустые значения, распознаются поддерживаемые текстовые даты и числа. Точные правила и примеры приведены ниже. Эта подготовка не переписывает содержимое копируемых ячеек новой книги.
Если все сравнимые значения равны, строка увеличивает счётчик «Без изменений» и пропускается. Если отличается хотя бы одна ячейка, запоминаются номера всех изменённых столбцов и выбирается вся строка нового файла. Различия только в оформлении ячеек не делают строку изменённой.
На основе новой книги создаётся результат с единственным листом «Шаблон». Выбранные строки идут подряд, без неизменённых и проигнорированных записей, в порядке нового файла. Переносятся значения, стили ячеек и числовые форматы; используются ширина столбцов, высота выбранных строк, закрепление областей и параметры листа новой книги. Макросы из XLSM в выходной XLSX не переносятся.
Каждая изменённая исходная ячейка получает сплошную красную заливку. Последней добавляется колонка «Комментарий» с переносом строк. Для каждого изменившегося поля в отдельной строке указываются название, старое и новое значения; пустое значение обозначается «(пусто)». Например: «Поле „Фамилия“: в старом файле значение было „Иванов“; в новом — „Иванова“».
Система сохраняет Результат_сравнения.xlsx, показывает первые 100 изменённых строк со всеми столбцами и подсветкой, запускает скачивание и оставляет кнопку для повторного сохранения. В самом XLSX находятся все изменённые строки, а не только предпросмотр. Если изменённых строк нет, возвращается сообщение «Различий не найдено. Итоговый файл не сформирован» и статистика без файла.
| Значения | Как сравниваются |
|---|---|
| Пустая ячейка, пустой текст, пробелы | Равны: все считаются пустым значением. |
| « Иванов » и «Иванов» | Равны: пробелы по краям не учитываются. |
| «Иванов» и «иванов»; один и два пробела внутри текста | Отличаются: регистр и внутренние пробелы учитываются. |
| Число 4, число 4.0, текст «4» и «4.0» | Равны. Для текстового числа поддерживаются необязательный знак и десятичная точка. Запятая, разделители тысяч и запись вида «1e3» как числовой текст не распознаются. |
| Текст «004» и число 4 | Отличаются: ведущие нули текстового кода значимы. «001» и «1» также различаются. |
| Дата Excel, «29.05.1996» и «1996-05-29» | Равны, если обозначают одну календарную дату. Для текстовых дат поддерживаются ДД.ММ.ГГГГ и ГГГГ-ММ-ДД. |
| Дата со временем | Время учитывается до секунд. Поддерживаются текстовые записи ДД.ММ.ГГГГ ЧЧ:ММ:СС и ГГГГ-ММ-ДД ЧЧ:ММ:СС, в последней вместо пробела допустима «T». Дата Excel с временем 00:00:00 сравнивается как дата; текст с явно указанным 00:00:00 остаётся датой со временем. |
| Формулы | Формулы сравниваются как текст формулы. Их результат сервером не вычисляется: «=1+1» и число 2 различаются. Зависимости от других листов и внешних книг не пересчитываются. |
Эти правила используются для сравнения содержимого. Раздел не выполняет проверки правильности СНИЛС, паспортов и сроков обучения из вкладки «Студенческие билеты».
Пример: в новом файле 100 записей, 10 ID отсутствуют в старом, а у 7 из оставшихся изменены поля. Статистика: 100 строк, 90 проверено, 83 без изменений, 7 с отличиями, 10 проигнорировано. В XLSX будет 7 строк данных. Всегда выполняются равенства: «Строк в новом файле» = «Проверено строк» + «Игнорировано»; «Проверено строк» = «Без изменений» + «Найдено отличий».
Результат сравнения
ВНИМАНИЕ! Зачетные книжки по Выпускникам необходимо загрузить ДО проведения приказа об отчислении в Тандеме.
CSV с UID: UTF-8 (с BOM или без него) или Windows-1251; разделитель — точка с запятой, запятая или табуляция. Файл должен содержать шапку с обязательными названиями колонок.
Сервер выполняет сохранённый SQL-запрос для выбранного контингента, затем формирует и проверяет зачетки. Запросы ВО и СПО редактируются только администраторами в разделе «Исходные SQL-запросы». Версия фиксируется при создании задания. Выгрузка предназначена для чтения данных из Тандема.
Первые 13 колонок, с точным соблюдением регистра:
После формирования система автоматически проверяет лист «Шаблон», эталонную шапку, UID, уникальность пар номер/курс, лимит строк и ширину блоков. Если обнаружена структурная ошибка, результат не публикуется. Проверка не подтверждает достоверность оценок и дат в первичной системе.
При успешном завершении доступны части зачеток и файл «Нет_студенческих_для_зачеток.xlsx». Если студентов без UID нет, в этом отчете остается только шапка. Статистика показывает исходные строки, количество сформированных зачеток, исключенные группы и студентов без UID. В названиях XLSX, частей и архива Зачетные_книжки.zip нет пробелов — вместо них используются подчёркивания. Общий ZIP содержит все результаты; отдельные XLSX можно скачать или открыть в предпросмотре первых 100 строк.
Одно задание обрабатывает один контингент и принимает один CSV с UID размером до 100 МБ. Исходные зачетки сервер получает из Тандема. Одновременно выполняется одно фоновое задание сервиса. Максимальное время выполнения — 30 минут.
Результаты доступны автору задания. Срок хранения сервера — 24 часа, затем файлы удаляются при плановой очистке. Скачайте необходимые результаты до истечения срока хранения и выхода из сессии.
| Сообщение | Действие |
|---|---|
| Сервис занят | Дождитесь завершения текущей обработки и запустите повторно. |
| Не найден заголовок в CSV с UID | Проверьте наличие колонок «Номер студ. билета» и «UID записи» либо «UID студенческого билета». |
| Зачетки не сформированы, все студенты без UID | Проверьте актуальность справочника, ведущие нули и заполненность UID. |
| Превышено время обработки / ошибка подключения | Проверьте доступность Тандема и правильность выбранного контингента. Повторите запуск; при повторной ошибке обратитесь к администратору. |
| Задание прервано | Сервис был перезапущен. Выберите контингент, загрузите CSV с UID и повторите операцию. |
Оба типа реестров принимаются в CSV, XLSX или XLSM. В каждом файле обязателен столбец «Номер студ. билета». В реестре студенческих билетов дополнительно обязательны «Статус студенческого билета» и «UID студенческого билета»; для UID также принимаются «Идентификатор студбилета» или «UID записи» (в этом порядке приоритета). Сопоставление выполняется только по номеру билета, а UID переносится из студенческого реестра. UID из реестров зачеток не используется. Статус в реестрах зачеток не требуется. ФИО и курс не требуются.
В CSV заголовки должны быть в первой строке. Поддерживаются UTF-8 с BOM или без него и Windows-1251; разделители — запятая, точка с запятой, табуляция или вертикальная черта. В Excel читается активный лист, заголовок ищется среди первых 20 строк.
Нужен именно реестр с колонкой «Номер студ. билета». Исходная выгрузка с колонкой «НОМЕР ЗАЧЕТНОЙ КНИЖКИ» не заменяет такой реестр. ZIP в этой операции не принимается.
Сверка проверяет наличие номера в реестрах и однозначность его связи с UID студбилета. После неё автоматически выполняется действие «Сформировать пустые зачетки 1 курса». Повторно загружать файлы или нажимать отдельную кнопку не нужно.
Файл доступен рядом с отчетом сверки, в предпросмотре и общем ZIP. Если подходящих записей нет, файл пустых зачеток не создается. Пропущенные номера учитываются в статистике и сообщении о результате; отдельный файл ошибок не создается. При ошибке SQL или шаблона отчет сверки сохраняется, а причина показывается в результатах и журнале. После исправления запустите сверку заново.
Файл «Нет_зачеток_для_студенческих.xlsx» содержит один лист «Шаблон» и две колонки: «Номер студ. билета» и «UID Студенческого билета». Каждая строка — уникальный номер без найденной зачетки и его UID из реестра студенческих билетов, без ФИО и курса. Если для всех номеров найдены зачетки, в файле остается только шапка из двух колонок.
Статистика показывает количество уникальных студенческих билетов после исключения отчисленных, уникальных номеров в объединенных реестрах зачеток и билетов без зачеток. Предпросмотр содержит первые 100 строк, скачиваемый файл — весь результат.
Если не найден столбец номера, UID или статуса, проверьте выбранный тип реестра и заголовки; для Excel — также активный лист: номер, UID и статус студенческого билета должны находиться в одной строке шапки. Без столбца «Статус студенческого билета» сверка не выполняется. Если у одного номера разные UID среди оставшихся после отбора строк, исправьте указанные строки студенческого реестра. При неожиданно большом числе отсутствующих зачеток проверьте актуальность всех реестров, ведущие нули и полноту набора файлов.
Допускается от 1 до 20 реестров зачеток и один реестр студенческих билетов: до 100 МБ на каждый файл, до 300 МБ суммарно. Для Excel действует ограничение 900 МБ после распаковки. Одновременно выполняется одно фоновое задание сервиса, максимальное время — 30 минут.
Если сервис занят, дождитесь завершения текущего задания. После прерывания из-за перезапуска загрузите файлы повторно. Результаты доступны автору задания и хранятся 24 часа до плановой очистки; скачайте отчет до истечения этого срока и выхода из сессии.
В отчет включены первые 10 000 ошибок. Общее количество показано в статистике.
| Файл | Категория | Строк | Действия |
|---|
Управление системой
Пользователи, безопасность входа, исходные SQL-запросы и шаблоны.
| Пользователь | Роль | Доступ к ИЯФ | Статус | Пароль | Последний вход | Действия |
|---|
Здесь хранятся запросы, которые действительно используются для выгрузок из Тандема. Сохранённая версия применяется к новым заданиям. Уже запущенные задания используют свою зафиксированную версию.
Используется автоматически после сверки «Студенческие без зачеток». Загруженный шаблон сохраняется между обновлениями приложения. Замена применяется только к новым заданиям.
Загрузка сведений…
Входы, изменения пользователей, сбросы паролей, настройки и версии SQL-запросов. Пароли и PIN в журнал не записываются.
| Дата | Кто | Действие | Объект | Подробности |
|---|