25 июня 2020 года состоялся круглый стол «Статистика ЭБС: что такое хорошо и что такое плохо», организованный Ассоциацией производителей и пользователей образовательных электронных ресурсов (АППОЭР). Цель онлайн-мероприятия состояла в выработке консолидированного экспертного мнения о сервисе «идеальной» статистики. Участники обсудили проблемы и вопросы, связанные с отсутствием единого подхода к подсчету статистики электронно-библиотечных систем, и поделились своими идеями по унификации существующих статистических показателей и разработке новых. Модератором вебинара стала Квелидзе-Кузнецова Натела Нодарьевна, исполнительный директор АППОЭР.
Натела Нодарьевна выступила с приветственным словом и рассказала о том,
что уже в течение двух лет АППОЭР обращает внимание на тему статистики и обращается к ней в своих обсуждениях, но именно конкретизированную форму этот запрос приобрел только сейчас. Ключевой доклад Нестеровой Альбины Николаевны, генерального директора Инфра-М, «Статистика электронно-библиотечных систем, или Стоит ли изобретать велосипед» был посвящен вопросу подсчета метрик, их достоверности и тому, какую статистическую систему сейчас лучше использовать.
От стандартного комплектования бумажными фондами услуги ЭБС отличаются прежде всего тем, что они оказываются не на территории библиотеки, а на серверах владельцев ЭБС. И, соответственно, статистика также считается не сотрудниками библиотеки, она рассчитывается ЭБС. Текущие показатели статистики, закрепленные нормативными документами, прежде всего статистической формой ВПО-2 (сведения о материально-технической и информационной базе, финансово-экономической деятельности образовательной организации высшего образования), не отвечают на конкретные вопросы или содержат парадокс, например показатель посещения. Посещением считается сессия на сервере, но в то же время этот показатель должен считаться в «человеках», что не является корректным. Сессий может быть гораздо больше, чем человек.
Основные различия заключаются в том, что в отчетах не указывается тип метрик, считаются ли уникальные (unique) или суммарные (total) пользователи. Между двумя этими типами могут быть большие отклонения в пользу суммарных метрик. Уровень отклонения может быть очень высоким, в полтора или даже два раза. Вторая проблема заключается в отклонениях по периодам, тем, как мы складываем пользователей и книги. Поэтому, возможно, стоит пересматривать важность подсчета данных не за месяц. В COUNTER R5 эти вопросы уже проработаны, они отделили повторяющие сущности от уникальных. Кроме COUNTER R5 можно использовать стандартизированные способы подсчета показателей из Google Analytics.
Чтобы получать качественную статистику необходимо, чтобы обе стороны были заинтересованы: ЭБС стремились к унификации, а библиотеки обеспечивали доступ всем сотрудникам и студентам вуза, например с помощью бесшовного перехода. Также важны индивидуальные регистрации, в данный момент в вузах только 80% пользователей приходят по IP вуза. Это является большой проблемой по получению прозрачной статистики, так как нельзя отследить конкретного человека и большая часть пользователей остается неисследованной. Альбина Николаевна пришла к в выводу, что COUNTER является наиболее подходящим стандартом для подсчета статистики, а ЭБС могли бы пройти аудит COUNTER, чтобы получить больше доверия библиотек.
Карпова Марина Эдуардовна, директор Научной библиотеки СПбГУ им. М. Горького рассказала о том, что вузовские библиотеки со второй половины 70-х годов стандартизировали свою статистику, поэтому этот вопрос для библиотек не является новым. Кроме статистической формы ВПО-2, для вузов существуют требования для СПО, так как они реализуют эти программы, и даже требования общего образования, поскольку ведущие университеты имеют в своем составе гимназии. Достоверность статистики важна для вуза, ведь платит прежде всего руководство вуза, а не библиотека. В отличие от Альбины Николаевны, Марина Эдуардовна говорила о том, что недельная статистика необходима, так как в апреле все сотрудники вуза должны были доказать руководству то, что они готовы к удаленному обучению. Марина Эдуардовна предлагает начать с малого — со стандартизации таких показателей, как книговыдача, например. Не надо отказываться от предыдущих показателей. Прежде всего нужна достоверность. Некоторые ресурсы предоставляют статистику, которая вызывает вопросы.
Куканова Вероника Михайловна, заведующий Научной библиотекой РАНХиГС, уверена, что вузам и ЭБС действительно очень важно говорить на одном языке. Что касается новых параметров статистики, то в них нет необходимости. Существующие показатели просто нужно систематизировать и привести к единообразию. Статистика для вузов — это инструмент принятия финансовых решений, чтобы доказать, что идет целевое расходование бюджетных средств. И именно здесь нужна система. Вопрос обсуждается уже давно, но решение до сих пор не принято. Другой момент связан с ростом показателей статистики. Не всегда есть уверенность в достоверности данных. Были случаи, когда каждый раз показатель в одной из систем рос на определенный коэффициент. Если говорить о дополнительных показателях, то было бы интересно увидеть срез по определенным тематикам всех электронных библиотек и узнать, например, самую читаемую книгу по философии в Москве.
Петрова Оксана Владимировна, директор библиотеки Самарского НИУ им. академика С. П. Королева, поделилась информационным облаком ЭБС и научных баз данных, к которым имеет доступ вуз. У библиотеки есть доступ к более сорока базам данных и по всем ним необходимо собрать статистику. По зарубежным ресурсам используется COUNTER, а вот для подсчета статистики отечественных ЭБС используется скорее эвристический способ и полную статистику собрать невозможно. В своей работе библиотеки также используют ГОСТ Р 7.0.20-2014 СИБИД. Библиотечная статистика: показатели и единицы исчисления. Большинство понятий по статистике идут из этого ГОСТа. Возможно стоит сделать комбинацию основных статистических показателей из COUNTER и этого ГОСТа.
Курпаков Вадим Юрьевич, директор издательско-библиотечного центра БФУ им. Канта, высказал радикальную идею о том, что нет необходимости использовать показатели COUNTER и сравнивать показатели иностранных и российских ЭБС. Закупать доступ к новым ЭБС исключительно из-за плохой статистики также довольно непродуктивно. Основная проблема ЭБС заключается в том, что контент не актуален, авторы не имеют стимулов создавать учебную и научную литературу. Но если говорить о статистике, то нужна ее персонификация и деление по специальностям и направлениям подготовки. Чтобы менять ЭБС, нужно спрашивать мнение конечных пользователей — студентов, что они хотят. Но в этом направлении практически нет никаких социологических исследований.
Лисицына Любовь Александровна, сотрудник библиотечной системы Государственного университета «Дубна», рассказала о том, что университет понимает важность бесшовного перехода, но пока бюджет не позволяет таких излишеств. Основной стандарт — это ГОСТ. Поэтому хотелось бы, чтобы в ЭБС применялись похожие формулировки. Рейтинги востребованности и отказов есть не в каждой ЭБС. Также нет учета по группам пользователей (факультетам) и по типам пользователей, непонятно, кто пользуется ЭБС. Необходима гибкая система отчетов с возможностью выбора даты.
Халюков Аркадий Владимирович, генеральный директор ИД «Гребенников», считает, что статистические показатели могут стать конкурентным преимуществом ЭБС. Пока время аудита еще не наступило. Рынок развивается естественным образом. Если вопрос приобретает серьезную значимость, то со временем он решается. Ситуация со статистикой может развиваться по-разному, но в любом случае этот вопрос будет решен. На самом деле российские вузы очень разные и всем нужно разное, поэтому требуется дальнейшая проработка этой проблемы.
Боровинский Арсен Исаевич, основатель библиотеки ELiS, высказал идею об использовании xAPI для решения проблемы со статистикой. CONTER не является идеальным инструментом и не может полностью соответствовать запросам российских библиотек, в особенности по отслеживанию цифровых следов. xAPI, в свою очередь, позволяет отслеживать события (действия) пользователя и отсылает их в базу данных вуза. В итоге сам вуз выстраивает свою аналитику, либо может использовать независимый сервер для хранения данных.
Захватаев Артем Валерьевич, представитель ЭБС «Университетская библиотека онлайн», рассказал о том, что в компании была внедрена система COUNTER 4-й версии, и оказалось, что ее используют менее 10%. 80% пользователей используют базовую статистику, которую можно получить из личного кабинета. И лишь менее 10% используют статистику по API. Базовая статистика популярна, так как она проста и не требует специальных навыков. Есть перспективы использования методов API по получению агрегированной статистики. Но это требует высокого уровня подготовки вуза и специальных навыков. Сейчас не хватает стандартизированных требований и структуры отчетов, а также единых стандартов интеграции. ЭБС ожидают единой стандартизированной формы, технического задания и утвержденных стандартов. Затем все можно будет быстро реализовать технически, главное — чтобы была проведена организационная работа.
Никифоров Александр Владимирович, директор ЭБС «Лань», обозначил, что COUNTER является отличным продуктом, но остается неясным, насколько он востребован. Сейчас им пользуются немногие. Также непонятно, насколько COUNTER удовлетворит запросы библиотек, соответствует ли он потребностям. ЭБС сделают все, что скажут библиотеки. Понятно, что сейчас в отчетах отсутствует унификация, по-разному названные отчеты выдают одинаковые данные. А также есть проблемы с достоверностью. Однако важно, чтобы библиотечное сообщество проявило инициативу и определилось с требованиями.
Морозова Светлана Александровна, заместитель директора фундаментальной библиотеки РГПУ им. А. И. Герцена, считает, что стандартизированный отчет необходим, однако достоверности данных ожидать не стоит пока не будет внешнего аудита. В статистике не хватает информации для продвижения среди пользователей. С помощью отслеживания цифровых отпечатков можно было бы корректировать коммуникацию и вовремя реагировать на запросы и отсутствие интереса к книгам.
В завершение вебинара Квелидзе-Кузнецова Натела Нодарьевна заключила, что и библиотеки, и библиотекари ищут готовое решение. Однако стандарты инициируют те, кому это необходимо. В данном случае статистика необходима вузовским библиотекам. Безусловно, нельзя обойтись без поставщиков и разработчиков.
Под эгидой АППОЭР Натела Нодарьевна предложила создать рабочую группу и начать готовить стандартизированный терминологический и отчетный перечень для подготовки будущего сервиса. Это станет еще одним шагом к упорядочению отрасли.