Проблемы качества представления измерительных данных в научных е-публикациях © В.В. Ежела Сотрудничество КОМПАС Институт физики высоких энергий Протвино ezhela@ihep.ru (iii) Метрологическая система РФ должна Аннотация быть дополнена системой центров поверки Обоснована необходимость и возможность е-данных. Для любых заимствованных изменения структуры научных е- данных, используемых в Науке, Технологии и в Образовании (НТО) РФ, сертификация публикаций и процедур предпубликационного рецензирования обязательна. измерительного числового материала, (iv) В университетах РФ необходимо создание лабораторий систематизации и представляемого к публикации. Использование устаревших издательских анализа данных по тематикам стандартов по представлению многомерных университетов, и своевременного производства актуального константного измерительных данных в вычислительной среде приводит к порче дорогостоящих обеспечения НТО в РФ под надзором ГНМЦД(ГСССД). измерительных данных. Недостаточность собственных профессиональных центров На нескольких типичных примерах систематизации и оценки критических публикаций ведущих зарубежных центров данных и знаний в России вынуждает систематизации и оценки наших доверчивых специалистов и экспериментальных данных и их отражения метрологов использовать некорректные в российской метрологии показаны «оцененные» е-данные, зачастую ситуации, породившие эти предложения. поддержанные и/или рекомендованные Работа выполнена при финансовой авторитетными международными поддержке РФФИ, грант 14-07-000950. организациями. Такие данные не должны Автор благодарен членам сотрудничества использоваться в модернизации КОМПАС, участникам семинара ИФВЭ, Метрологии в РФ без жесткого семинара Кафедры общей физики МФТИ, критического анализа и сертификации, как сотрудникам кафедры ФТИ ФИВТ МФТИ и это предписывается последними участникам конференций СPT за полезные концепциями развития метрологической обсуждения затронутых в докладе системы РФ. проблем. Особая благодарность В докладе также обсуждаются возможные организаторам СPT за возможность пути выхода из этой парадоксальной привлечения внимания студентов и ситуации: молодых специалистов к обсуждаемым (i) Oбщепринятая в науке система проблемам. обеспечения качества публикуемых многомерных измерительных данных 1 Введение должна быть дополнена требованиями С переходом к электронным текстам и обязательного «числового рецензирования» гипертекстам в обобществлении научных материала; результатов появилась возможность избавиться от (ii) При использовании заимствованных е- издательских ограничений на представление данных входной контроль их качества измерительных данных в бумажных научных обязателен; публикациях. Более того, традиционный способ гарантии качества — квалификационное рецензирование материалов, представленных к Труды 16-й Всероссийской научной конференции «Электронные библиотеки: перспективные методы и опубликованию, также может стать более глубоким. технологии, электронные коллекции» — RCDL-2014, Появляется возможность оперативной поверки Дубна, Россия, 13–16 октября 2014 г. корректности представления численного материала 166 (numerical peer review). Например, американское представлен в недавнем документе КОДАТА [18], физическое общество пошло по пути разделения цитата следует: публикации на описательную часть (традиционную “…Based on a review of emerging practices and в бумажной технологии) и фактографическую часть, analysis of existing literature on citation practices, we в которой численный материал, составляющий (WG: www.codata.org, www.icsti.org, www.icsu.org) результат исследования, представлен в виде, have identifie the following set of “first principles” for удобном для дальнейшего использования в data citation: вычислительных средах [1]. 1. Status of Data: Data citations should be accorded Многие крупные исследовательские лаборатории the same importance in the scholarly record as the создают собственные лабораторные хранилища веб- citation of other objects. доступных числовых данных по гиперссылкам из 2. Attribution: Citations should facilitate giving текстов описательных статей, опубликованных в scholarly credit and legal attribution to all parties журналах. Однако структуры данных и стандарты responsible for those data. представления измерительных данных все еще 3. Persistence: Citations should be as durable as the остаются прежними (сформированными в условиях cited objects. бумажного обмена научными результатами). 4. Access: Citations should facilitate access both to the Планетарная метрология сильно запаздывает с data themselves and to such associated metadata and обобщением предложений исследователей по documentation as are necessary for both humans and модернизации руководств по численному machines to make informed use of the referenced data. выражению результатов измерений (особенно 5. Discovery: Citations should support the discovery of многомерных) и с разработкой стандартов data and their documentation. числового представления результатов измерений, наблюдений и оценок в вычислительной среде. 6. Provenance: Citations should facilitate the establishment of provenance оf data. Это запаздывание приводит к возникновению научных статей-ребусов в большинстве быстро 7. Granularity: Citations should support the finest- развивающихся областей естествознания, к grained description necessary to identify the data. обширной синонимии в метаданных для описания 8. Verifiability: Citations should contain information измерительных данных и даже к некорректным sufficient to identify the data unambiguously. численным данным (частично из-за следования 9. Metadata Standards: Citations should employ widely давно устаревшим стандартам). accepted metadata standards. Все больше экспертов, работающих с 10. Flexibility: Citation methods should be sufficiently измерительными данными, обращают внимание flexible to accommodate the variant practices among научного сообщества на проблемы качества communities but should not communities…”. численных е-знаний в научных коммуникациях [6, 11, 12, 13, 14, 15] и необходимость регулярной Далее доклад организован по подразделам: систематизации возникающих уточненных данных, 2. Проблемы международной подстройки стандартов и их синхронизации со рекомендательной метрологии стандартами из смежных областей. Наиболее (или почему документы ИСО — продукты рабочей выпукло эта озабоченность выражена в недавней группы WG1(JCGM) пока не могут служить основой совместной работе звездных астрономов и ИТ- для разработки или гармонизации российских экспертов [16]. стандартов). Одной из острых проблем научно-технического 3. Проблемы оценки Фундаментальных сообщества является проблема доступа к новым Физических Констант (ФФК). История, измерительным и наблюдательным данным, современное состояние, необходимость регулярной добываемым учеными и инженерами. В последнее и независимой, но синхронной переоценки ФФК в десятилетие эксперты призывают к перестройке тесном сотрудничестве физиков-систематиков, ИТ- практики обмена дорогостоящими научными экспертов и метрологов России с физиками- данными и их сохранения для грядущих поколений. систематиками и метрологами США, ЕС, Японии и Однако усилия в основном направлены на проблемы Китая в согласовании новых версий переоценок стандартизации описательной стороны наборов ФФК. измерительных данных. Интенсивно обсуждается 4. Предложение по реализации концепции стандартизация метаданных («оформление упаковок развития метрологической системы РФ Создание данных») и методов обеспечения удобного и в университетах России центров данных и оперативного доступа к данным для совместного лабораторий систематизации данных и их использования разнородных данных в наукоёмких критическому анализу по тематикам университетов, приложениях. производству и своевременной сертификации Исчерпывающий обзор современного состояния современного константного обеспечения НТО идей и предложений по сохранению научных России в сотрудничествах с центрами данных измерительных и наблюдательных данных ГСССД РФ и с зарубежными центрами данных. 167 В докладе обращается внимание экспертов на не 2 Проблемы международной менее важную проблему обеспечения качества численного содержания наборов измерительных рекомендательной метрологии данных, потому что никому не нужны хорошо Первый документ международной организации организованные и легкодоступные, но КОДАТА, призывающий к объединению недостоверные измерительные (оцененные) данные. национальных усилий в стандартизации Для полноты представления тем доклада измерительных данных и их сохранению на приведем выдержку из последней «Концепции машинных носителях появился в конце 1973 года развития национальной системы стандартизации [2]. В 1977 году к этому призыву присоединилась Российской Федерации на период до 2020 года» Международная Палата Мер и Весов (CIPM) и [17], цитата следует: начала работу по формированию технического «…3. Разработка национальных стандартов комитета и рабочих групп для разработки в приоритетных отраслях экономики рекомендательных документов по формализации идеи «Единства Измерений». Разработка национальных стандартов в приоритетных отраслях экономики должна К 1995 году призыв КОДАТА частично осуществляться на основе общепринятых реализовался в документе ISO: Guide to the международных принципов стандартизации. Expression of Unсertainty in Measurement (GUM- 1995) с весьма ограниченной областью приложения. При этом необходимо обеспечить: Документ применим только к измерениям одной ежегодное обновление от 10 процентов до 15 величины. В случае косвенных измерений одной процентов фонда стандартов в секторах величины, зависящей от нескольких случайных экономики с высоким потенциалом развития; величин, оценки которых получены в статистически гармонизацию национальных стандартов с независимых измерениях, рекомендации GUM-1995 международными стандартами; применимы только в случаях, когда допустим сокращение сроков разработки и обновления линейный закон переноса неопределенностей. К национальных стандартов, в том числе исходя из сожалению, после «косметической» правки обязательств, принятых Российской Федерацией руководства GUM-1995 и его переиздания в 2008 при вступлении во Всемирную торговую году, область применимости GUM-2008, осталась организацию; прежней. Для косвенных измерений величин- функций, нелинейно зависящих от случайных создание механизма постоянного обновления величин-аргументов, рекомендации GUM-2008 национальных стандартов на базе передовых некорректны, и их не следует использовать как международных и региональных стандартов, основу для совершенствования стандартов. Более обеспечение разработки национальных стандартов детальная критика некоторых «вредоносных» на базе проектов международных стандартов (до положений GUM-2008 приведена в работе [6]. их окончательного принятия) с учетом требований законодательства Российской Федерации; Несмотря на эти ограничения и некоторые недоработки, продуктивная идея о необходимости разработку документов по стандартизации в планетарного единства измерений была сразу целях соблюдения требований, не относящихся к воспринята многими метрологическими системами техническому регулированию, и их гармонизацию с в разных странах. Документ GUM-1995/2008 стал аналогичными требованиями, установленными в рекомендательным руководством к формированию государствах – членах Таможенного союза и национальных стандартов и во многом способствует Европейского союза, с учетом требований становлению планетарного единства измерений (см. законодательства Российской Федерации; …». например документы: [7, 8, 9, 10]. К сожалению, российские метрологии не заметили указанных Мы показываем, что отнесение некоторых некорректностей и явно нелепых рекомендаций при международных стандартов к разряду «передовых» переводе руководства GUM на русский язык. и «гармонизация» национальных стандартов с Сопровождением и дальнейшей разработкой международными стандартами может оказаться концептуального базиса идеи «единства неподъемной (в разумное время) задачей. Основная измерений», применимого для большинства причина — отсутствие некоторых видов измерительных ситуаций, занимается рабочая деятельности в наших метрологических группа объединенного комитета по развитию GUM организациях и службах. Без специалистов, –WG1 of Joint Committee for Guides on Metrology работающих в областях сопряжения (JCGM) [19]. Уже разработаны первые приложения фундаментальной науки, информатики и к GUM для расширения области применимости метрологии, невозможно своевременное восприятие GUM: GUM-S1 [4] и GUM-S2 [5]. Попытки и освоение новых направлений в планетарной использовать их в реальных задачах показали метрологии. необходимость пересмотра избранного подхода к формализации идеи «единства измерений» и уже появилось соответствующее официальное заявление рабочей группы [20]. 168 Рабочая группа WG1 — это интернациональный зарубежными экспертами в формировании базы коллектив, образованный в 1997 году для рекомендаций и синхронизированных продолжительной совместной работы. К документов на национальных языках для сожалению, в этой рабочей группе не работали и не подстройки национальных стандартов. работают эксперты из метрологического сообщества РФ. А эта группа разрабатывает и сопровождает 3 Проблемы оценки Фундаментальных руководства, фокусирующие усилия сообществ, Физических Констант (ФФК) работающих в созидании и использовании измерительных данных, на проблемы достижения Исторически сложилось так, что “регулярная” планетарного единства измерений. переоценка ФФК проводится только в центре Участие российских специалистов в работе этой данных FCDC(NIST) [21] с 1973 года, под надзором группы представляется весьма актуальным для и при участии группы международных экспертов реализации нашей концепции метрологического “CODATA Task Group on Fundamental Constants” развития: «…обеспечение разработки национальных [22], в которой принимают участие и российские стандартов на базе проектов международных специалисты из рабочей группы РНК КОДАТА при стандартов (до их окончательного принятия) с президиуме РАН по “Фундаментальным учетом требований законодательства Российской физическим константам и единицам измерений Федерации…». физических величин” [23]. С результатами нескольких последних последовательных Воплощение концепции развития переоценок ФФК и их качеством можно метрологической системы РФ в реально ознакомиться по опубликованным отчетам в работающую метрологическую систему и ее научных обзорных журналах. Эти отчеты свободно гармонизация с «мировой Метрологией», по- доступны на сайте FCDC(NIST) (см. [26], [27], [28], видимому, возможны, но пути реализации [29] и комментарии к ним). Здесь для примера мы концепции не подкреплены соответствующими приводим таблицу выборки констант, две из «дорожными картами» и пока остаются весьма которых базовые h и α(0) (крупные символы в туманными. Однако, реализация концепции таблице). невозможна без тесного сотрудничества ученых- систематиков, ИТ-экспертов и метрологов РФ с CODATA: 1986 (1987) Symbol Unit Value(Uncertainty)Scale Correlations Elementary charge 19 e C 1.602 177 33 (49)  10 e h me Planck constant 34 h Js 6.626 075 5 (40)  10 0.997 Electron mass 31 me kg 9.109 389 7 (54)  10 0.975 0.989 1/(Fine struct. const.) 1/α(0) 137.035 989 5 (61) −0.226 −0.154 −0.005 Такие же выборки были сделаны с сайта 2006: 2008 FCDC(NIST) в разные годы и для каждой из них {2.99942, 1.00006, 0.000719993, –0.000202165} были вычислены собственные числа матриц 2010: 2012 корреляций неопределенностей. {2.99983, 1.00022, –0.0000451921, –5.92939·106} Результаты вычислений приведены в следующей таблице, из которой видно, что результаты всех Причин такого систематического конфуза последовательных переоценок несостоятельны, так несколько. Частично они разобраны в работах [24], как матрицы корреляций неопределенностей имеют [25], [6]. Основной причиной, по-видимому, отрицательные собственные значения. Двойные является неоправданное использование линейных даты в первой колонке этой таблицы дают указание приближений в «теоретических» соотношениях на (год переоценки и выкладки численных связи физических наблюдаемых величин результатов на сайте FCDC : год публикации (observational equations) с базовыми ФФК, косвенно описательной части в обзорных журналах). измеряемыми (согласуемыми) по методу наименьших квадратов (МНК). Это приводит к Собственные числа матриц корреляций возникновению смещенных оценок базовых ФФК и неопределенностей констант {e, h, me, 1/α(0)}, плохо обусловленных матриц ковариаций их оценки которых были рекомендованы КОДАТА неопределенностей. Возможные смещения не обсуждаются в публикациях FCDC(NIST) и, по- 1986: 1987 видимому, не оцениваются для обоснования {2.99891, 1.00084, 0.000420779, –0.000172106} применения «линейного» МНК при согласовании и 1998: 2000 «линейного» переноса неопределенностей от {2.99029, 1.01003, –0.000441572, 0.000123580} базовых (adjusted) к выведенным (derived) ФФК при 2002: 2005 их вычислениях. {2.99802, 1.00173, 0.000434393, –0.000183906} 169 Одним из важных критериев состоятельности а если высокоточное приложение еще и чревато результата измерения является полнота повышенной опасностью в технических представления численного материала, необходимого реализациях, то использование несостоятельных для проведения численного рецензирования и для ФФК, рекомендованных как актуальные и надежные предоставления возможности использования преступно. результатов измерения в высокоточных Вызывает удивление документ ГСССД 237-2008, приложениях. В последней переоценке 2010 года из «ФУНДАМЕНТАЛЬНЫЕ ФИЗИЧЕСКИЕ 67 базовых ФФК (см [29], с. 1579, TABLE.XXX и КОНСТАНТЫ», МОСКВА, СТАНДАРТИНФОРМ, с. 1580, TABLE.XXXII) 30 ФФК — это аддитивные 2009, под рубрикой «ТАБЛИЦЫ СТАНДАРТНЫХ поправки δ(.)(…) к теоретическим формулам для СПРАВОЧНЫХ ДАННЫХ», в котором учета их несовершенства (например, оценки вкладов полиграфически блестяще напечатаны высших порядков теории возмущений в КЭД). «копипастянутые» численные значения констант, К сожалению, значения этих поправок и выложенных на сайте FCDC в 2007 году и коэффициентов корреляций их с ФФК, полученные опубликованных [28] в 2008 году. Сокрытие при согласовании ФФК, ни в печатных версиях, ни информации об оцененной в FCDC на сайте FCDC(NIST) не представлены. Этот коррелированности неопределенностей ФФК в этом численный материал по δ(.)(…) не отражен и в документе, по-видимому, означает признание наиболее полной, по численному материалу, версии экспертами ГСССД факта несостоятельности этой CODATA-02 [27]. Сокрытие этих данных переоценки ФФК для использования их в препятствует корректному использованию ФФК в высокоточных вычислениях неопределенностей высокоточных вычислениях в атомной функций, зависящих от нескольких ФФК. Но спектроскопии. Свидетельство о недопустимости производители таблиц ГСССД 237-2008 не пренебрежения информацией о корреляциях ФФК в предостерегают потенциальных пользователей об вычислениях атомных спектров приведенo в этой особенности таблиц и их неполноте публикации [30] с участием экспертов из (отсутствию значений 30 настраиваемых FCDC(NIST), цитата следует: поправочных констант и их корреляций). Остались “…The energy level Ei of state i can be written as a без должного внимания предостережения из function of the fundamental constants and an additional оригинального текста на с. 635, [28]: цитата следует: adjusted constant δi which takes into account the «…Since the calculations are carried out with more uncertainty in the theory [27, 30, 31]. significant figures than are displayed in the text to avoid For example, for the case in which i is a state of rounding errors, data with more digits are available on hydrogen, we have the FCDC website for possible independent analysis…с. 635.» Ei = Hi (R, Ar(e), Ar(p), Rp) + δi (1) Кроме того, остается неопределенность с where the constants that appear as arguments of the синхронизацией оригинала и его освоения в нашей function Hi are listed in Table II. Because the values of метрологической системе: очередная переоценка the constants in Eq. (1), including δi, result from a least ФФК была произведена в FCDC в 2010 году, squares adjustment, theу are correlated, particularly результаты выставлены на сайте FCDC в начале those for R, and Rp, which have a correlation coefficient 2011 года и опубликованы в 2012 году [29]. of 0.996. Похоже, эксперты ГСССД не успевают The uncertainty of the calculated value for the 1S-2S осваивать последовательные концепции [17] и, как frequency in hydrogen is increased by a factor of about следствие, не успевают осваивать и 500 if such correlations are neglected….” сертифицировать новые переоценки ФФК к Следует отметить, что значения ФФК использованию в НТО РФ. Частично это используются в бесчисленных приложениях с запаздывание, по-видимому, связано с разными требованиями к полноте и достоверности непониманием причин отсутствия 30 базовых ФФК значений ФФК. Большинство приложений не в таблицах согласованных ФФК в FCDC и требуют исчерпывающего численного появлением в результатах согласования представления результатов измерений ФФК. В некорректных матриц ковариаций и корреляций. многих прикладных справочниках, в учебниках и на Российские потребители ФФК от ГСССД сайтах вообще не упоминается наличие корреляций вынуждены использовать «одряхлевшие» неопределенностей ФФК, свободно доступных на данные 8-летней давности. сайте FCDC. Таким образом, становится очевидной острая Однако, сокрытие уже имеющихся знаний, необходимость глубокого и строгого численного добытых длительным кропотливым трудом, — это предпубликационного рецензирования результатов грубое нарушение научной этики (см. десять измерений, представляемых для опубликования в заповедей авторам измерительных данных от журналах и/или на сайтах е-журналов. Также исследователей живых систем в [11]). очевидна необходимость тщательного численного Для приложений, требующих высокоточных контроля качества заимствуемых научно- вычислений с несколькими ФФК совместно, технических ресурсов. Однако, без «единства использование несостоятельных ФФК недопустимо, 170 численного выражения и представления измерений компетенций в рамках подготовки бакалавров, в е-среде» оперативное численное рецензирование специалистов и магистров; …». невозможно. Жесткий стандарт на численное В РФ исчезающе мало профессиональных выражение и представление результатов измерений центров данных по фундаментальным равно как и разделение публикаций на направлениям естествознания. Нет или почти описательную и численную части в е-науке нет профессиональных открытых центров неизбежны. Хочется верить, что эксперты из JCGM данных и по приоритетным направлениям учтут эту неизбежность при пересмотре и развитии развития технологий. Комитеты есть, комиссии GUM и его расширений. есть, рабочие группы есть, концептуальная ГСССД Другой, столь же очевидный вывод из анализа есть, а вот центров данных для формирования современной практики обмена научными надежных научных фактографических ресурсов достижениями — это необходимость национальных, поддержки инновационного развития НТО в РФ нет. но сотрудничающих центров данных в созидании Куда, для чего и как готовить специалистов? научных информационных ресурсов, критических Вот в чем вопрос! для развития региональных и планетарной НТО. Для обеспечения жизнеспособности национальных 4 Предложение по реализации центров данных нужны: целевое финансовое обеспечение их основной работы; подготовленные концепции развития метрологической ученые-систематики; программы их системы РФ воспроизводства в вузах РФ. В нашем центре данных такая программа была сформулирована (в В каждом вузе России необходимо создать прошлые 90-е годы в рамках ОСССД, лаборатории систематизации данных и их распадающегося ГКАЭ СССР) в положении о критическому анализу по тематикам вуза, Центре Данных Физики Частиц в ИФВЭ. производству и своевременной сертификации актуального константного обеспечения НТО вуза в В последней концепции развития сотрудничестве с центрами данных ГСССД РФ и с Метрологической Системы РФ [17] необходимость зарубежными центрами данных. Для этого, по- программ воспроизводства квалифицированных видимому, нужна ФЦП по реализации концепции систематиков и метрологов для работ в центрах развития метрологической системы РФ, если такой данных сформулирована достаточно полно и еще нет, а если есть, то подправить ее с учетом внятно, но в рекомендательном стиле, без учета некоторых предложений этого доклада, если реальной ситуации в НТО РФ, цитата следует: эксперты ФЦП сочтут их полезными. «11. Совершенствование системы В лабораториях: подготовки специалистов и экспертов – Сначала создавать профильные системы в области стандартизации поверки качества научных знаний в национальных и …С учетом динамичного развития зарубежных информ-ресурсах (необходимых вузам стандартизации следует обеспечить как для собственных научных исследований, в подготовку специалистов в области подготовке молодой научной смены и при стандартизации в высших и средних специальных перепрофилировании научных кадров на учебных заведениях, так и периодическое «прорывные» проекты); повышение квалификации работающих – Организовывать сотрудничества с специалистов. национальными и зарубежными центрами данных Для решения этих задач необходимо: по совместному сопровождению и синхронизации актуализировать или ввести в образовательных «сертифицированных знаний»; учреждениях высшего и среднего профессионального – Преобразовывать лаборатории систематизации образования инженерного и экономического профиля в вузовские профильные центры данных, а их дисциплины по стандартизации по системы поверки в базы генерации профильных соответствующим направлениям подготовки; системных знаний; – Обучать и тренировать профильных развивать возможности получения специалистов-систематиков в вузовских центрах обучающимися в образовательных учреждениях данных. высшего профессионального образования и среднего профессионального образования дополнительного Можно ожидать, что такие, непрерывно образования в области стандартизации параллельно действующие структуры, приживутся в наших вузах с освоением ими основной профессиональной и будут способствовать своевременному повышению образовательной программы; уровня профессиональной информированности обучающих и обучаемых, готовить достойную и обеспечить в соответствии с требованиями ответственную смену для корпоративных центров федеральных государственных образовательных данных и для центров данных ГСССД по стандартов высшего профессионального образования специальностям: физик-систематик, химик- привлечение практикующих специалистов в области систематик, нано-систематик, био-систематик, инфо- стандартизации к формированию соответствующих систематик, когни-систематик, … 171 Литература [14] Ray P. Norris, “How to Make the Dream Come True: The Astronomer’s Data Manifesto”, [1] EPAPS http://www.aip.org/publishing/authors/ CODATA DSJ, 6, S116-S124, 2007. supporting-data [15] Shuichi Iwata, “SCIENTIFIC "AGENDA" OF [2] D. Gavrin, T. Golashvili, H.V. Kehiaian, N. Kurti, DATA SCIENCE”, CODATA DSJ, 7, 54-56, E. F. Westrum Jr. [CODATA Task Group on 2008. Publication of Data in the Primary Literature)] [16] О.Ю. Малков и др. Задачи и данные в области “Guide for the Presentation in the Primary звездной астрономии // Электронные Literature of Numerical Data Derived from библиотеки: перспективные методы и Experiments”, CODATA Bulletin 9, 1973. технологии, электронные коллекции: Труды [3] BIPM, IEC, IFCC, ISO, IUPAC, IUPAP, and XV Всероссийской научной конференции OIML “Guide to the Expression of Uncertainty in RCDL-2013, Ярославль, Россия, 14–17 окт. Measurement”, 1995 ISO/IEC Guide 98:1995, 2013 г. – Ярославль: ЯрГУ, 2013. – С. 38–47. – ISBN 92-67-10188-9, Second Edition. ISOGUM, http://rcdl.ru/doc/2013/paper/pd_6.pdf; JCGM 100:2008, Evaluation of measurement data [17] Правительство РФ, Распоряжение от – “Guide to the expression of uncertainty in 28.02.2006, № 266-р, М. Фрадков, Measurement”, 2008. Правительство РФ, Распоряжение от http://www.bipm.org/utils/common/documents/jcg 12.10.2010, № 1760-р, В. Путин, m/JCGM_100_2008_E.pdf Правительство РФ, Распоряжение от [4] JCGM 101:2008, Evaluation of measurement data 24.09.2012, № 1762-р, Д. Медведев. – Supplement 1 to the – “Guide to the expression [18] CODATA-ICSTI Task Group on Data Citation of uncertainty in measurement” – Propagation of Standards and Practices “OUT OF SITE OUT OF distributions using a Monte Carlo method, 2008 MIND: The Current State of Practice, Policy, and http://www.bipm.org/utils/common/documents/jcg Technology for the Citation of Data”, CODATA m/JCGM_101_2008_E.pdf DSJ, 12, CIDCR1-CIDCR75б, 2013. [5] JCGM 102:2011, Evaluation of measurement data [19] JCGM, http://www.iso.org/sites/JCGM/JCGM- – Supplement 2 to the – “Guide to the expression introduction.htm of uncertainty in measurement” – Extension to any [20] Walter Bich et al.,[ JCGM.WG1], “Revision of number of output quantities, 2011 the ‘Guide to the Expression of Uncertainty in http://www.bipm.org/utils/common/documents/jcg Measurement””, Metrologia 49, 702–705, 2012. m/JCGM_102_2011_E.pdf [21] FCDC (NIST)-Fundamental Constants Data [6] Vladimir V. Ezhela “Multimeasurand ISO GUM Center http://www.nist.gov/pml/div684/fcdc/ supplement is Urgent”, CODATA DSJ, 6, S676- S789, 2007; [Errata: CODATA DSJ, 7, E2-E2] , [22] CIPM, CODATA FPC Working group 2007. http://www.bipm.org/extra/codata/members.html [7] Barry N. Taylor and Chris E. Kuyatt, “Guidelines for [23] РНК РАН http://codata.gcras.ru/ РНК РАН Evaluating and Expressing the Uncertainty of NIST Рабочая группа по ФФК Measurement Results” NIST Technical Note 1297, http://www.gao.spb.ru/russian/psas/kodata/index.html 1994 http://www.nist.gov/pml/pubs/tn1297/ [24] V.V. Ezhela, Y.V. Kuyanov, V.N. Larin and A.S. [8] (ВНИИМ GUM) Руководство по выражению Siver, “The Inconstancy of the Fundamental неопределенности измерения. Перевод ISO Physical Constants: Computational Status”, 2004 GUM, ВНИИМ, 1999. web.ihep.su/library/ps/2004-36.pdf [9] РМГ 43 2001, Применение “Руководства по [25] В.В. Ежела. О корректном числовом выражению неопределенности измерения”, представлении результатов косвенных 2003. измерений. 2006 http://web.ihep.su/library/ pubs/prep2006/ps/2006-28.pdf [10] NASA-HDBK-8739.19-3,“Measurement Uncertainty Analysis Principles and Methods”, 2010 [26] P.J. Mohr and B.N. Taylor “CODATA https://standards.nasa.gov/documents/detail/3315776 Recommended Values of the Fundamental Physical Constants: 1998”, Rev. Mod. Phys. 72, [11] NAP publication, “SHARING PUBLICATION- 351, 2000 CODATA-98. RELATED DATA AND MATERIALS: RESPONSIBILITIES OF AUTHORSHIP IN THE [27] P.J. Mohr and B.N. Taylor, “CODATA LIFE SCIENCES”, Washington, D. C., 2003 Recommended Values of the Fundamental http://www.nap.edu/catalog.php?record_id=10613 Physical Constants: 2002”, Rev. Mod. Phys. 77, 1. 2005 CODATA-02. [12] Nicole M. Radziwill “Foundation for Quality Management of Scientific Data Products”, Quality [28] P.J. Mohr, B.N. Taylor, and D.B. Newell, Management Journal, 13(2), 7, 2006. “CODATA Recommended Values of the Fundamental Physical Constants: 2006”, Rev. [13] David R. Lide, “Data quality - more important Mod. Phys. 80, 633,2008. CODATA-06. than ever in the Internet age”, CODATA DSJ, 6, 154-155, 2007. [29] P.J. Mohr, B.N. Taylor, and D.B. Newell “CODATA Recommended Values of the 172 Fundamental Physical Constants: 2010”, Rev. already. Namely: narrative part and factual numerical Mod. Phys. 84, 1527, 2012. CODATA-10. parts of the research report should be separated [30] U.D. Jentschura, S. Kotochigova, Eric-Olivier Le somehow. The factual part should be strongly connected Bigot, P.J. Mohr, and B.N. Taylor, “Precise by metadata and hyperrefs with the narrative part, but it energies of highly excited hydrogen and should be in a computer usable form to provide deuterium” PRL 95, 163003, 2005. possibility for a special numerical peer review being as deep-and-fast as possible for quality assuarance of the On Problems with Measured Data Quality reported measured data. It seems that the absence of the in Scientific e-publishing selfconsistent numerical standards for multidimensional measured data expression and presentation in computer Vladimir. V. Ezhela media is the main reason for the appearance of unintended corrupted published data. It is hoped that It is argued that the structural changes in scientific JCGM experts will fill this harmful missing in e-publishing of the research results based on measured Metrology soon. data are unavoidable, and even are on the marsch 173