Перейти к содержимому

Как сделать проверку данных

  • автор:

Проверка данных в EXCEL

Инструмент Проверка данных ( Данные/ Работа с данными/ Проверка данных ) не был бы столь популярным, если бы его функциональность ограничивалась бы только собственно проверкой. Ниже кратко перечислены основные приемы работы с этим инструментом.

A. Проверка введенных значений

Как видно на рисунке снизу, условия проверки вводимого значения можно настроить очень гибко.

Можно разрешить ввод значений в ячейку только определенного типа, выбрав необходимое условие из выпадающего (раскрывающегося) списка:

  • Целое число . В ячейку разрешен ввод только целых чисел, причем принадлежащих определенному диапазону;
  • Действительное . В ячейку разрешен ввод только чисел, в том числе с десятичной частью (нельзя ввести текст, дату ввести можно);
  • Дата. Предполагается, что в ячейку будут вводиться даты начиная от 01.01.1900 до 31.12.9999. Подробнее о формате Дата — в статье Как Excel хранит дату и время
  • Время . Предполагается, что в ячейку с Проверкой данный этого типа будет вводиться время. Например, на рисунке ниже приведено условие, когда в ячейку разрешено вводить время принадлежащее только второй половине дня, т.е. от 12:00:00 до 23:59:59. Вместо утомительного ввода значения 12:00:00 можно использовать его числовой эквивалент 0,5. Возможность ввода чисел вместо времени следует из того, что любой дате в EXCEL сопоставлено положительное целое число, а следовательно времени (т.к. это часть суток), соответствует дробная часть числа (например, 0,5 – это полдень). Числовым эквивалентом для 23:59:59 будет 0,99999.

  • Длина текста . В ячейку разрешен ввод только определенного количества символов. При этом ограничении можно вводить и числа и даты, главное, чтобы количество введенных символов не противоречило ограничению по длине текста. Например, при ограничении количества символов менее 5, нельзя ввести дату позднее 13/10/2173, т.к. ей соответствует число 99999, а 14/10/2173 — это уже 100000, т.е. 6 символов. Интересно, что при ограничении, например, менее 5 символов, вы не сможете ввести в ячейку формулу =КОРЕНЬ(2) , т.к. результат =1,4142135623731 (в зависимости от заданной в EXCEL точности), а вот =КОРЕНЬ(4) – сможете, ведь результат =2, а это только 1 символ.
  • Список . Наверное, самый интересный тип данных. В этом случае ввод значений в ячейку можно ограничить ранее определенным списком. Например, если в качестве источника указать через точку с запятой единицы измерения товара шт;кг;кв.м;куб.м , то ничего другого, кроме этих 4-х значений из списка вам выбрать не удастся. В источнике можно указать диапазон ячеек, содержащий заранее сформированный список или ссылку на Именованную формулу . Пример приведен в статье Выпадающий (раскрывающийся) список
  • Другой . В ячейку разрешен ввод значений удовлетворяющих более сложным критериям. Для задания критериев необходимо использовать формулу. Рассмотрим это условие подробнее.

При выбранном типе Другой, в поле Формула нужно ввести формулу для расчета логического значения. Если оно принимает значение ИСТИНА, то такое значение разрешено вводить в ячейку, если ЛОЖЬ, то ваше значение ввести не получится. В качестве аргумента формулы нужно использовать ссылку на саму ячейку, к которой применяется Проверка данных или ссылку на зависящую от нее ячейку. Например,

Введите формулу

Пояснение

Ячейка B2 содержала только текст

В Типе данных нет возможности выбрать тип Текст , поэтому приходится этого добиваться косвенно. Вы можете Проверку данных применить прямо к ячейке B2

Допустить ввод значения в ячейку B1 только в случае, если после ввода значение в ячейке D1 будет больше 100, в D2 меньше, чем 400

Проверку данных применяем к ячейке B1 . При этом в ячейке D1 введена формула =B1*2 , а в D2 – формула =B1*3 . Хотя эта формула эквивалентна ограничению Действительное с диапазоном от 50 до 133,33, но при более сложных связях ячеек, этот прием может быть полезен

Значение в ячейке, содержащей возраст работника ( С1 ), всегда должно быть больше числа полных лет работы ( D1 ) плюс 18 (минимальный возраст приема на работу)

При заполнении таблицы данными о возрасте и стаже работы можно поставить эту проверку для обеих ячеек ( C1 и D1 ). Для этого нужно выделить сразу 2 ячейки, вызвать Проверку данных и немного модифицировать формулу =ЕСЛИ($C1>$D1+18;ИСТИНА;ЛОЖЬ)

Все данные в диапазоне ячеек A1:A20 содержали уникальные значения

Необходимо выделить ячейки А1:А20 , вызвать инструмент Проверка данных и ввести формулу. Вторую формулу можно использовать для всего столбца А , для этого необходимо выделить не диапазон, а весь столбец А

Значение в ячейке, содержащей имя кода продукта ( B5 ), всегда начиналось со стандартного префикса «ID-» и имело длину не менее 10 знаков.

Проверку данных вводим для ячейки B5

При выделении нескольких ячеек, там где нужно, не забывайте указывать абсолютную ссылку на ячейки (например, $A$1:$A$20 ).

При использовании инструмента Проверка данных , предполагается, что в ячейку будут вводиться константы ( 123, товар1, 01.05.2010 и пр.), хотя никто не запрещает вводить и формулы. В этом случае проверяться все равно будет результат вычисления формулы. Вообще вводить формулы в ячейки с проверкой данных не советую – легко запутаться. В этом случае советую использовать Условное форматирование .

В. Отображение комментария, если ячейка является текущей.

Используйте вкладку Сообщение для вывода , чтобы отображать комментарий.

В отличие от обычного примечания ( Рецензирование/ Примечание/ Создать примечание ), которое пропадает после того, как курсор мыши уходит с ячейки (если не активна опция Показать все примечания ), этот комментарий отображается всегда, когда ячейка выделена.

С. Вывод подробного сообщения об ошибке.

После ввода ошибочного значения Проверка данных может отобразить подробное сообщение о том, что было сделано не так. Это некий аналог Msgbox() из VBA .

D. Создание связанных диапазонов (списков)

Если в качестве Типа данных на вкладке Параметры мы выберем Список , то сможем сформировать связанные диапазоны. Тема так обширна, что она выделена в отдельную статью Связанный список .

Е. Использование в правилах ссылок на другие листы

В EXCEL 2007 в Проверке данных , как и в Условном форматировании нельзя впрямую указать ссылку на диапазоны другого листа, например, так =Лист2!$A$1 . Позволяют обойти это ограничение использование Имен .

Если в Проверке данных нужно сделать, например, ссылку на ячейку А1 другого листа, то нужно сначала определить Имя для этой ячейки, а затем сослаться на это имя в правиле Проверке данных .

В Excel 2010, напротив, можно использовать правила проверки данных, ссылающиеся на значения на других листах. В Excel 2007 и Excel 97-2003 проверка данных этого типа не поддерживается и не отображается на листе. Однако все правила проверки данных остаются доступными в книге и применяются при повторном открытии книги в Excel 2010, если они не были изменены в Excel 2007 или Excel 97-2003.

F. Как срабатывает Проверка данных

Проверка данных явно срабатывает при вводе в ячейку значений с клавиатуры с последующим нажатием клавиши ENTER . В этом случае появляется окно с описанием ошибки.

Если значения вставляются через Буфер обмена ( Вставить значения ) или с использованием сочетания клавиш CTRL + D (копирование значения из ячейки сверху) или копируются Маркером заполнения сверху вниз, то проверка в явном виде не осуществляется. Кроме того, при копировании значений можно вообще случайно удалить правила Проверки данных , например если в ячейке источнике не определена Проверка данных , а данные из нее вставляются через Буфер обмен а с использованием комбинации клавиш CTRL+V .

Поясним на примере. Предположим, к ячейке А1 применена Проверка данных с условием проверки Другой , где в поле формула введено =СТРОКА(A1)=1 , т.е. для всех ячеек из первой строки условие Проверки данных будет принимать значение ИСТИНА, для других строк — ЛОЖЬ вне зависимости от содержания ячейки.

Теперь выделим ячейку А2 и нажмем CTRL+D . Значение из А1 скопируется в А2 вместе с условием Проверки данных . Несмотря на то, что теперь условие Проверки данных будет принимать значение ЛОЖЬ, никакого предупреждающего сообщения выведено не будет. Чтобы убедиться, что данные в ячейках соответствуют условиям определенным в Проверке данных , нужно вызвать команду меню Обвести неверные данные ( Данные/ Работа с данными/ Проверка данных/ Обвести неверные данные ). Ячейки с неверными данными будут обведены красными овалами. Теперь опять выделим ячеку А2 и нажмем клавишу F2 (войдем в режим Правки), затем нажмем ENTER — появится окно с сообщением, что введенное значение неверно.

Есть еще один способ обхода проверки данных. Предположим, ввод в ячейку ограничен значениями от 1 до 3. Теперь в любую другую ячейку без Проверки данных введем значение 4. Выделим эту ячейку, в Строке формул выделим значение 4 и скопируем его в Буфер обмена . Теперь выделим ячейку с Проверкой данных и нажмем CTRL+V . Значение вставилось в ячейку! Кроме того, Проверка данных осталась нетронутой в отличие от случая, когда через Буфер обмена , например, вставляется значение из WORD. Чтобы убедиться, что данные в ячейке не соответствуют условиям определенным в Проверке данных , нужно вызвать команду меню Обвести неверные данные ( Данные/ Работа с данными/ Проверка данных/ Обвести неверные данные ).

G. Поиск ячеек с Проверкой данных

Если на листе много ячеек с Проверкой данных , то можно использовать инструмент Выделение группы ячеек ( Главная/ Найти и выделить/ Выделение группы ячеек ).

Опция Проверка данных этого инструмента позволяет выделить ячейки, для которых проводится проверка допустимости данных (заданная с помощью команды Данные/ Работа с данными/ Проверка данных ). При выборе переключателя Всех будут выделены все такие ячейки. При выборе опции Этих же выделяются только те ячейки, для которых установлены те же правила проверки данных, что и для активной ячейки.

Применение проверки данных к ячейкам

Используйте проверку данных, чтобы ограничить тип данных или значения, которые пользователи вводит в ячейку, например раскрывающийся список.

Браузер не поддерживает видео. Установите Microsoft Silverlight, Adobe Flash Player или Internet Explorer 9.

Проверьте, как это работает!

Проверка данных

  1. Выделите ячейки, для которых необходимо создать правило.
  2. Выберите Data >Data Validation (Проверка данных >).
  3. На вкладке Параметры в разделе Разрешить выберите параметр:
    • Целое число — ограничивает ячейку только целыми числами.
    • Decimal — ограничивает ячейку только десятичными числами.
    • Список — для выбора данных из раскрывающегося списка.
    • Date — ограничивает ячейку только датой.
    • Time — ограничивает ячейку только временем.
    • Длина текста — для ограничения длины текста.
    • Custom — для настраиваемой формулы.
  4. В разделе Данные выберите условие.
  5. Задайте другие обязательные значения в зависимости от того, что вы выбрали для параметра Разрешить и Данные.
  6. Перейдите на вкладку Входное сообщение и настройте сообщение, которое пользователи увидят при вводе данных.
  7. Установите флажок Показывать входное сообщение при выборе ячейки , чтобы отобразить сообщение, когда пользователь выбирает выбранные ячейки или наносит указатель мыши на нее.
  8. Перейдите на вкладку Оповещение об ошибке , чтобы настроить сообщение об ошибке и выбрать стиль.
  9. Нажмите кнопку ОК. Теперь, если пользователь попытается ввести недопустимое значение, появится предупреждение об ошибке с настроенным сообщением.

Скачивание примеров

Если вы создаете лист, на котором пользователи должны вводить данные, может потребоваться ограничить ввод определенным диапазоном дат или чисел либо разрешить ввод только положительных целых чисел. Excel может ограничить ввод данных определенными ячейками с помощью проверка данных, предложить пользователям ввести допустимые данные при выборе ячейки и отобразить сообщение об ошибке, когда пользователь вводит недопустимые данные.

Ограничение ввода данных

  1. Выделите ячейки, для которых нужно ограничить ввод данных.
  2. На вкладке Данные выберите Проверка данных >Проверка данных.

Примечание: Если команда проверки недоступна, возможно, лист защищен или книга является общей. Если книга является общей или лист защищен, изменить параметры проверки данных невозможно. Дополнительные сведения о защите книги см. в статье Защита книги.

Примечание: Поля, в которые вы вводите ограничивающие значения, помечаются на основе выбранных данных и условий ограничения. Например, если в качестве типа данных выбрана дата, можно ввести ограничивающие значения в полях с минимальными и максимальными значениями с метками «Дата начала » и «Дата окончания«.

Запрос для пользователей на ввод допустимых значений

Когда пользователи выбирают ячейку с требованиями к вводу данных, можно отобразить сообщение с описанием допустимых данных.

  1. Выделите ячейки, в которых для пользователей нужно отображать запрос на ввод допустимых данных.
  2. На вкладке Данные выберите Проверка данных >Проверка данных.

Примечание: Если команда проверки недоступна, возможно, лист защищен или книга является общей. Если книга является общей или лист защищен, изменить параметры проверки данных невозможно. Дополнительные сведения о защите книги см. в статье Защита книги.

Отображение сообщения об ошибке при вводе недопустимых данных

При наличии ограничений для данных и при вводе пользователем недопустимых данных в ячейку можно отображать сообщение об ошибке.

  1. Выберите ячейки, в которых нужно отображать сообщение об ошибке.
  2. На вкладке Данные щелкните Проверка данных >Проверка данных .

Примечание: Если команда проверки недоступна, возможно, лист защищен или книга является общей. Если книга является общей или лист защищен, изменить параметры проверки данных невозможно. Дополнительные сведения о защите книги см. в разделе Защита книги .

Добавление проверки данных в ячейку или диапазон ячеек

Примечание: Первые два действия, указанные в этом разделе, можно использовать для добавления любого типа проверки данных. Действия 3–7 относятся к созданию раскрывающегося списка.

  1. Выделите одну или несколько ячеек, к которым нужно применить проверку.
  2. На вкладке Данные в группе Средства обработки данных выберите Проверка данных.
  3. На вкладке Параметры в поле Разрешить выберите Список.
  4. В поле Источник введите значения списка, разделенные запятыми. Например, введите Low, Average, High.
  5. Убедитесь, что выбран раскрывающийся список В ячейке проверка. В противном случае вы не увидите стрелку раскрывающегося списка рядом с ячейкой.
  6. Чтобы указать способ обработки пустых (NULL) значений, установите или снимите флажок Игнорировать пустой проверка.
  7. Протестируйте проверку данных, чтобы убедиться, что они работают правильно. Попробуйте ввести в ячейку сначала допустимые, а потом недопустимые данные и убедитесь, что параметры проверки применяются, как вы хотите, а ваши сообщения появляются в нужный момент.
  • После создания раскрывающегося списка убедитесь, что он работает так, как нужно. Например, можно проверить, достаточно ли ширины ячеек для отображения всех ваших записей.
  • Удалить проверку данных . Выберите ячейку или ячейки, содержащие проверку, которую требуется удалить, перейдите в раздел Проверка данных > данные и в диалоговом окне проверки данных нажмите кнопку Очистить все, а затем нажмите кнопку ОК.

Использование других типов проверки данных

В таблице перечислены другие типы проверки данных и указано, как применить их к данным на листе.

Разрешить вводить только целые числа из определенного диапазона

  1. Выполните действия 1–2, указанные выше.
  2. В списке Разрешено выберите Целое число.
  3. В поле Данные выберите нужный тип ограничения. Например, чтобы задать верхний и нижний пределы, выберите между.
  4. Введите минимальное, максимальное или определенное разрешенное значение. Можно также ввести формулу, которая возвращает числовое значение. Например, допустим, что вы проверяете значения в ячейке F1. Чтобы установить минимальное ограничение на количество дочерних элементов в ячейке в два раза, выберите больше или равно в поле Данные и введите формулу =2*F1 в поле Минимум .

Разрешить вводить только десятичные числа из определенного диапазона

  1. Выполните действия 1–2, указанные выше.
  2. В поле Разрешить выберите Десятичный.
  3. В поле Данные выберите нужный тип ограничения. Например, чтобы задать верхний и нижний пределы, выберите между.
  4. Введите минимальное, максимальное или определенное разрешенное значение. Можно также ввести формулу, которая возвращает числовое значение. Например, чтобы установить максимальное ограничение для комиссий и бонусов в размере 6 % от заработной платы продавца в ячейке E1, выберите значение меньше или равно в поле Данные и введите формулу =E1*6% в поле Максимальное значение.

Примечание: Чтобы разрешить пользователю вводить процентные значения, например 20 %, выберите Десятичный в поле Разрешить , выберите тип ограничения, которое требуется в поле Данные , введите минимальное, максимальное или определенное значение в виде десятичного разряда, например .2 , а затем отобразите ячейку проверки данных в виде процента, выбрав ячейку и щелкнув процента в группе Число на вкладке Главная .

Разрешить вводить только даты в заданном интервале времени

  1. Выполните действия 1–2, указанные выше.
  2. В поле Разрешить выберите Дата .
  3. В поле Данные выберите нужный тип ограничения. Например, чтобы разрешить даты после определенного дня, выберите больше.
  4. Введите начальную, конечную или определенную разрешенную дату. Вы также можете ввести формулу, которая возвращает дату. Например, чтобы задать интервал времени между сегодняшней датой и 3 днями с сегодняшней даты, выберите между в поле Данные , введите =TODAY() в поле Дата начала и введите =TODAY()+3 в поле Дата окончания .

Разрешить вводить только время в заданном интервале

  1. Выполните действия 1–2, указанные выше.
  2. В поле Разрешить выберите Время.
  3. В поле Данные выберите нужный тип ограничения. Например, чтобы разрешить время до определенного времени суток, выберите меньше.
  4. Укажите время начала, окончания или определенное время, которое необходимо разрешить. Если вы хотите ввести точное время, используйте формат чч:мм. Например, предположим, что у вас есть ячейка E2, настроенная со временем начала (8:00) и ячейка F2 со временем окончания (17:00), и вы хотите ограничить время собрания между этим временем, затем выбрать между ними в поле Данные , введите =E2 в поле Время начала , а затем введите =F2 в поле Время окончания .

Разрешить вводить только текст определенной длины

  1. Выполните действия 1–2, указанные выше.
  2. В поле Разрешить выберите Длина текста.
  3. В поле Данные выберите нужный тип ограничения. Например, чтобы разрешить до определенного количества символов, выберите значение меньше или равно.
  4. В этом случае нам нужно ограничить ввод до 25 символов, поэтому выберите значение меньше или равно в поле Данные и введите значение 25 в поле Максимум .

Вычислять допустимое значение на основе содержимого другой ячейки

  1. Выполните действия 1–2, указанные выше.
  2. В поле Разрешить выберите нужный тип данных.
  3. В поле Данные выберите нужный тип ограничения.
  4. В поле или полях под полем Данные выберите ячейку, которую нужно использовать, чтобы указать, что разрешено. Например, чтобы разрешить записи для учетной записи, только если результат не превышает бюджет в ячейке E1, выберите Разрешить >целое число, Данные, меньше или равно, и Максимальное >= =E1.

Что такое проверка данных?

В 1998 году НАСА запустило Марсианский климатический орбитальный аппарат, построенный стоимостью 125 миллионов долларов для изучения марсианского климата. Через 10 месяцев деятельности космический зонд сгорел и развалился на части из-за небольшой ошибки в метрической системе. Навигационная группа Лаборатории реактивного движения (JPL) использовала для своих вычислений метрические измерения в миллиметрах и метрах, в то время как Lockheed Martin Astronautics в Денвере, организация, ответственная за разработку и строительство космического корабля, предоставила необходимые данные об ускорении, используя британскую систему дюймов. футы и фунты.

Этой ошибки можно было бы легко избежать, если бы данные были проверены перед их использованием. Этот пример показывает важность проверки данных и какие последствия она может иметь, особенно сегодня, когда весь мир в значительной степени полагается на данные.

Что такое проверка данных?

Проще говоря, проверка данных — это повторная проверка ваших данных на предмет точности, пропущенных значений, аномалий и расхождений во время Интеграция данных процесс, прежде чем его можно будет использовать для принятия решений. По сути, это похоже на тщательную проверку работоспособности ваших данных. Проверка данных гарантирует, что используемые вами данные заслуживают доверия и подходят для вашего анализа.

Основная цель проверки данных — убедиться в том, что они предназначены для использования по назначению. Например, вы проводите маркетинговую кампанию, ориентированную на подростков, и ваша маркетинговая кампания основана на результатах собранного вами опроса. Однако после того, как вы создали свою кампанию, вы понимаете, что собранные вами данные касались не подростков, а людей в возрасте от двадцати пяти лет. Итак, ваши данные были бы точными, но могли быть недействительными.

Почему нельзя игнорировать проверку данных

В 2018 году сотрудник Samsung Securities в Южной Корее допустил огромную ошибку, перепутав валюту (вону) с акциями компании. Вместо выплаты дивидендов в размере 1,000 вон на акцию сотрудник случайно предоставил 1,000 акций Samsung Securities сотрудникам. Эта ошибка привела к огромным финансовым потерям компании, составившим 300 миллионов долларов.
Любая организация подвержена подобным ошибкам, если у нее нет протоколов, позволяющих защитить себя. В случае с Samsung Securities внедрение процесса проверки, включающего автоматическую проверку данных, могло бы предотвратить ошибку.

Это лишь один пример той важной роли, которую проверка данных играет в деловом мире. Это не только играет решающую роль в экономии времени и затрат для организации, но также имеет решающее значение для обеспечения соответствия требованиям, особенно для здравоохранения и финансовой отрасли.

Это не просто вопрос осторожности; это императив для любой организации, которая ценит точность, эффективность и снижение рисков, будь то финансовые учреждения, поставщики медицинских услуг или технологические компании.

Преимущества проверки данных

Проверка данных проверяет собранные качество данных и точность перед их анализом и обработкой. Он проверяет, что вся ваша информация присутствует и правильна. Однако проверка данных — это трудоемкий процесс, который может серьезно задержать анализ. Итак, возникает вопрос: стоит ли затягивать проверку данных?

Давайте посмотрим на некоторые из наиболее важных преимуществ проверки данных.

Преимущества проверки данных

Повышает эффективность данных

Проверка данных гарантирует, что наборы данных являются точными и полными перед анализом, что приводит к получению безошибочных данных, которые необходимы для будущих исследований или Обучение модели машинного обучения, что в конечном итоге экономит время и ресурсы.

Но ценность проверки данных выходит за рамки простого повышения эффективности анализа данных. Предприятиям необходимы надежные данные для принятия обоснованных решений, которые приведут к росту и увеличению прибыли. Наличие точной информации означает, что компании могут принимать решения на основе точной информации и тенденций, что приводит к лучшим результатам.

Проверка данных не только экономит время и ресурсы, но даже помогает избежать ошибок, вызванных неверными данными. Выявляя неточности на ранней стадии, предприятия могут предотвратить ухудшение ошибок и внести важные изменения, пока не стало слишком поздно.

Раскрывает новые данные

Проверка данных помогает компаниям обнаруживать в своих данных скрытые закономерности и взаимосвязи, которые раньше могли остаться незамеченными. Это может дать им более полное понимание своей деятельности и факторов, определяющих их успех. Обладая этими знаниями, предприятия могут принимать более обоснованные решения для обеспечения роста и прибыльности.

Например, проверка данных может показать ранее не известную корреляцию между демографическими данными клиентов и покупательскими привычками. Эта информация может помочь компаниям лучше адаптировать свои продукты и услуги к потребностям целевого рынка, что приведет к повышению удовлетворенности и удержанию клиентов.

Получайте чистые высококачественные данные без написания кода

Выявляет неточности

Точные данные необходимы предприятиям для принятия обоснованных решений, но их может быть трудно получить без проверки данных. Проверка данных помогает выявлять и исправлять неточности в данных, благодаря чему бизнес-решения основываются на надежных доказательствах. Таким образом можно избежать дорогостоящих ошибок и предприятия смогут работать с большей эффективностью, меньшими рисками и повышенной прибыльностью.

Возьмем, к примеру, данные о продажах: проверка данных может обнаружить дубликаты или недостающие записи, что позволяет компаниям лучше понимать эффективность своих продаж и принимать решения, ведущие к росту.

Повышает удовлетворенность клиентов

Используя точные и надежные данные, предприятия могут предоставлять более качественные продукты и услуги, что в конечном итоге приводит к увеличению удовлетворенность клиентов . Когда предприятия принимают решения на основе точных и надежных данных, они могут лучше понять потребности и предпочтения своих клиентов и предоставлять продукты и услуги, которые их удовлетворяют. Это приводит к повышению лояльности клиентов и увеличению количества повторных заказов.

Типы проверки данных

Хранилище данных стандарты различаются в зависимости от компании. Базовые процедуры проверки данных могут помочь вашему бизнесу обеспечить организованность и эффективность данных. Перед сохранением данных в базе данных большинство методов проверки данных выполняют одну или несколько таких проверок. Вот распространенные типы проверки:

Проверка типа данных

Проверка типа данных проверяет, что данные, помещенные в поле, имеют соответствующий тип данных. Поле может содержать только числа. Система должна отклонять данные с буквами или специальными символами и выдавать сообщение об ошибке.

Проверка кода

Проверки кода гарантируют, что поля выбраны из допустимых списков или что стандарты форматирования соблюдены. Сравнение почтового индекса со списком действительных кодов упрощает проверку. Более того, НАИКС отраслевые коды и коды стран можно рассматривать аналогично.

Проверка диапазона

Проверки диапазона позволяют оценить, соответствуют ли входные данные диапазону. Например, в географических данных используются широта и долгота, а долгота должна быть -180, а широта — 90. За пределами этого диапазона значения недействительны.

Проверка формата

Форматируется несколько типов данных. Проверки формата проверяют формат данных. Поля даты записываются в формате «ГГГГ-ММ-ДД» или «ДД-ММ-ГГГГ». В результате любая другая форма будет отклонена. Номер национального страхования — LL 99 99 99 L, где L — любая буква, а 9 — любое число.

Проверка согласованности

Проверка согласованности гарантирует, что данные вводятся правильно. Одним из примеров является мониторинг даты доставки посылки после отправки.

Проверка уникальности

Такая информация, как идентификаторы и адреса электронной почты, гарантированно будет единственной в своем роде. Эти поля базы данных должны содержать уникальные записи. Проверки уникальности предотвращают дублирование в базах данных.

Проверка присутствия

Проверки присутствия не позволяют важным полям оставаться пустыми. Если поле пустое, появится уведомление об ошибке, и пользователь не сможет продолжить или сохранить введенные данные. Большинство баз данных запрещают пустые ключевые поля.

Проверка длины

Проверка длины гарантирует, что поле содержит правильное количество символов. Поэтому он проверяет длину строки символов. Рассмотрите возможность введения пароля длиной не менее восьми символов. Проверка длины проверяет, что поле содержит восемь символов.

Искать

Поиск уменьшает количество ошибок в полях с ограниченным значением. Таблица определяет допустимые значения. Список потенциальных ценностей ограничен, поскольку, например, в неделе всего семь дней.

Проблемы, влияющие на проверку данных

Чтобы обеспечить проверку данных, важно понимать основные принципы проверки данных. Вот некоторые факторы, которые вам необходимо проверить:

  1. Формат: важно обеспечить единообразие формата данных. Ошибки формата обычно случаются с датами. В некоторых местах используется формат дд/мм/гг, а в других — мм/дд/гг.
  2. Диапазон: Диапазоны данных должны находиться в разумных пределах. Например, важно проверить, находится ли температура в определенных пределах или возраст находится в пределах логического диапазона.
  3. завершенность: Допустим, вы провели опрос, и многие кандидаты не указали свои адреса электронной почты или эти адреса электронной почты и номера телефонов были неполными. Поэтому вам также необходимо проверить свои данные на полноту. Опрос, проведенный Конвертер, платформа привлечения клиентов, пришла к выводу, что 1 из 4 потенциальных клиентов, которые проходят обработку, классифицируются как недействительные, потому что 27 процентов имеют вымышленные имена, 28 процентов имеют неверный адрес электронной почты и 30 процентов имеют неправильные номера телефонов.
  4. Согласованность: ваши данные должны быть согласованными в разных частях набора данных или между разными наборами данных. Например, вам необходимо убедиться, что имена клиентов пишутся одинаково.
  5. Ссылочная целостность: Ссылочная целостность гарантирует сохранение связей между данными в разных таблицах или базах данных и отсутствие ссылок на отсутствующие или несуществующие данные.
  6. Уникальность: В наборе данных уникальность означает, что каждый фрагмент данных отличается от всех остальных и нет повторов или дубликатов одного и того же значения. Уникальность часто имеет решающее значение при использовании данных в качестве идентификаторов или ключей в базах данных, особенно при связывании различных фрагментов информации или обеспечении надежных связей между данными.
  7. Зависимость атрибута: неточность, вызванная тем, что значение поля зависит от другого поля. Например, точность данных о продуктах зависит от информации, связанной с поставщиками. Следовательно, ошибки в данных поставщика отразятся и на данных о продукте.
  8. Недействительные значения: Если в наборах данных есть известные значения, такие как «M» для мужчин и «F» для женщин, изменение этих значений может сделать данные недействительными.
  9. Отсутствующие значения: Наличие пустых или пустых значений в наборе данных.
  10. Размножение: Повторение данных — обычное явление в организациях, где данные собираются из нескольких каналов в несколько этапов.
  11. Орфографические ошибки: Неправильное написание

Неправильные записи в таблице

Факторы, приводящие к неверным данным (источник: QuantDare)

Методы проверки данных

Вы можете проверить данные одним из трех способов:

Сценарии

Проверка данных часто выполняется путем разработки сценариев на языке сценариев, например Python. Например, вы можете создать XML-файл с именами целевой и исходной базы данных, именами столбцов и таблицами для сравнения.

Сценарий Python может читать XML и оценивать результаты. Тем не менее, это может занять много времени, поскольку необходимо написать сценарии и проверить результаты вручную.

Корпоративные инструменты

Проверка данных возможна с помощью инструменты проверки корпоративных данных. Astera Centerprise, например, может проверять и исправлять данные. Инструменты интеграции данных являются более надежным и безопасным вариантом, поскольку они оснащены множеством функций.

Инструменты с открытым исходным кодом

Облачные инструменты с открытым исходным кодом доступны по цене и могут снизить затраты на инфраструктуру. Тем не менее, для оптимального использования они по-прежнему требуют опыта и ручного кодирования. Инструменты с открытым исходным кодом включают SourceForge и OpenRefine.

Общие проблемы проверки данных

Учитывая важность проверки данных, имеет смысл только то, что она должна быть неотъемлемой частью каждой организации, и так должно быть. Тогда почему ошибки все еще случаются, особенно в таких организациях, как НАСА и Samsung, которые не могут позволить себе игнорировать проверку данных.

Одна из причин, по которой ошибки все еще происходят, заключается в том, что проверка данных не так проста, как кажется, особенно в современном контексте, когда объем и разнообразие данных значительно возросли. Вот некоторые из распространенных проблем, которые можно ожидать при реализации проверки данных:

  1. Несколько источников: Одной из самых больших проблем обеспечения достоверности данных является множество источников. Сегодня данные поступают из социальных сетей, POS-систем, датчиков, веб-сайтов, и точное объединение этих данных требует надежного подхода. управление качеством данных.
  2. Изменение данных: Данные могут со временем меняться из-за обновлений, удалений или модификаций. Внедрение контроля версий и журналов аудита помогает отслеживать изменения, сохраняя при этом проверку данных.
  3. Неструктурированные данные: Сегодня 80% данных неструктурированы, то есть представлены в виде текста или изображений. Он предполагает использование передовых методов, таких как обработка естественного языка или распознавание изображений, для извлечения значимой информации для проверки.
  4. Конфиденциальность и безопасность данных: Проверка данных важна, но не менее важна и конфиденциальность данных. Допустим, вы работаете с идентификационными номерами или номерами кредитных карт, и вам необходимо их проверить. При работе с такими наборами данных сохранение конфиденциальности может быть немного сложной задачей.
  5. Устаревшие системы: Многие компании до сих пор используют устаревшие системы, расположенные в локальных базах данных. Интеграция проверки в старые системы может быть сложной из-за проблем совместимости.
  6. Межсистемная проверка: Данные, перемещающиеся между различными системами, требуют проверки на каждом этапе, чтобы обеспечить последовательный и точный поток информации.

Важность автоматизации при проверке данных

Современные проблемы требуют современных решений, и, следовательно, единственный способ смягчить эти проблемы, связанные с проверкой данных, — это использовать инструмент проверки данных. Инструмент проверки данных предназначен для того, чтобы процессы проверки могли обрабатывать растущие объемы данных без ущерба для точности и эффективности. Автоматизация является краеугольным камнем этих инструментов. Это оптимизирует повторяющиеся задачи, снижает риск человеческой ошибки и ускоряет процесс проверки.

Инструмент управления данными, такой как Astera, поддерживает проверку данных через встроенный профилирование данных, , и очищать преобразования. Вы можете использовать готовые соединители инструмента в графическом пользовательском интерфейсе для интеграции, преобразования и проверки данных из нескольких источников.

Проверка данных в действии

Давайте рассмотрим простой сценарий, когда компания ABC объединяет данные о своих клиентах в файл Excel, чтобы оптимизировать свои маркетинговые усилия и каналы доходов. Однако в собранных ими данных было несколько ошибок. Поэтому они решают проверить свои данные с помощью Astera Centerprise.

На рис. 2 показан поток данных, который требует Excel источник в качестве входных данных, профилирует его для анализа исходных данных, очищает его для удаления недопустимых записей и применяет правила качества данных для выявления ошибок в очищенных данных перед их записью в место назначения разделенный .

Простой инструмент проверки данных

Рис.2: Простой поток данных для объяснения проверки данных из источника Excel

Результат Профиль данных преобразование показывает детали данных на уровне поля. Это позволяет организации понять данные и обеспечить:

  • Достоверность данных: После анализа данных аномалии и дублирование могут быть устранены для обеспечения надежности данных. Это также помогает организации выявлять проблемы с качеством и определять информацию, необходимую для принятия мер, для оптимизации бизнес-процессов.
  • Более быстрое принятие решений: Он создает точную картину исходных данных, позволяя организации быстрее принимать решения.
  • Практическое антикризисное управление: Профилированные данные могут предотвратить превращение мелких ошибок в критические проблемы.

Профилирование данных

Рис. 3: Профилирование исходных данных

Цена на Очистка данных преобразование используется для исправления двух проблем с исходными данными:

  1. Он удаляет конечные и ведущие пробелы из записей.
  2. Он определяет записи, содержащие «.co», и заменяет его на «.com». Это исправляет ошибочные записи в Адрес электронной почты.

очистка при проверке данных

Рис.4: Применение условий для очистки данных

Очищенные данные после удаления лишних пробелов и неправильного формата адреса электронной почты можно увидеть в правой половине рис.5.

Используя эти чистые данные, организация может:

  • Улучшение маркетинговых усилий по электронной почте: Создавая чистую и безошибочную версию данных о клиентах, организация гарантирует, что эти данные могут быть использованы для получения максимальной отдачи от электронного маркетинга.
  • Увеличить доход: Использование правильных адресов электронной почты гарантирует более высокий процент ответов, что, в свою очередь, приводит к увеличению конверсий и шансов продаж.

Рис. 5: Сравнение ошибочных исходных данных с очищенными данными

Рис. 5: Сравнение ошибочных исходных данных с очищенными данными

Далее, Правила качества данных применяются к очищенным данным для идентификации записей в Эл. адрес Адрес поле недопустимого формата.

отметка записей

Рис.6: Пометка неправильных записей в поле адреса электронной почты

Результат можно увидеть на следующем скриншоте. Применение Правила качества данных позволяет организации:

  • Получите согласованные данные: Исправляя адреса электронной почты, организация гарантирует, что все отделы имеют доступ к согласованной и правильной информации.
  • Облегчить масштабируемость: Имея надежную инфраструктуру качества, организация может легко масштабироваться, не беспокоясь о надежности и надежности своих данных.

Ошибки, выявленные Правила качества данных записываются в файл журнала, а очищенные данные записываются в разграниченный .

Упростите проверку данных с помощью Astera Centerprise

Автоматизация проверки данных может значительно сэкономить время и оптимизировать бизнес-процессы в современном корпоративном мире, где важные решения принимаются на основе данных. Среда без кода Astera Centerprise позволяет автоматизировать проверку данных как часть потока данных или рабочего процесса. Кроме того, обновления данных могут быть условными, в зависимости от успеха проверочных тестов, чтобы гарантировать надежность данных вашего предприятия.

Чтобы узнать, как упростить и автоматизировать задачи проверки данных с помощью комплексного решения без кода, загрузите Пробная версия of Astera Centerprise.

Другие статьи по теме

  • 7 лучших программ для репликации данных в 2023 году
  • Что такое звездная схема? Преимущества и недостатки
  • Что такое озеро данных? Определение и преимущества
  • Что такое сбор счетов-фактур и как его автоматизировать?

Проверка ввода данных в Excel и ее особенности

Иногда возникает необходимость перестраховаться от ошибок перед вводом в ячейки данных несоответствующим определенным условиям. Например, в номенклатуре магазина товаров и цен недолжно быть возможности ввода отрицательных чисел и нулей. Ведь магазин не раздает товар с доплатой или за бесплатно.

Проверка вводимых данных в Excel

Для того, чтобы предотвратить ошибки оператора компьютерного набору в Excel, будем использовать проверку данных ввода. Тем самым создадим ему комфортные условия для рутинной работы, где сложно не допустить ошибки.

У нас имеется лист номенклатуры товаров магазина:

Номенклатура.

  1. Выделите столбец B и выберите инструмент «Данные»-«Проверка данных». Параметры.
  2. Заполняем значениями поля на вкладке «Параметры» как показано на рисунке: Сообщение.
  3. На вкладке «Сообщение для ввода» создаем особое примечание, в котором при помещения курсора на ячейку будет отображаться условия для ее заполнения. И жмем ОК.

Пример.

Теперь проверим. В ячейку B2 введите натуральное число, а в ячейку B3 отрицательное. Как видно в ячейке B3 действие оператора набора – заблокировано. Отображается сообщение об ошибке: «Введенное значение неверно».

Примечание. При желании можно написать собственный текст для ошибки на третей закладке настроек инструмента «Сообщение об ошибке».

Чтобы удалить проверку данных в Excel нужно: выделить соответствующий диапазон ячеек, выбрать инструмент и нажать на кнопку «Очистить все» (указано на втором рисунке).

Особенности проверки данных

Данным способом проверяются данные только в процессе ввода. Если данные уже введенные они будут не проверенные. Например, в столбце B нельзя ввести текст после установки условий заполнения в нем ячеек. Но заголовок в ячейке B1 «Цена» остался без предупреждения об ошибке.

Внимание! Если ячейки будут скопированы, а не введены то их значения так же не будут проверены.

Чтобы проверить соответствуют ли все введенные данные, определенным условиям в столбце и нет ли там ошибок, следует использовать другой инструмент: «Данные»-«Проверка данных»-«Обвести неверные данные».

Обводка.

Если значения в столбце B должны соответствовать определенным условиям, но содержит ошибки, то все они будут обведены красным овалом. Этот инструмент очень удобно использовать, когда нужно проверить уже введенные или скопированные данные.

Конечно, можно выполнить проверку данных в столбце с помощью логической функции Excel – «ЕСЛИ». Или условное форматирование. Но применение инструмента «Проверка данных» – более эффективно, удобно и продуктивно для данной задачи. Особенно если нам нужно одновременно выполнить проверку по нескольким столбцам. В таком случаи более заметна рациональность его использования.

  • Excel Formula Examples
  • Создать таблицу
  • Форматирование
  • Функции Excel
  • Формулы и диапазоны
  • Фильтр и сортировка
  • Диаграммы и графики
  • Сводные таблицы
  • Печать документов
  • Базы данных и XML
  • Возможности Excel
  • Настройки параметры
  • Уроки Excel
  • Макросы VBA
  • Скачать примеры

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *