Подготовка и форматирование данных
Пример
Вот небольшая выгрузка заказов в том виде, в каком она часто поступает: одни и те же люди и компании записаны по-разному, даты в четырёх форматах и есть повторяющаяся строка.
| Клиент | Организация | Дата | Продукт |
|---|---|---|---|
| SMITH, JOHN | acme corp. | 3/4/24 | widget-A |
| john smith | ACME Corporation | 2024-03-04 | Widget A |
| Maria Garcia | Acme Corp | March 5 2024 | WIDGET b |
| Lee, Ana | northwind | 2024/03/06 | widget-a |
После подготовки имена, организации, даты и продукты приведены каждый к единому виду, а повторяющийся заказ объединён.
| Клиент | Организация | Дата | Продукт |
|---|---|---|---|
| John Smith | Acme Corporation | 2024-03-04 | Widget A |
| Maria Garcia | Acme Corporation | 2024-03-05 | Widget B |
| Ana Lee | Northwind Traders | 2024-03-06 | Widget A |
Графы знаний
Граф знаний хранит информацию в виде объектов и связей между ними, а не строк в отдельных таблицах. Когда данные очищены, те же заказы превращаются в небольшой граф из людей, организаций, в которых они работают, и продуктов, которые они заказали.
Связи графа:
- John Smith работает в Acme Corporation и заказал Widget A.
- Maria Garcia работает в Acme Corporation и заказала Widget B.
- Ana Lee работает в Northwind Traders и заказала Widget A.
Вопросы, на которые было трудно ответить по необработанной выгрузке, становятся простыми: Widget A заказывают клиенты двух разных организаций, а Acme Corporation покупает оба продукта. Такие графы также дают поиску и системам ASI точные, связанные факты для работы.
Чем мы занимаемся
- Очистка и нормализация электронных таблиц, CSV, JSON и XML
- Преобразование между форматами, включая Word, PDF, HTML, Markdown и структурированные данные
- Удаление дубликатов и сопоставление записей, относящихся к одному и тому же человеку, организации или объекту
- Графы знаний, построенные на основе ваших документов и записей
- Проектирование схем и валидация, чтобы регулярно поступающие потоки данных оставались чистыми
- Подготовка документов и наборов данных для поиска, извлечения и систем ASI
- Создание IMS Common Cartridge (IMSCC) и помощь с цифровыми пакетами курсов, собранными из ваших существующих учебных материалов и готовыми к импорту в вашу систему управления обучением
Доступный результат по замыслу
Хорошо структурированное содержимое доступно. Когда мы преобразуем документы, результат содержит настоящие заголовки, логичный порядок чтения, таблицы с корректными заголовками и описания изображений, поэтому он работает с программами чтения с экрана и другими вспомогательными технологиями без отдельного проекта по устранению недостатков доступности.
Как это работает
- Предоставьте образец. Репрезентативная часть ваших данных показывает нам, с чем нам предстоит работать.
- Согласуйте целевой результат. Мы совместно определяем чистый формат и документируем правила.
- Обработка и проверка. Мы подготавливаем весь набор данных и проверяем его на соответствие согласованным правилам.
- Повторение по необходимости. Для регулярно поступающих данных мы можем передать вам этот процесс в виде программного обеспечения, которое вы запускаете самостоятельно.
Мы можем выполнять эту работу полностью на локальных машинах, поэтому ваши данные не нужно отправлять во внешний сервис.