Автоматические индексы
Специальные программы-роботы (Spider, Robot или Bot, известные также как «пауки») в автоматическом режиме периодически обследуют Интернет на основе определенных алгоритмов, проводя индексацию найденных документов.
Индекс – это хранилище данных, в котором сосредоточены копии всех посещённых роботами страниц. Созданные индексные базы данных используются поисковыми машинами для предоставления пользователю доступа к размещенной на узлах Сети информации. Индексы периодически обновляются и дополняются, поэтому результаты работы одной поисковой машины с одним и тем же запросом могут различаться, если поиск производился в разное время.
Пользователь в рамках интерфейса, выбранной поисковой системы, формулирует запрос. Далее запрос обрабатывается программой обработки запроса, которая просматривает индекс на предмет наличия нужной информации и возвращает ссылки на найденные документы. В окне браузера отображаются результаты обработки запроса.
В Интернете существует большое число поисковых систем. Как правило, при поиске можно использовать не одну систему, а несколько различных. В этом случае вероятность того, что искомая информация будет найдена, выше, поскольку разные системы используют разные алгоритмы поиска. Ниже приведен список некоторых из них:
Что такое индекс? | Объяснение индексов для новичков
http://www.yandex.ru, http://www.list.ru, http://www.google.ru, http://www.rambler.ru, http://www.aport.ru, http://www.metabot.ru, http://www.files.ru, http://www.ra-gu.net.
Успех поиска в таких системах в значительной степени зависит от формулировки запроса. Рассмотрим основные моменты, которые помогут вам правильно сформулировать запрос к поисковой машине:
· Не задавайте только одно слово. Используйте целые фразы, или, по крайней мере, несколько слов;
· Указывайте слова, которые не должны встречаться в искомых документах. Обычно для этого используют либо знак «-», либо ключевое слово NOT;
· Начинайте имена собственные: названия компаний, городов, фамилии людей, и др. с заглавных букв, а все остальные слова пишите только маленькими буквами;
· Если вы хотите найти фразу Цельком — заключите ее в кавычки;
· Если вы вводите запрос к поисковой машине, состоящий из нескольких слов, то в результате получаете список документов, в которых встречается хотя бы одно слово.
Поисковая машина обычно производит сортировку найденных документов по принципу релевантности.
Рассмотрим, что такое релевантность. При индексации документов поисковые машины высчитывают так называемый «вес» слова на странице — соотношение количества повторов на странице заданного Вами слова к общему количеству слов на странице документа. Если Вы задаете запрос, состоящий из нескольких слов, то более релевантными будут документы, в которых совокупный вес слов будет максимальный. Однако, при подсчете веса не учитывается, рядом или раздельно стоят данные слова, и поэтому нет гарантий, что в первых документах содержится максимальное количество повторений словосочетания. Вполне возможно, что такого словосочетания там вообще не будет.
Поэтому, если Вы хотите найти заданное словосочетание — задавайте запрос в окне поисковой машины в кавычках. В этом случае будет высчитываться вес словосочетания Цельком. Соответственно, гарантируется наличие именно данного словосочетания в найденных документах.
В заключение рассмотрим основные этапы поиска информации в сети Интернет.
| № | Этап | Содержание работ этапа |
| 1. | Определение предмета поиска | На этом этапе определяем, что конкретно нас интересует. |
| 2. | Составление списка ключевых слов | На этом этапе выявляем, как может называться то, что нас интересует. |
| 3. | Выбор информационного пространства | На этом этапе определяем, где может находиться то, что нас интересует. |
| 4. | Определение инструмента для поиска | На этом этапе принимаем решение о том, как проще и быстрее найти то, что нас интересует. |
| 5. | Предварительный поиск | Пробуем найти. |
| 6. | Анализ полученной информации | Смотрим на полученные результаты. Если это необходимо (в том случае, когда полученные результаты нас не устраивают), проводим корректировку всех предыдущих действий. |
| 7. | Дополнительный поиск | Ищем дальше, пока не получаем ответ на свой вопрос. |
Общие советы
· Потратьте несколько лишних минут, чтобы максимально «сузить» описание предмета поиска — это поможет сэкономить Вам много времени и денег;
· Искать что-то конкретное лучше всего с помощью поисковых машин, так как если вы знаете «хорошие» ключевые слова, четко определяющие то, что вы хотите найти, то и поиск не представляет никакого труда;
· Используйте для поиска нескольких поисковых машин;
· Если на просматриваемой Вами странице существует несколько заинтересовавших Вас ссылок — открывайте несколько окон, пока Вы читаете информацию на одной странице, остальные успешно (или не очень) успевают загрузиться;
· Если вы хотите найти популярные, часто посещаемые ресурсы — ищите с помощью рейтинга;
· Если нужна очень редкая информация — попробуйте найти ресурсы, посвященные более общей теме. Возможно, там будут размещены ссылки на необходимые Вам ресурсы или будут опубликованы требующиеся материалы;
· Старайтесь найти ответ, а не задать вопрос;
· Создавайте свою коллекцию интересующих Вас ссылок;
· Если Вы нашли что-то интересное, сразу запишите адрес ресурса в «Избранное» либо в текстовый файл;
· Записывая адреса ресурсов в «Избранное», старайтесь дать им более четкое название, максимально соответствующее содержащейся в них информации, постарайтесь не использовать слишком длинные названия;
· Разработайте свой собственный классификатор и для каждой темы создавайте отдельную папку в «Избранном». Поверьте, поиск в своих собственных не разобранных архивах занимает не меньше времени, чем поиск в Internet.
Задание № 1.
2. в меню Избранное выберите пункт Добавить в избранное…
3. задайте имя ссылки в появившемся окне или оставьте то, которое предлагается по умолчанию.
4. проверьте сохранённую ссылку. Откройте новое окно браузера. В меню Избранное найдите созданную ссылку и щелкните по ней, чтобы перейти на указанную страницу.
Рисунок 2. Переход на избранную страницу.
Задание № 3.
!Найдите дополнительную информацию, полезную в работе над проектом. Для поиска воспользуйтесь предметными каталогами или поисковыми системами.
1. Запустите браузер и загрузите в нем сайт одной из поисковых систем, например, http://www.yandex.ru.
2. В строке запроса введите ключевые слова для поиска и нажмите кнопку Найти.
4. Сохраните страницы в списке избранных.
На основе поисковых двигателей нового поколения можно строить свои собственные индивидуальные или коллективные поисковые машины. Поиск можно адаптировать к определенной тематике и к определенному сообществу. Пример организации социального поиска — персональная или групповая поисковая машина от Google находится по адресу http://www.google.com/coop/cse/
Создание собственного поисковика в Google CSE начинается с определения списка сайтов, которые пользователь считает объективными и актуальными источниками информации в различных сферах деятельности. К работе по изменению созданной поисковой системы можно подключить других пользователей, которые могут стать соавторами и настраивать ее свойства коллективно. Домашняя страница созданной поисковой машины, помимо строки поиска, будет включать профиль создателя и список заданных сайтов.
Источник: studopedia.ru
Экспресс-оценка рисков
Пользователям СПАРКа доступны готовые сервисы оценки финансовых рисков, связанных с компанией-контрагентом. Эти сервисы оказывают существенную помощь в экспресс-анализе контрагента и проявлении должной осмотрительности при выборе новых партнеров.
Оценка уровня надежности контрагента в СПАРКе возможна с помощью скоринговых показателей, рассчитывающихся индивидуально для каждой компании на основе имеющихся данных. На карточке компании и ИП отображаются уже готовые индексы, с помощью которых легко выявить потенциальные риски и сократить время на принятие решения:
- Сводный индикатор риска — совокупная оценка надежности компании, рассчитываемая на основании публично доступной информации о деятельности юридического лица;
- Индекс должной осмотрительности (ИДО) – скоринг, показывающий вероятность того, что компания является «фирмой-однодневкой»;
- Индекс финансового риска (ИФР) – оценка вероятности неплатежеспособности компании;
- Индекс платежной дисциплины (ИПД) – показатель, учитывающий своевременность оплаты компанией счетов.
Сводный индикатор риска
Сводный индикатор риска является совокупной оценкой аналитических показателей, включая Индекс Должной Осмотрительности, Индекс Финансового Риска и Индекс Платежной Дисциплины (см. ниже), а также Статуса компании (состояние ликвидации, банкротства и т.д.).
Представляет собой 3 значения риска: низкий, средний и высокий.
Индекс должной осмотрительности
Индекс Должной Осмотрительности представляет собой значение от 1 до 99, где более высокое значение отражает большую вероятность того, что компания создана не для уставных целей, а в качестве «транзакционной единицы», не имеющей существенных собственных активов и операций, или является «брошенным» активом.
На карточке компании в СПАРКе индикатор отображается в виде светофора: зеленый – низкая опасность, по мере нарастания красного цвета опасность усиливается.
Индекс должной осмотрительности – уникальная скоринговая модель, учитывающая около 20 различных факторов. Индекс рассчитывается практически для всех 3,5 млн действующих в России коммерческих структур.
При разработке модели анализировался международный опыт, детально изучались факторы, свидетельствующие о неблагонадежности компаний, проверялись различные математические методы, на основании которых могут учитываться эти факторы.
Партнером «Интерфакса» при разработке Индекса должной осмотрительности стал Институт управления стоимостью — один из ведущих российских аналитических центров в области современных экономико-математических моделей.
Аналитическая модель индекса постоянно дорабатывается, благодаря чему точность оценки, которую он дает, постоянно растет. Это дает возможность повышать уровень прозрачности российского бизнеса, с большей точностью выявлять компании, работа с которыми может оказаться рискованной.
Сегодня около трети доначислений, которые делают налоговые органы, связаны с претензиями, что та или иная компания не проявила должной осмотрительности при выборе контрагента, и он в итоге оказался «однодневкой». Таким образом, «фирмы-однодневки» и транзакционные компании представляют угрозу для законопослушных предпринимателей не только с точки зрения прямой угрозы мошеннических действий, но и с точки зрения налоговых последствий.
Индекс финансового риска
Индекс Финансового Риска (ИФР) представляет собой значение от 1 до 99, где более высокое значение указывает на наличие признаков неудовлетворительного финансового состояния, которые могут привести к тому, что компания утратит платежеспособность.
Для расчета индекса используются комбинированные финансовые коэффициенты компании, такие как коэффициенты ликвидности, достаточности оборотных средств, автономии и другие. Модель построена с использованием нейросетевого моделирования.
ИФР не является кредитным рейтингом по смыслу Федерального закона N 222-ФЗ от 13.07.2015, Council Regulation (EU) 2022/428, Council Regulation (EU) No 833/2014, Council Regulation (EC) No 1060/2009, поскольку рассчитывается согласно математической модели на основе только открытых статистических данных и без участия человека, оценивает платежеспособность, а не кредитоспособность, не проходит процедуры подтверждения, присвоения и пересмотра.
Индекс платежной дисциплины
Индекс Платежной Дисциплины (Paydex) представляет собой значение от 0 до 100, где более низкое значение указывает на высокий риск просрочки платежей.
Индекс рассчитывается автоматически на основании данных по платежам компании, полученным от участников программы «Мониторинг платежей».
Зачем нужен индекс:
- Изменение значения индекса может сигнализировать об изменении финансового положения или платежной политики компании;
- Индекс позволяет сравнивать платежную дисциплину разных компаний и делать выводы, у кого она лучше.
Источником информации являются данные о своевременности погашения дебиторской задолженности покупателей, полученные от поставщиков товаров/услуг – участников проекта «Мониторинг платежей». Данные передаются ежемесячно, индекс обновляется автоматически по факту загрузки новой информации.
Как формируется индекс:
- Индекс рассчитывается только на основании имеющихся данных от Участников. При получении новых данных индекс автоматически пересчитывается;
- Индекс рассчитывается только при наличии в данном месяце информации как минимум от 2-х компаний-участников проекта «Мониторинг платежей»;
- Обязательно раскрывается, какой объем информации использовался для расчета индекса: количество участников, предоставивших данные; количество проанализированных выставленных на оплату счетов / счетов-фактур; общая сумма этих выставленных на оплату счетов / счетов-фактур.
- Значение индекса может составлять от 0 до 100, где 0 — максимальная задержка платежа (120 дней и более), а 100 — досрочное погашение счетов (за 30 дней). Таким образом, чем значение показателя выше, тем лучше уровень платежной дисциплины компании.
Факторы риска
При проверке благонадежности контрагента, СПАРК не только дает агрегированную оценку компании в Индексах, но и показывает конкретные факторы риска, на которые необходимо обратить внимание, например:
- компания зарегистрирована недавно;
- имеет минимально разрешенный размер УК;
- у компании имеются неоплаченные долги (исполнительные производства);
- адрес регистрации, руководитель, телефон — массовые;
- компания входит в «негативные» списки;
- частая смена руководителя;
- последняя бухгалтерская отчетность совпадает с предыдущим периодом;
- рост исковой нагрузки по отношению к компании со стороны ее контрагентов.
Всего отслеживается более 40 факторов риска, которые могут свидетельствовать о фактах мошенничества, и на которые стоит обратить внимание при проверке.
Для отдельных факторов используются специальные математические модели с применением временных рядов. Такой подход позволяет выявлять отклонения и всплески показателей, например, это резкий рост исковой нагрузки по отношению к компании со стороны ее контрагентов. Такой фактор сигнализирует о серьезных проблемах у юридического лица и о риске невыполнения обязательств по заключенным договорам и контрактам.
Источник: spark-interfax.ru
Индекс производительности Windows
Что это такое – индекс производительности Windows, что он показывает и как может быть полезен обычным пользователям? Давайте разбираться…
Чтобы узнать индекс производительности Windows для вашего компьютера нужно зайти в Свойства системы через Панель управления.
Индекс производительности появился в Windows 7 и по задумке компании Майкрософт, должен был помогать пользователям выбирать программное обеспечение. Предполагалось, что разработчики программного обеспечения будут указывать индекс производительности на своих продуктах и пользователь без труда сможет определить будет ли работать программа на его компьютере или нет.
Задумка неплохая, вот только не знаю никого из обычных пользователей, кто бы при установке программ на свой компьютер задавался вопросом — какой же индекс производительности нужен для работы этой программы? Да и разработчики программ далеко не всегда этот индекс указывают.
Зато очень многих пользователей мучает вопрос — как этот индекс производительности поднять?
Бытует мнение, что именно из-за низкого индекса компьютер тормозит и работает нестабильно, но так ли это на самом деле? Должен сказать, что не совсем. Давайте разберемся с тем, как этот индекс вычисляется и что он означает.
Не существует какой-то сложной формулы расчета индекса производительности. Все достаточно просто – операционная система тестирует основные устройства компьютера и оценивает их производительность баллами по шкале от 1 до 7,9 (в Windows 7) или от 1 до 9,9 (в Windows 8).
Далее берется устройство с самым низким баллом и это значение выводится в качестве индекса производительности Windows. То есть не вычисляется среднеарифметическое значение и не используются какие-то более сложные формулы, а просто берется готовое значение самого непроизводительного компонента.
В тестировании принимают участие следующие компоненты:
- Процессор — замеряется количество вычислительных операций в секунду;
- Оперативная память — замеряется количество операций доступа к памяти в секунду;
- Видеокарта – производительность простой (2D) и 3D-графики для игр и приложений;
- Жесткий диск — замеряется скорость записи/чтения на/с устройства.
Очень часто, самым непроизводительным компонентом оказывается жесткий диск и именно по нему и назначается индекс производительности для всего компьютера, что, с моей точки зрения, не совсем справедливо.
Как вы понимаете, пользы от такой оценки немного, но все же она есть.
Во-первых, с помощью тестирования можно выявить «слабые места» компьютера.
Под «слабыми местами» я понимаю вовсе не устройство, вызывающее проблемы, например, внезапную перезагрузку компьютера или его подвисание во время работы. Здесь речь идет лишь о том, что Windows «хотела» бы видеть на месте этого устройство какое-то другое, которое было бы помощнее и работало бы побыстрее. Только и всего…
Если ваш компьютер во время работы притормаживает или зависает, то искать решение проблем в индексе производительности Windows не стоит. Эти проблемы обычно вызваны вовсе не недостаточной производительностью компьютера, а банальной загаженностью операционной системы. Тут в саму пору почистить компьютер от ненужных программ, проверить объем свободного пространства на системном диске, вычистить временные файлы, кэши браузеров, реестр, провести дефрагментацию дисков и так далее. Более подробно о мерах, которые стоит предпринять в этом случае, я рассказал в заметке «Что делать, если тормозит компьютер?».
Еще одна польза, которую можно выжать из индекса производительности Windows – это в общих чертах прикинуть для каких целей данный компьютер может послужить.
Опять же хочу оговориться – эта оценка очень приблизительна и тут нужно опираться не столько на общий индекс производительности, сколько на индекс производительности отдельных устройств.
Четких правил тут нет, но на основании информации с официального сайта Майкрософт могу сказать, что для серьезной графики, которая используется в современных играх, желательно чтобы индекс производительности был не ниже 5 (именно для графики), а для офисного компьютера, который используется для набора текста, работы с электронными таблицами и серфинга в интернете, достаточно, чтобы общий индекс был 2,0, хотя в этом случае, скорее всего, будут недоступны некоторые графические элементы вроде стиля Aero в Windows 7. Сказать что-то более конкретное тут очень сложно, так как сам этот индекс – вещь супер-неконкретная и здесь многое зависит от конфигурации и настройки вашего компьютера.
Индекс производительности Windows, судя по всему, не оправдал ожидания разработчиков и в последнем обновлении Windows 8.1 его вообще убрали с глаз пользователей, что с моей точки зрения, очень правильно, так как он только путал и вводил в заблуждение неопытных пользователей.
Но все же я надеюсь, что мне хоть и немного, но удалось прояснить ситуацию с индексом производительности Windows и теперь вы знаете что это такое и для чего он был создан.
При желании вы сможете найти дополнительную информацию на официальном сайте Майкрософт.
Источник: pcsecrets.ru
Узнаём индекс производительности Windows
Индекс производительности – это один из главных показателей, позволяющий оценить мощность работы компьютера и операционной системы, а также их способность справляться с определённым типом задач. В статье рассмотрим, как узнать этот индекс в операционных системах Windows 7 и 10.
Что такое индекс производительности
Это специальная служба, интегрированная в операционную систему. Она позволяет оценить аппаратные возможности компьютера, а также посмотреть, насколько хорошо и стабильно работает операционная система. Чем индекс выше, тем лучше. С помощью него вы можете более лучше определиться, какие программы ваш компьютер потянет без проблем, а какие нет.
Однако, вопреки надеждам сотрудников компании Microsoft данный тест не стал универсальным определителем возможностей операционной системы. Многие разработчики до сих предпочитают указывать в системных требованиях характеристики компьютера, практически всегда упуская из внимания индекс производительности системы. Исходя из этого в Майкрософт решили, что более поздние версии Windows (после «семёрки») этим индексом оснащены не будут.
Расчёт индекса производительности
Для начала нужно выяснить, как происходит подсчёт этого самого индекса. Он вычисляется при помощи тестирования отдельных компонентов компьютера. Каждому из них присваивается собственный индекс в виде баллов. Минимальный балл – 1, а максимальный 7,9. Однако общая оценка производительности системы вычисляется не путём поиска среднеарифметического значения, а по слабому звену.
Например, если пункт «Графика для игр» оценивается системой индексом в 3,3, а пункт «Процессор» в 6,3, то вы получите общую оценку в 3,3 балла.
Рассмотрим подробнее, что значат эти баллы:
- Если вы получили оценку индекса производительности в 1-2 балла, то это повод задуматься над оптимизацией системы. Возможно, ваш компьютер более-менее в состоянии поддерживать работу с обычными документами и сёрфинг в интернете, но на большее его точно не хватит;
- Компьютеры, получившие оценку в 3-4 балла способны без особых затруднений справляться с базовыми задачами, типа сёрфинга и работы с документами. Также без проблем будет поддерживаться прозрачная тема Aero, воспроизводится видео высокой чёткости, запускаться несложные игры и т.д;
- Компьютеры, получившие оценку в районе 4-5 баллов могут без проблем поддерживать практически все возможности Windows 7, 10. Например, здесь вы можете запускать более сложные игры, работать с несколькими мониторами с поддержкой полупрозрачной темы, выполнять более сложные задачи с графикой и видео;
- ПК, получившие оценку в 6 и более баллов могут с уверенностью запускать любые программы, подходящие по системным требованиям к железу. Здесь нет проблем при взаимодействии с тяжёлыми современными играми, работе с графикой и видео. У любого хорошего компьютера индекс производительности должен быть в районе от 6 баллов.
Также рассмотрим, какие показатели оцениваются при составлении данного индекса:
- Обычная графика, то есть работа с двумерной графикой;
- Игровая графика, продуктивность трёхмерной графики, влияет не только на производительность в играх, но и в программах по работе с 3D-объектами;
- Мощность процессора – показывает качество и количество выполняемых операций за единицу времени;
- Оперативная память – эффективность работы оперативной памяти, а также количество операций за единицу времени;
- Винчестер – скорость работы накопителей и обмена данных между ними.
Узнаём индекс производительности в Windows 7
В «семёрке» индекс производительности можно без проблем узнать, используя для этого графический интерфейс. В системе присутствуют встроенные инструменты, позволяющие выполнить его оценку и показать результаты в удобном виде. Инструкция по их использованию выглядит следующим образом:
-
Нажмите на иконку «Пуска». Откройте там «Панель управления», воспользовавшись соответствующим разделом.
Вы можете выполнить аналогичную процедуру через «Командную строку». В этом случае можно будет получить более полную оценку производительности компьютера. Инструкция выглядит следующим образом:
-
Для начала нужно запустить «Командную строку». Нажмите на «Пуск», а далее «Все программы».
Также здесь будут дополнительные критерии, на которые тоже рекомендуется обратить внимание:
- CPUSubAggScore – дополнительный параметр процессора;
- VideoEncodeScore – обработка кодированного видео;
- Dx9SubScore – параметр Dx9;
- Dx10SubScore – параметр Dx10.
На этом процесс оценки индекса производительности в Windows 7 можно считать законченным.
Оценка индекса производительности в Windows 8, 10
К сожалению, в этих версиях Windows провести оценку индекса производительности можно только из интерфейса «Командной строки». Всё дело в том, что в Microsoft считают, что данный вариант оценки производительности компьютера не совсем корректен, следовательно, его убрали из новых ОС, но не полностью.
Однако в новых версиях операционной системы рекомендуется использовать вместо привычной «Командной строки» интерфейс PowerShell. Отличий от стандартной «Консоли» он не имеет практически никаких. Инструкция по реализации этого способа выглядит следующим образом:
-
Запустите PowerShell любым удобным способом. Например, в Windows 10 вы можете нажать правой кнопкой мышки по иконке «Пуска» и выберите из контекстного меню вариант «PowerShell (от имени администратора)».
Как видите, вы можете без проблем узнать индекс производительности системы в Windows 7. Однако в более поздних версиях ОС с этим могут возникнуть трудности, поэтому придётся пользоваться только способом, связанным с «Командной строкой» или PowerShell’ом.
Источник: public-pc.com
Самые распространенные заблуждения об индексах в мире 1С
Не сомневаюсь, что Вы знаете о назначении индексов и уже использовали их в повседневной работе. Разбираетесь в какой-то мере в принципе их работы, на уровне, достаточном для оптимизации запросов и создания оптимальной структуры базы данных. Прочитали множество материала по этой теме. В общем, говорите с ними на «ты».
Или, возможно, нет? Вероятно, что за потоком проблем из области разработки и решения прикладных задач эта тема просто выпала из Вашего поля зрения. Приоритеты могут быть таковы, что нужно помочь закрыть месяц, сдать отчётность, исправить ошибки в отчетах, починить обмены, сходить в отпуск в конце концов! Список можно бесконечно продолжать. И это абсолютно нормально!
Тема индексов относится больше к теме администрирования базы данных и поддержания стабильности и производительности ее работы. В обычном представлении, разработчик 1С не имеет к их созданию и поддержке прямого отношения. В идеальном мире эта задача ложится на плечи администратора базы данных, но его не часто встретишь в штате.
Скорее всего этим занят сисадмин, по крайней мере так многие считают. А у него своих проблем хватает, поэтому он просто копипастом настраивает обслуживание и забывает про 1С. Когда совсем приспичит, разработчики 1С начинают добавлять индексы через настройки метаданных в конфигураторе.
И Вам очень повезет, если индекс будет создан корректно, т.к. часто используется инновационный метод «тыка» при их настройке. Все это к тому, что часто эта тема проходит мимо разработчиков и администраторов. В проблемах разбираются быстро, принимая «странные» решения и советуя их другим. После этого устоявшиеся подходы становятся «правильными» и «неоспоримыми». Сегодня мы рассмотрим несколько самых распространённых заблуждений об индексах в контексте 1С, рожденных такими устоявшимися подходами, а также постараемся их объяснить и развеять. 
Почему это важно
Ты! Да, ты! Ты разработчик 1С, который в ответе за эффективность работы написанных запросов и всей информационной системы, которую ты обслуживаешь. Сколько угодно можно «клеймить» администраторов, разработчиков платформы 1С и просто жизнь, что база «тормозит», а твой код идеален.
Но реальность такова, что чаще всего ты чуть ли не единственный человек, который в силах исправить ситуацию с производительностью, ведь администраторы не в контексте работы БД или не ведают «магию» индексов. А руководство вообще не в курсе дела и считает ответственным именно тебя, 1Сника! Придется стать героем! Изучить работу СУБД, в частности индексов, и встать на светлую сторону!
Жизнь информационной базы в твоих руках! Расширь горизонты познания!
От простого к невероятному
Немного пафосно было сказано, но и правда кто, если не мы?! Вся эта ситуация и создает множество заблуждений про индексы, а в последствии и ошибки при работе с ними. Давайте по порядку рассмотрим самые распространенные из них, передвигаясь от простого к сложному.
Изучение работы индексов, если Вы с ними еще не сталкивались, можно начать с помощью материалов, ссылки на которые добавлены в конце публикации. Сейчас же принципы их работы и что это вообще такое мы рассматривать не будем, тема другая. И так, поехали!
Индексы не нужны
Часто приходилось слышать, что об индексах в базе можно не заботиться, т.к. это специфичная тема и мы так уже 15 лет живем. То есть проблем никогда не было, так зачем об этом беспокоиться? Да, у нас система жутко тормозит в периоды закрытия месяца и формирования тяжелых отчетов, но это же 1С! Просто нужно смириться или купить сервер получше. Да и вообще, нет времени с этим копаться.
Слышал такое настолько часто, что удивляюсь до сих пор. Самое обидное, что все аргументы проходят всегда мимо и не воспринимаются всерьез. Вот он, дух 1С! То что явно не сказано в инструкциях к платформе и не проверяется на сдаче экзамена «1С:Специалист по платформе», то не должно удостаиваться внимания. К счастью, такое не везде, но удручающе часто. Даже в больших компаниях.
Но индексы конечно же нужны! Это одно из самых эффективных средств повышения скорости поиска данных в базе. Без них большинство запросов выполнялось бы неприемлемое количество времени. Чем больше база, тем больше было бы это время.
Если бы индексы были не нужны совсем, то, думаю, разработчики платформы не добавляли штатные кластерные индексы на большинство таблиц, не было бы настроек индексирования в объектах метаданных и многого другого. Нужно ли еще что-то говорить по этому поводу.
Индексы — это сложно
Даже если индексы и нужны, то тема эта настолько сложная, что и браться за нее не стоит! Да, это еще один миф, который довольно часто встречается на просторах разработчиков 1С и системных администраторов. И это тоже заблуждение, т.к. достаточно один раз изучить основы работы и все встанет на свои места. В большинстве случаев, индекс представляет собой некоторый эффективно организованный указатель на значения, с помощью которого поиск осуществляется значительно быстрее по сравнению с полным перебором записей в таблице. Описывать подробно принцип работы индексов здесь смысла нет, да и это уже делали не раз на Инфостарт. Оставлю здесь несколько полезных ссылок:
- 14 вопросов об индексах в SQL Server, которые вы стеснялись задать
- Индексы. Теоретические основы
- Для чего НЕ нужны индексы
Прочитав даже одну лишь из перечисленных статей, Вы навсегда поймете, что индексы — это просто. Когда знаешь — все становится просто. Знание — сила!
СУБД создает индексы автоматически
Помню не одну беседу, когда мне пытались доказать, что СУБД, в т.ч. Microsoft SQL Server, создает все необходимые индексы автоматически и полностью самостоятельно на основе собранной статистики. То есть если мы много много много раз выполним какой-либо запрос и SQL Server поймет, что для его эффективной работы нужен индекс, то она создаст его!
Это, конечно же, полностью не так! Создание, изменение и удаление индексов — это обязанность разработчика баз данных или администратора БД. Автоматически СУБД ничего не создает и не удаляет, и это очень хорошо. Вы только представьте ситуацию, когда SQL Server решит создать индекс автоматически во время рабочего дня, породив блокировку данных. Или автоматически создаст пару индексов и полностью займет свободное дисковое пространство, ведь индексы имеют накладные затраты в виде занимаемого места на диске и времени на их поддержание.
Но от части это все же правда. Но не в плане, что СУБД создает индексы автоматически, а в том, что она может подсказать каких индексов сейчас не хватает. Ранее в публикациях были рассмотрены скрипты для SQL Server и PostgreSQL, среди которых были и те, что показывали отсутствующие индексы. Для SQL Server статистика по отсутствующим индексам по умолчанию собирается наиболее подробная по сравнению с данными для PostgreSQL.
Отсутствующие индексы для SQL Server
Список отсутствующих индексов по результатам собранной статистики SQL Server.
Не стоит перезапускать службу SQL Server каждую ночь, иначе полезной статистики Вы не соберете, не говоря уже об остальных недостатках такого подхода.
Отсутствующие индексы для PostgreSQL
Для PostgreSQL также можно посмотреть отсутствующие индексы, но информация не такая точная и полная как для SQL Server.
SELECT relname, seq_scan — idx_scan AS too_much_seq, CASE WHEN seq_scan — coalesce(idx_scan, 0) > 0 THEN ‘Missing Index?’ ELSE ‘OK’ END, pg_relation_size(relname::regclass) AS rel_size, seq_scan, idx_scan FROM pg_stat_all_tables WHERE schemaname = ‘public’ AND pg_relation_size(relname::regclass) > 80000 ORDER BY too_much_seq DESC;
Для анализа недостающих индексов в этом случае стоит собирать информацию о тяжелых запросах и планах их выполнения, чтобы по результатам изменить структуру БД.
Не стоит уповать на СУБД в части создания индексов в автоматическом режиме. Все же думать над этим придется, а SQL Server / PostgreSQL / др. СУБД дадут эффективные инструменты анализа недостающих индексов и средства их создания и поддержки.
Платформа 1С создает все индексы сама
Как Вы уже поняли, СУБД не создает индексы автоматически, адаптируясь под выполняемые запросы. НО! Значит платформа 1С сама создает недостающие индексы для оптимизации производительности!
На самом деле, конечно же, нет. Услышав такое, можно очень удивиться и пойти пить крепкий чай. Но столкнуться с таким до сих пор можно. Тут, на самом деле, возможно, появляется путаница, ведь платформа все же создает индексы в зависимости от типа объекта метаданных и его настроек. Это действительно так и по этой ссылке Вы можете изучить все возможные платформенные индексы.
В остальных же случаях разработчику приходится самостоятельно настраивать индексирование полей, чтобы добиться нужного результата. К сожалению, искусственный интеллект в платформу еще не завезли.
Чем больше индексов, тем лучше
Для быстрого поиска нужен индекс. Так почему же не добавить индекс на каждое поле. Например, есть справочник «Номенклатура» в конфигурации «Управление торговлей» ред. 11. В нем имеется несколько индексов, большинство из которых создается платформой 1С без каких-либо особых настроек. Есть и индексы, созданные специально для тех реквизитов, в которых свойство «Индексировать» установлено в «Индексировать» (извините за тавтологию, но такие уж названия):
- Артикул
- Вид номенклатуры
- Код для поиска
Но что, если нужно выполнить поиск по реквизиту «Код ОКВЭД» или «Код ОКП»? Или любому другому полю? Почему бы не добавить индексы на каждое поле?
Да, тут сразу можно понять, что что-то не так и добавление индексов на все поля таблицы дело не самое правильное. Как уже говорилось выше, индексы имеют свои накладные расходы для обслуживания. Кроме дополнительного дискового пространства, для их поддержки СУБД тратит дополнительное время при выполнении операций модификации данных.
Когда Вы изменяете запись в таблице, СУБД обновляет данные индекса, что требует дополнительного времени и ресурсов. Чем больше индексов на таблице, тем больше времени на поддержку индекса тратится. Это время может быть незначительным относительно общего времени выполнения операции записи, но чем больше индексов, тем сильнее это время будет увеличиваться.
С помощью простого запроса можно проанализировать список индексов, на поддержание которых СУБД тратит значительные ресурсы в части операций ввода / вывода.
Индексы с высокими издержками для SQL Server
Не обязательно, что найденные индексы нужно удалять или изменять. Иногда такие индексы могут быть нормой.
SELECT TOP 1 [Maintenance cost] = (user_updates + system_updates) , [Retrieval usage] = (user_seeks + user_scans + user_lookups) , DatabaseName = DB_NAME() , TableName = OBJECT_NAME(s.[object_id]) , IndexName = i.name INTO #TempMaintenanceCost FROM sys.dm_db_index_usage_stats s INNER JOIN sys.indexes i ON s.[object_id] = i.[object_id] AND s.index_id = i.index_id WHERE s.database_id = DB_ID() AND OBJECTPROPERTY(s.[object_id], ‘IsMsShipped’) = 0 AND (user_updates + system_updates) > 0 — Only report on active rows. AND s.[object_id] = -999 — Dummy value to get table structure. ; — Loop around all the databases on the server. EXEC sp_MSForEachDB ‘USE [?]; — Table already exists.
INSERT INTO #TempMaintenanceCost SELECT TOP 10 [Maintenance cost] = (user_updates + system_updates) ,[Retrieval usage] = (user_seeks + user_scans + user_lookups) ,DatabaseName = DB_NAME() ,TableName = OBJECT_NAME(s.[object_id]) ,IndexName = i.name FROM sys.dm_db_index_usage_stats s INNER JOIN sys.indexes i ON s.[object_id] = i.[object_id] AND s.index_id = i.index_id WHERE s.database_id = DB_ID() AND i.name IS NOT NULL — Ignore HEAP indexes. AND OBJECTPROPERTY(s.[object_id], »IsMsShipped») = 0 AND (user_updates + system_updates) > 0 — Only report on active rows. ORDER BY [Maintenance cost] DESC ; ‘ — Select records.
SELECT TOP 10 * FROM #TempMaintenanceCost ORDER BY [Maintenance cost] DESC — Tidy up. DROP TABLE #TempMaintenanceCost
Но задуматься все же стоит. Возможно, есть необходимость переписать запросы и оптимизировать структуру используемых индексов или даже таблиц.
К сожалению, такого простого запроса для PostgreSQL нет. Там требуется другой подход.
Плюс ко всему, неизвестно какие индексы для всех полей добавлять, ведь они могут быть составными, покрывающими, а еще для использования индексов значение отбора должно быть селективным. Какой смысл искать в индексе по полю «Пометка удаления» со значением Ложь, если 99% записей в таблице не помечены на удаление? Индекс не будет использоваться, т.к. смысла искать по неселективному значению нет.
Таким образом, смысла создавать индексы для всех полей просто нет, да и для большого числа полей тоже. При создании индекса нужно точно знать для каких целей он создается, иначе он будет висеть мертвым грузом и просто «съедать» ресурсы сервера. Если уж и стоит задача поиска по всем возможным полям, то скорее всего нужен другой подход в виде полнотекстового поиска и т.д.
Главное, чтобы поле входило в индекс
Перейдем к более практическим кейсам. Еще одним частым «фейлом» можно считать ситуацию, когда разработчики считают, что для эффективной работы индекса главное наличие в нем нужно поля. Например, в типовой конфигурации «Управление торговлей» ред. 11 имеется регистр сведений «Календарные графики» со следующей структурой.
Источник: infostart.ru