Следователи из отдела статистики (СИ)

Что можно сказать о мире вокруг нас? Он очень большой. Он огромный. Гораздо больше, чем может охватить один, пусть самый развитый, разум. И даже небольшое подмножество, ограниченная выборка из многообразия происходящих событий – следы в системных журналах, записи уличных камер и отметки в базах данных – всё равно слишком велико. Информации слишком много. Возможно, где-то там скрыты неявные связи: кусочек информации оттуда, кусочек отсюда. И вот картинка собралась. Но как найти нужное?
Общего алгоритма не существует. Информация представлена в виде сжатого видео хранящегося на гражданских серверах. В виде записей в разрозненных базах данных. Она распылена, разделена и сохранена в отличных друг от друга форматах и формах. Большая часть работы прогноз-статистика и состоит в поиске в информационном море открытых баз данных кусочков ответа. Прогноз-статистик, словно ловец жемчуга, шарит по дну, а высоко над ним плещутся волны. Нет, прогноз-статистику куда сложнее. Пусть ловец жемчуга не знает какая жемчужина скрывается в найденной раковине, но уж саму раковину он узнает без сомнения. Прогноз-статистик должен не только найти требуемое, но и узнать его. Кусочек информации, бесполезный сам по себе, приобретает смысл лишь при наличии других кусочков. Одни и те же данные можно интерпретировать совсем по иному в свете других данных. Ответ не лежит в готовом виде. Ответ это не кусочек информации, не запись в таблице логов и не видео с уличных камер. Скорее он совокупность связей между кусочками.
Ответ это модель и как любая модель он имеет смысл только если реальность соответствует описанию.
Если бы можно было как-то выработать общее решение для поиска, то городу-интеллекту Новосибирску не понадобилась бы помощь пусть медленных, пусть время от времени ошибающихся, но тем не менее самостоятельных агентов – каковыми выступают все сотрудники, работающие в управлении статистики. Можно сказать, что в данном случае люди выступали в качестве автономных модулей города-интеллекта способных самостоятельно изыскивать способы достижения поставленных целей. Они расширяли функциональность интеллекта по имени Новосибирск, дополняя собой его недостаточную вычислительную мощность. Вычислительной мощности никогда не бывает достаточно.
Да, это временно решение, до тех пор пока инженеры не придумают как можно на порядки увеличить быстродействие искусственных нейронных сетей, а генограммисты не смогут каждого человека сделать гением и талантливым абсолютно во всех областях. И Таню и всех её коллег когда-нибудь заменит один единственный человек за несколько минут способный выполнить ту же работу, на которую у их коллектива уходят часы или дни. Но разве это значит, что работа «следопытов» не важна? Конечно нет, потому что без Таниного труда здесь и сейчас, быть может смешного и нелепого с точки зрения всемогущего человека будущего, этого самого человека будущего никогда и не будет. Невозможно построить космический корабль, не научившись строить самолёты, невозможно создать самолёт не налетав предварительно сотни тысяч часов на планерах. Невозможно построить планер, не запуская бумажных самолётиков и не наблюдая за их полётом. Прогресс это не лестница, не спираль и не пирамида. Прогресс – совместна работа тех кто живёт сейчас, кто уже умер и кто когда-нибудь будет жить. И в современных спутниках наматывающих круги на орбите есть частичка труда всех живших в прошлом людей от пахаря до воина. А в кораблях, которые когда-нибудь полетят к другим звёздам будет частичка труда всех нас: живущих здесь и сейчас, честных людей. Побольше от учёного или инженера, поменьше от крестьянина выращивающего хлеб, попадающий на стол инженеру и учёному. Или от швеи, работающей на фабрике изготовляющей сапоги в которых ходит выращивающих хлеб крестьянин. Вы действительно думаете, будто труд швеи или крестьянина менее важен чем труд инженера?
Таня работала семь дней в неделю, по восемнадцать часов в сутки, только дважды отлучаясь обкатывать отремонтированный автоцикл, когда из мастерской звонили, что трасса для испытаний ненадолго освободилась. И на восьмой день ответ – нет, не отыскался – стал немного ближе. Список из шести тысяч двухсот одиннадцати имён поделили на пять частей. Это получилось по тысяча двести сорок два имени на «следопыта» и ещё по две десятых. С вероятностью более восьмидесяти процентов кто-то из этих шести с лишним тысяч и есть тот самый неизвестный уже третий раз срывающий план поставки консервов длительного хранения в туристические магазины. С вероятностью более шестидесяти пяти, таких человек не менее трёх. Что со списком делать дальше?