В недавно опубликованном компьютерном исследовании 21 629 межправительственных соглашений штата Айова были преобразованы в доступную для поиска картину того, как города, округа и специальные районы совместно используют услуги и распределяют государственные средства. В работе, представленной 16 сентября, применяются сканирование документов, большие языковые модели и сетевой анализ к необычайно полному архиву так называемых соглашений 28E штата.

Эти соглашения существуют, потому что закон штата Айова позволяет государственным учреждениям совместно осуществлять полномочия, заключать контракты на совместную работу и создавать отдельные организации для совместной работы. Закон гласит, что в соглашениях должны быть четко указаны их цель, срок действия, финансирование и способ расторжения, а также требуется подача документов в офис государственного секретаря до вступления соглашения в силу. В общедоступной базе данных можно осуществлять поиск по участникам, типу услуг, дате подачи документов, типу организации, округу и региону.

Исследовательская группа сообщила, что архив охватывает документы, поданные с 1993 по 2020 год, по 33 сферам услуг, включая полицию, пожарную охрану, дорожное строительство, управление чрезвычайными ситуациями, системы водоснабжения, образование и экономическое развитие. Поскольку многие старые контракты представляют собой отсканированные PDF-файлы, а не машиночитаемые документы, исследователи сначала использовали оптическое распознавание символов, а затем классифицировали каждое соглашение как договор на оказание услуг, соглашение о совместном использовании ресурсов, совместную операцию или новое совместное предприятие.

После тестирования нескольких подходов на 1128 документах, составленных вручную, исследователи выбрали классификатор, который достиг общей точности 82% и показателя F1 0,92 для договоров на оказание услуг. Они отдельно проверили 100 извлеченных договоров на оказание услуг по сравнению с оригинальными документами и сообщили, что 96% идентифицированных плательщиков, поставщиков и сумм в долларах были верны. Эти показатели проверки важны, поскольку авторы также отмечают, что автоматизированный юридический анализ может неправильно интерпретировать зашумленные данные или сложный текст договора.

Полученная карта показывает систему с 1642 стандартизированными узлами агентств. Города преимущественно являлись покупателями услуг, закупая их у округов в 1577 из проанализированных контрактов, заключенных городами. Наиболее распространенными услугами в этих соглашениях между городами и округами были полицейская охрана, дороги, коммунальные услуги и здравоохранение. Округа играли более разнообразные роли, закупая услуги как у городов, так и у других округов, а также выступая в качестве основных поставщиков.

Сеть была как концентрированной, так и локальной. Одна группа из 83 агентств получила около 538,7 миллионов долларов в виде контрактных поступлений, больше, чем любая другая группа, выявленная моделью. В то же время, агентства с большей вероятностью заключали контракты в пределах одного округа и зоны обслуживания, чем можно было бы ожидать в 1000 случайных вариантах сети.

Для должностных лиц и налогоплательщиков штата Айова практическая ценность заключается не в том, что алгоритм заменяет проверку базовых контрактов. Дело в том, что теперь архив можно проверять на предмет концентрированной зависимости от поставщиков, необычных платежных отношений и областей, где местные органы власти неоднократно закупают одни и те же услуги. В муниципальных рекомендациях уже подчеркивается, что каждое соглашение должно быть подано в электронном виде. Новая работа предлагает способ изучения этой записи в масштабах штата, сохраняя при этом оригинальные документы в качестве основных публичных документов.