Кратко

  • FirstGov соединил подаренный поисковый механизм с федеральным порталом, но индекс не был ни исходными страницами ведомств, ни официальным архивом.
  • Современный событиям материал Berkeley говорил, что на первом этапе базой владела и управляла Federal Search Foundation; позднее поставщики поиска сменились. Документы подтверждают преемственность общественной услуги, но не единую технологию или непрерывную цепочку хранения.

За девяносто дней создали вход, а не новый архив

В сообщении The White House говорилось о запуске FirstGov 22 сентября 2000 года. Важен и срок: в июне того же года президент Bill Clinton предложил правительству и отрасли завершить портал за 90 дней. Практический смысл состоял в том, чтобы человеку, ищущему студенческий кредит, пенсионную информацию или место для кемпинга, не приходилось сначала угадывать ведомство, ответственное за нужную страницу.

В сообщении The White House говорилось, что FirstGov одновременно ищет по 27 миллионам веб-страниц федеральных ведомств. Там же заявлялась способность просматривать полмиллиарда документов менее чем за четверть секунды и обрабатывать миллионы поисковых запросов в день. Это заявления правительства при запуске о масштабе и возможностях, а не независимый аудит и не измеренная постоянная нагрузка. В октябре газета Berkeley использовала другие знаменатели: более 100 миллионов страниц в более широком наборе государственных сайтов и около 30 миллионов страниц, к которым, по прогнозу Eric Brewer, будут обращаться поначалу.

Источники не подтверждают, что речь шла об одном и том же корпусе; из этих чисел нельзя вывести проверенное количество реально проиндексированных страниц в день запуска.

Поисковая задача появилась у Brewer раньше FirstGov. В 1995 году Berkeley писала об Inktomi, разработанной им вместе с аспирантом Полом Готье на основе проекта сети рабочих станций. В статье описаны индекс более чем из 1,3 миллиона документов, обходчик, периодически находивший новые адреса, и параллельный поиск. Там же сообщалось, что конфигурация из четырех машин сохраняла доступ ко всему индексу при отказе трех, хотя скорость снижалась. Это описание конкретной конфигурации того времени, а не гарантия для всех последующих продуктов Inktomi.

Связующая идея здесь не в мифе об одном изобретателе. Поиск в масштабе веба требовал обновлять изменчивый индекс, распределять вычисления и находить страницы, за которые отвечали разные организации. FirstGov вынес эту возможность в публичный интерфейс: можно было искать сразу по ведомствам, не зная заранее устройство федеральной администрации.

Подарок поисковика не передавал все остальные слои

Слово «подарок» не описывает полностью порядок владения и обслуживания. В сообщении The White House механизм поиска описывался как разработанный Eric Brewer и переданный государству. Но опубликованный через несколько недель материал Berkeley сообщал, что Eric Brewer основал в 2000 году некоммерческую Federal Search Foundation, которая сначала будет владеть базой данных и поддерживать её. Через два года правительство получит преимущественное право покупки. В том же материале говорилось, что технология Inktomi будет поддерживать обновлённые копии правительственных страниц в расширяемой сети серверов.

Здесь следует различать как минимум четыре вещи: страницы ведомств, копии или индекс для поиска этих страниц, сам поисковый механизм и видимый публике портал. Дар поисковика не доказывает, что индекс фонда сразу стал федеральной собственностью, что сам индекс был официальной записью или что исходные страницы перешли под контроль Brewer. Публикация Berkeley не говорит, чем закончилась двухлетняя договорённость. Из рассмотренных источников нельзя установить её итог.

Это разграничение функций, а не утверждение о провале FirstGov. Индекс упрощает поиск по разрозненным страницам и может обновлять копии, но сам по себе не гарантирует сохранение авторитетной версии, не объясняет отсутствие результата и не делает одно ведомство ответственным за содержание другого. Доступные документы показывают сервис поиска, а не полноценную систему архивного хранения всего федерального правительства.

Название пережило смену поисковой архитектуры

Позднейшая история показывает, почему название портала не равно схеме его реализации. В 2006 году Управление общих служб США описывало FirstGov Search как партнёрство Microsoft и Vivisimo: индекс MSN Search сочетался с метапоиском Vivisimo. Сообщение называло более 50 миллионов документов федерального, штатного, местного, племенного и территориального уровней и говорило о постоянном обновлении индексов. Это свидетельствует о смене публично названных поставщиков и поискового набора, но не устанавливает юридическую судьбу первоначальной базы фонда или отдельных активов Inktomi.

Нынешняя страница USAGov связывает историю SearchGov с USA.gov и с пожертвованием Brewer, а также говорит о расширении SearchGov на государственные ведомства в 2010 году. Она сообщает о более чем 200 миллионах поисковых запросов в год на тысячах федеральных сайтов. Это показатель нынешнего сервиса по данным USAGov; его нельзя напрямую сравнивать с заявлениями о возможностях в 2000 году. Общественная задача и название могут сохраняться при смене поставщиков, индексов, финансирования и операционной ответственности.

Профиль Eric Brewer на сайте Berkeley относит его работу к масштабируемым серверам, поисковым системам, сетевой инфраструктуре и государственным приложениям технологий. FirstGov соединил эти направления: систему поиска в больших массивах веб-страниц предложили как путь к общественной информации. При этом вклад был коллективным. В разработке Inktomi участвовали Paul Gauthier и исследовательская среда Berkeley; запуск портала потребовал президентского срока, участия ведомств и дальнейшего государственного управления.

Найти страницу — не значит владеть записью

Поэтому государственную поисковую службу нельзя оценивать только по количеству запросов. Важно, какие страницы ведомств попадают в индекс, ведут ли результаты к актуальному источнику, кто поддерживает услугу и как ведомства исправляют отсутствующие или устаревшие ссылки. Смена поставщика, индекса, финансирования или домена требует проверки охвата, но не доказывает исчезновения исходных документов.

Такова фактическая граница «единого входа» FirstGov. Общий портал может снизить цену поиска услуги, не централизуя сами документы и не передавая их хранение оператору поисковой системы. Это может быть полезным публичным интерфейсом, не превращаясь в орган власти, реестр или архив. Пожертвование Brewer сделало вход возможным; дальнейшая история показывает, что оператор входа, хранитель индекса и ведомство, отвечающее за источник, могут быть разными организациями.

Источники