Командование систем военно-морского снабжения ВМФ США единовременно закупает глобальный исторический архив данных социальных сетей с 1 июля 2014 по 31 декабря 2016 за $38,5 млн.

27 мая 2019 в 18:00 по тихоокеанскому времени заканчивается прием заявок на участие в конкурсе, объявленном Командованием систем военно-морского снабжения ВМФ США, дислоцированным во Флотском логистическом центре Сан-Диего. Объявленный конкурс не подтверждается письменным приглашением, а бумажные копии не доступны. Все ответы на вопросы потенциальных участников будут предоставлены исключительно официальным участникам.

Этот проект является частью текущих исследований, проводимых Министерством обороны в Военно-морской аспирантуре США. Исследование направлено на то, чтобы обеспечить более глубокое понимание фундаментальной социальной динамики, моделирование эволюции языковых сообществ и возникающих способов коллективного выражения мнений во времени и в разных странах.

В качестве основного требования для этого исследования Командование систем военно-морского снабжения ВМФ США стремится приобрести крупномасштабный глобальный исторический архив данных социальных сетей, предоставляющий полный текст всех общедоступных публикаций в социальных сетях во всех странах и на языках, охватываемых платформой социальных сетей. Исследование будет использоваться для продвижения знаний через научные публикации, а также в педагогических целях, предоставляя учащимся новые возможности для исследования «больших данных» и укрепления аналитических навыков. Хронологические рамки проекта: 01.07.2014 - 31.12.2016 с установленным минимальным количеством полных записей: 350 000 000 000.

Минимальные требования к платформе: Данные должны состоять из записей, взятых из единой платформы социальных сетей. Данные должны состоять из всех общедоступных сообщений, комментариев или сообщений, переданных на платформе за указанный период времени. Данные включают в себя сообщения как минимум от 200 млн. уникальных пользователей как минимум в 100 странах, причем ни в одной стране не зарегистрировано более 30% пользователей. Данные должны включать сообщения, написанные как минимум на 60 языках, причем не менее 50% сообщений должны быть написаны не на английском языке. 

Минимальные требования к записи: Должны состоять исключительно из общедоступной информации. Никакие личные сообщения или личные данные пользователя не будут включены. Каждая запись в архиве должна содержать полный текст поста в социальной сети, неизменный по сравнению с исходным содержимым и форматированием, со всеми общедоступными метаданными, включая страну, язык, хэштеги, местоположение, дескриптор, метку времени и URL-адреса, которые были связаны с оригинальной заметкой. Все записи должны включать время и дату отправки каждого сообщения и дескриптор общедоступного пользователя, связанный с сообщением. Приблизительная информация о местонахождении, предоставление собственных данных о пользователях или другая общедоступная информация о местоположении должна быть включена как минимум в 20% записей.

Требования к доставке: Данные должны быть предоставлены в виде сжатых текстовых файлов с использованием кодировки UTF-8 со всеми записями в формате JSON. Данные доставляются гуртом, как единовременная покупка одного исторического архива. Данные могут передаваться либо через безопасный выделенный онлайн-хостинг (например, SFTP), либо через доставку физических носителей (например, портативных жестких дисков).

Источник:
https://www.fbo.gov/index.php?s=opportunity&mode=form&tab=core&id=89aae9acd931970ae5e8b6c75aab45cf&_cview=0