Кто написал «Тихий Дон»? Этому вопросу уже почти 100 лет, и чем дольше он исследуется, тем больше на него появляется альтернативных ответов. Рассказываю, как ученые пытались искать ответ на этот вопрос при помощи статистики, как на Шолохове отрабатывали компьютерные методы еще в эпоху перфокарт, что говорит об авторстве «Тихого Дона» современная стилометрия и почему она все равно не даёт окончательного ответа. Зато даёт возможность воспроизвести результаты экспериментов, что я и проделал.
Недавно СМИ облетела новость об увольнении всех российских программистов из компании ABBYY (тоже в прошлом российской, а теперь уже совсем нет). Теперь, когда страсти вокруг обсуждения дискриминации сотрудников по паспорту улеглись, хочется поговорить о более глубокой истории. Закат ABBYY — это фиксация проигрыша последней битвы лингвистов за автоматическую обработку языка. Мир Data Science победил. Главный редактор «Системного Блока» Даниил Скоринкин, работавший ABBYY в 2013–2017, подводит итоги и пытается сформулировать уроки из этой истории, начало которой — еще в 1990-х годах. С мемасами и метафорами.
Призрак революции снова бродит вокруг нас — и борьба с ним все так же бесплодна. К 175-летию «Манифеста коммунистической партии» Карла Маркса и Фридриха Энгельса
В России объявили частичную мобилизацию. Это первая мобилизация в новейшей истории страны — предыдущая была в СССР во время Великой Отечественной. С начала военной операции на территории Украины власти РФ
Поговорим о деревьях решений – простом и популярном методе машинного обучения.
В Москве прошли выборы муниципальных депутатов. Мы изучили списки кандидатов по округам и нашли неслучайные совпадения.
Тезис «Россия проводит специальную военную операцию по демилитаризации и денацификации Украины» будет справедливо дополнить фразой «в российских СМИ». Системный Блокъ проанализировал архив СМИ за первое полугодие 2022 года и узнал, какие смыслы (и сколько) транслируют медиа по поводу «спецоперации».
С февраля 2022 года в новостях и разговорах можно услышать про «отмену русской культуры» в рамках «культуры отмены». Что это такое, можно ли отменить культуру и как любопытство пользователей интернета может помочь в этом разобраться? «Системный Блокъ» посчитал упоминания в СМИ и проанализировал поисковые запросы.
Как связаны глубинное обучение и машинное обучение? На что влияет «глубина» нейронной сети? Рассказываем о важнейшей области машинного обучения.
Казалось бы: времена идут, столько всего должно поменяться… Но отношения к учебе это как будто не касается — о ней всегда говорят похожие вещи. Кто-то жалуется на загрузку, кому-то не нравятся соседи в общежитии, а у кого-то обучение проходит за границей и он/она страдает от непривичных и суровых правил. Ко дню знаний делимся подборкой открыток о школе, университете и даже учебных курсах!
Если посмотреть на голую статистику, может показаться, что женщины-ученые публикуют меньше научных статей, чем их коллеги-мужчины, а также реже получают гранты и патенты. Исследование Мэтью Росса из Северо-восточного университета в Бостоне и его коллег показало, что реальное положение дел может быть куда сложнее: женщинам в науке бывает нелегко добиться указания их авторства из-за дискриминации.
Москва входит в топ-30 городов по покрытию камерами. Цифровизация наблюдения уменьшает риск преступности, но при этом и помогает государству выследить любого гражданина.
Разберём, что такое кластеризация, поговорим об известных ее методах и расскажем, зачем она используется в реальных задачах
В последний год работы «Системный Блокъ» много писал о том, что происходит не только в мире науки, но и в мире вообще. Неудивительно, что в числе главных постов этого года — сухие страшные цифры, новые технологии и значимые исследования.
Сегодня филологи не только активно читают, но и активно вычисляют: авторство, особенности перевода, даже эмоции в текстах. О том, когда и почему это может быть важно, читайте в нашей подборке стилометрических исследований.
Модель Ithaca позволила повысить точность реставрационных работ почти в три раза: с 25% до 72%
Instagram и Facebook* этой весной стали запрещенными, YouTube все чаще грозятся закрыть, а Минцифры составило список отечественных аналогов Zoom и Twitter. Мы спросили экспертов Роскомсвободы, стоит ли нам ждать полностью суверенного Рунета, и разбираемся, что вообще произошло с социальными сетями и интернетом в России этой весной
Нью-йоркский музей МоМА — один из старейших музеев современного искусства в мире. В MoMA хранятся работы Рене Магритта и Энди Уорхола, Джексона Поллока и Марко Ротко, Марка Шагала и Казимира Малевича, Сальвадора Дали и Пабло Пикассо. А еще там постоянно проходят выставки — их было так много, что это можно изучить цифровыми методами.
Мы оцифровали тысячи старых открыток, но до сих пор у нас не было по ним удобного поиска. Теперь можно искать по датам, местам отправления и получения, тематическим тегам и по текстам открыток.
Еще месяц назад мы с уверенностью смотрели в будущее, почти привыкнув к «новой нормальности» в мире с пандемией. Но оказалось, что впереди нас ждали внезапные события, имеющие колоссальные последствия для всех. Как в условиях неопределенности сохранить способность мыслить? Как поддерживать себя и близких? Как реагировать на острые ситуации? И что делать с планами, которые рассыпались за секунды? «Системный Блокъ» попросил психологов ответить на вопросы, которые волнуют нас сегодня.
Изучением всего сущего и категоризацией понятий и объектов занимается не только философия, но и компьютерная наука. Как это может помочь оптимизировать работу поиска, предостеречь от кибератак и построить графы знаний? В новой статье глоссария рассказываем об онтологии – формате хранения структурированных данных – и объясняем, зачем ее создавать и где применить.
Порой поисковик понимает нас лучше, чем мы сами. Например, по запросу «фильм, в котором был грунт» он ответит верно и выдаст «Стражей галактики». Это возможно благодаря Knowledge Graph – семантической сети, которая умеет выявлять взаимосвязи между разными объектами. В новой статье глоссария рассказываем, что такое граф знаний, как он устроен и чем помогает поисковикам.
Война отражается не только в перемещениях войск, сражениях и потерях. Война проникает глубоко в быт, и затем историки находят ее следы в самых личных вещах. Например, в переписках солдат и офицеров с семьями. Рассказываем о том, что писали в открытках с фронтов мировых войн.
Инна Кижнер — старший преподаватель кафедры информационных технологий в креативных и культурных индустриях, научный сотрудник лаборатории «Digital Humanities» Сибирского федерального университета. В интервью «Системному Блоку» она рассказала, каким искажениям подвержены цифровые коллекции музеев, какие культурные явления можно исследовать благодаря оцифровке и как должна выглядеть идеальная цифровая коллекция.
Бот «AI да Пушкин» дописывает любую предложенную ему фразу до четверостишия в стиле А.С. Пушкина — но только если в ней нет «запретных» слов
Тест Тьюринга придумали в середине 20 века, чтобы измерить интеллект машин и проверить, насколько он схож с человеческим. Сегодня мы все еще используем этот тест, но чаще с обратной целью: теперь компьютер проверяет наш интеллект. Рассказываем про обратный тест Тьюринга, популярные капчи и объясняем, зачем нам все это нужно
«Системный Блокъ» выяснил, что волновало участников событий и о чем писали газеты. Восстания, Первая мировая война, броневики, голод, бедность… И в это же время Русские сезоны, последняя выставка Бубнового валета
Gephi — самый известный инструмент для визуализации графов и сетевого анализа. С его помощью можно исследовать и население Викторианской Англии, и отношения героев «Войны и мира», и странички друзей Вконтакте. Рассказываем максимально просто, как пользоваться Gephi
Сегодня с геоданными взаимодействует практически каждый. Мы заказываем такси и еду, используем навигацию, изучаем цифровые карты, чтобы понять местность или найти нужное заведение. С помощью геоданных наука может предсказать экологические проблемы, а бизнес и государство – строить логистику компаний, контролировать строительство, нефтяную отрасль, развивать сельское хозяйство. Всё это возможно благодаря геоинформационной системе с огромным количеством данных о местности, инфраструктуре, экологии. В этой статье мы коротко расскажем о видах геоданных, для чего они нужны и где применяются
Студенчество – сложный период, о котором часто вспоминают с трепетом и теплом. Учиться всегда было непросто: бессонные ночи, стресс, бесконечные сессии. Начинались и заканчивались войны и эпидемии, менялся алфавит и технологии коммуникаций, но люди, несмотря ни на что, стремились к образованию. Ведь университет – это целая экосистема, внутри которой студент становится взрослым человеком. Об этом пишут книги и снимают фильмы, а мы собрали для вас самые интересные открытки студентов и о студентах со времен Российской империи до начала XXI века.
Учёные придумали систему, которая поможет в поиске синтеза новых лекарств. В разработке участвовали исследователи из университетов Страсбурга, Казани и Хоккайдо. Один из руководителей проекта, Тимур Маджидов из Казанского федерального университета, подробно рассказал об истории и работе нейросети и будущем химии
Маски в Инстаграме и ТикТоке способны изменить лицо до неузнаваемости или вообще превратить его в зайчика/оленя/волдеморта. Создание таких масок не обходится без нейросетей и играет в цифровом мире в основном развлекательную роль. Но что если те же технологии можно применить в образовательных целях?
Как понять отношение к женщинам и мужчинам в XIX веке? Можно обратиться к литературе того периода и посмотреть на героев времени глазами современника. Язык - зеркало общества и рупор изменений.
Проект по оцифровке открыток «Пишу тебе» подготовил очередную тематическую подборку. На этот раз мы подобрали открытки, в которых есть поздравления с Рождеством Христовым. В наши дни традиция поздравления открыткой уже не так распространена. Однако среди наших прабабушек и прадедушек начала прошлого столетия такой жест был довольно популярен. Почитаем, что же они там писали.
По традиции 31 декабря «Системный Блокъ» публикует подборку лучших материалов уходящего года. В 2021-м в подборке оказались спецпроект в духе «Намедни» к 30-летию крушения СССР, дата-исследование зарплат учителей в России, выпуск подкаста о том, как врет искусственный интеллект, тесты о средневековых студентах и о цифровых гуманитариях и видео о людях, из которых состоит сам «Системный Блокъ». С новым годом!
Реформы, перевороты, вооружённые конфликты, распад СССР… Все это происходило параллельно с развитием интернета и становлением массовой IT-индустрии. Как информационные технологии изменили общество после крушения Советского Союза? Пройдите тест и узнайте, насколько точно вы помните события, сформировавшие лик современности.
Роботы заменили людей в качестве первой линии HR-рекрутеров. Они фильтруют резюме и даже совершают первичные звонки отобранным кандидатам. Но есть проблема: такие алгоритмы могут предвзято относиться к женщинам, национальным меньшинствам
Многие говорят, что эффективный способ выучить иностранный язык – смотреть сериалы на этом языке. Если вы тоже пробовали такой метод, то наверняка обращали внимание, как какой-нибудь герой из сериала Netflix вместо простых «нет» или «да» произносит не всем знакомые выражения типа no way или you bet. Что это такое и почему об этом почти не говорили на уроках в школе? Рассказываем о дискурсивных формулах и новом цифровом ресурсе для их изучения в русском языке, а также поиска аналогов в английском
В 1950 году Алан Тьюринг написал работу Computing Machinery and Intelligence («Вычислительные машины и разум»). Уже тогда, на заре развития кибернетики, люди задумывались о создании компьютера, который бы мог думать подобно человеку. Вслед за инженерами к проблеме и подключились психологи. Моделирование психических процессов до сих пор остается одной из самых разрабатываемых областей когнитивной науки.
В коллекции проекта «Пишу тебе» есть старинные открытки, которые хранят сведения о локальной истории, архитектуре и повседневной жизни ушедших эпох. Сегодня рассказываем о двух открытках, отправленных в Пермской губернии в 1915 году. Открытки комментирует эксперт Юлия Бушмакина
Сегодня 15 октября. И в любой стране Европы тоже 15 октября. Правда, к такому единогласию в календарях мы пришли недавно: чуть больше ста лет назад. До этого Россия и Европа жили буквально в разных временах. Как эта разница отразилась в почтовых открытках, читайте в нашем новом материале от проекта «Пишу тебе»
Как понять, кем вам приходится сваха внучатого племянника вашей сестры? Проще всего - нарисовать генеалогическое древо, которое отразит все родственные связи. А еще лучше - написать код на Python, который сделает это за вас
17–19 сентября 2021 года в России прошли выборы в Государственную Думу. Независимый электоральный аналитик Сергей Шпилькин* построил графики, которые отражают результаты голосования в разных регионах. По ним можно предположить, были ли на выборах фальсификации. Пройдите наш тест и проверьте, сможете ли вы понять, какой регион на каждом графике?
Язык интернета имеет свои характерные черты. И если исследованию языка Рунета посвящено множество работ, то DarkNet все еще остается серым пятном в этом плане. С помощью анализа тональности текстов выясняем, какая лексика характерна для отзывов о запрещенных веществах.
Наш проект по оцифровке открыток «Пишу тебе» продолжает исследовать свою постоянно растущую коллекцию. На этот раз мы изучили поздравительные открытки, написанные как до, так и после революции. Некоторые популярные поздравления сегодня выглядят неожиданно, хотя раньше были распространены повсеместно.
Уже минула середина лета, кто-то еще только в предвкушении отпуска, а кто-то возвращается из поездок, путешествий, приключений. Такие моменты хочется разделять с близкими людьми. В дореволюционное и советское время популярным способом поделиться впечатлениями из поездки было отправление почтовых открыток с изображением городских достопримечательностей. Проект «Пишу тебе» сделал подборку летних почтовых открыток, где люди рассказывают об отдыхе и путешествиях.
Сможет ли человечество построить искусственный интеллект, не уступающий человеческому, и надо ли его строить? «Системный Блокъ» обсудил это с Константином Воронцовым, одним из известнейших специалистов по машинному обучению в России. Публикуем его ответы на наши вопросы
Сегодня Системный Блокъ отмечает свой третий день рождения. День рождения - очень добрый праздник. В этот день именинник получает приятные пожелания от близких людей. И никакие расстояния не помеха чтобы сказать теплые слова дорогому человеку. Сейчас нам не составит труда позвонить имениннику или отправить ему пожелания в мессенджере. А в начале XX века единственным способом поздравить на расстоянии человека было отправление почтовых открыток или писем.
Сегодня в России более 1,3 млн учителей средних школ. «Системный Блокъ» решил узнать, насколько учитель средней школы в России подходит под критерий среднего класса. Говоря геймерским языком: насколько трудно «проходить Россию» на уровне сложности «medium teacher»
Российские ученые начали разработку нейросетевого алгоритма для мониторинга экосистемы озера Байкал. Он будет делать анализ проб воды, автоматически распознавать и классифицировать живущие в ней микроорганизмы. Раньше это делалось вручную.
80 лет назад, 22 июня 1941 года, началась Великая Отечественная война. В военное время было особенно важно сообщить вести о себе своим близким, друзьям, знакомым. Проект «Пишу тебе» отобрал фронтовые открытки, посвященные тем временам. Эти открытки наполнены любовью, заботой и надеждой на встречу с родными
Эта страничка — дополнение к XI выпуску подкаста «Неопознанный Искусственный Интеллект». В этом выпуске мы общались с Борисом Янгелем из команды разработки беспилотных автомобилей в Яндексе. Здесь вы найдете полную расшифровку, оглавление выпуска и полезные ссылки
Цифровой архив «Документы Победы» хранит свидетельства о том, как управлялись войска, оборонная промышленность и прочие отрасли хозяйства во время Великой Отечественной войны.
1 июня — международный день защиты детей. К этому дню проект «Пишу тебе» собрал подборку старых открыток, написанных детьми. Юные авторы открыток рассказывают родителям о понравившихся игрушках, школьных отметках и последствиях употребления рыбьего жира.
Публикуем материалы к восьмому выпуску подкаста «Неопознанный Искусственный Интеллект»: текст расшифровки выпуска, оглавление, полезные ссылки и термины.
Пройдите тест, который покажет, кто вы в мире цифровых гуманитарных исследований. А заодно — познакомьтесь с известными цифровыми гуманитариями.
Разбираем сложные технологии глубокого обучения, чтобы они становились понятны каждому
Публикуем материалы к седьмому выпуску подкаста «Неопознанный Искусственный Интеллект»: текст расшифровки выпуска, оглавление, полезные ссылки и термины.
Быть студентом в Средние века — это вам не с айфона шпоры списывать. Но многие знакомые современным студентам вещи были в университетах уже тогда. Например, землячества или материальная помощь для малообеспеченных. Проверьте ваши знания об университетской жизни в Средневековье.
Научить нейросети понимать искусство пытаются уже много лет. И хотя про «понимание» говорить рано, некоторые задачи, ранее доступные лишь искусствоведу, они решают неплохо! Пример — датировка живописи. Рассказываем про систему, сделанную студентами МИСиС, которая может датировать картины — причем не только всем известные «Звездную ночь» или «Мона Лизу», но и полотна неизвестных художников. Кстати, эту модель может протестировать любой желающий!
Борьба угнетенных людей за свои права на улицах городов — явление, через которое проходили и проходят многие страны. Движение Black Lives Matter вновь обострило борьбу чернокожего населения за свои права в США, но ведется эта борьба давно — и привлекает внимание историков. Изучаем корни сложных расовых взаимоотношений в нью-йоркском Гарлеме через GIS-систему Digital Harlem
Анализ маршрутов путешествий английских литераторов XVIII века средствами современной геоинформатики.
Смертность от сердечно-сосудистых болезней можно предсказать с помощью лингвистического анализа сообщений в Twitter.
Изучаем старые карты России в современном веб-сервисе с геопривязкой — и испытываем эстетический оргазм.
Французские ученые любят пообедать, их русские коллеги жертвуют работе воскресенье, а Москва иногда все-таки спит. Но Новосибирск спит больше.
Интерактивная карта для планирования бюджетных путешествий по Европе первых веков нашей эры. Как думаете, сколько займет Евротур на ослах?
Вы могли уже встречать термин N-грамма. Если вас пугало или вы хотели получше разобраться, что это, то этот пост для вас.
Как анализ социальных сетей Гамлета и Наташи Ростовой помогает филологам проникать в структуру произведения и делать открытия.
