Однако наивно полагать, что можно решить социальные проблемы при помощи одних лишь данных. Это я поняла, когда при помощи больших данных пыталась наладить работу местных общеобразовательных школ. Я потерпела неудачу: она связана с причинами, по которым современная технократическая американская система стандартизированных тестов никогда не заработает.
Однажды, когда мой сын был в первом классе, я, помогая ему с домашним заданием, столкнулась с проблемой.
– Мне нужно выписать природные ресурсы, – он мне сказал.
– Воздух, вода, нефть, газ, уголь, – ответила я.
– Я уже записал воздух и воду, – отозвался он. – Нефть, газ и уголь – это не природные ресурсы.
– Конечно, природные, – я возразила. – Они не возобновляемые, но все же природные ресурсы.
– Но их нет в списке, который учитель дал нам на уроке.
Быть родителем – значит иногда быть неготовым к ситуации, но в тот момент я столкнулась с настоящей эпистемологической дилеммой. Моя собственная эрудиция (и интернет) подсказывали, что вопрос предполагает множество «верных» ответов. Но только один из них позволит моему сыну получить наивысшую оценку за домашнее задание.
Я взглянула в рабочую тетрадь. На странице были изображены корова и зонт.
– Корова – это не природный ресурс, – произнесла я.
– Животные – это природный ресурс, – он ответил.
– Но коровы – часть природы, но не природный ресурс.
– Но учительница сказала, что животные тоже.
– А про зонтик ничего не было сказано?
– Я думаю, что зонтик обозначает воду. Я уже записал.
– Давай проверим в учебнике, – я чувствовала подступающее раздражение. – Если есть рабочая тетрадь, то найдется и учебник.
– Учебника нет, – ответил он.
– Ну, конечно, есть, – возразила я.
– Нам нельзя брать их домой, они только для работы в классе.
– Я помню, что учительница говорила, что есть онлайн-версии учебников. Она дала тебе адрес сайта или пароль?
– Нет.
Следующий час я провела в попытках войти на сайт, где можно было скачать учебник, а также в поисках его пиратской версии. Удача мне не улыбнулась.
Я знала, что стандартизированные тесты начнут давать в третьем классе. Однако если домашнее задание для первоклассника настолько сбивало с толку, то я не представляю, как он – или любой другой ребенок – должен будет сдавать эти тесты.
Поскольку я имела опыт общения с хакерами – людьми, которые, чтобы повеселиться, пишут программы для взлома государственных сайтов, – я, основываясь на опыте преподавания курса подготовки к академическим тестам (SAT), решила попробовать придумать алгоритм сдачи школьного теста. Строго говоря, я пыталась перехитрить актуальную тогда Пенсильванскую систему проверки для третьеклассников
[35]. И вместе с командой профессиональных разработчиков создала программу с использованием ИИ для анализа доступных данных.
За последние несколько лет ИИ стал ценным для журналистов инструментом, в том числе потому, что автоматизированное составление статей помогло им эффективнее работать с повседневными новостями спорта и бизнеса. Машинное обучение помогает интерпретировать массивы данных, в результате на свет появились такие приложения для анализа документов, как Overview Project и DocumentCloud. Меня же интересовало третье расширение ИИ в рамках журналистики, помогающее обнаруживать истории: экспертные системы. Как было задумано первоначально, экспертная система будет действовать как человек-эксперт, сидящий в коробке, выдающей советы. К сожалению, это не сработало. Мышление и экспертное знание – категории до того сложные, что их попросту невозможно превратить в автоматизированные процедуры, совершаемые двоичными счетными машинами (которыми в конечном счете и являются современные компьютеры). Я предполагала, что концепт экспертной системы можно модифицировать для конкретного социального пространства таким образом, чтобы журналисты могли легко и эффективно обнаруживать прецеденты в огромных массивах данных.
Я спроектировала и написала софт, способный выполнять необходимый анализ данных. Я поговорила с учителями. Я поговорила с учениками. Я была в школах и сидела на встречах Комиссии по школьной реформе. Спустя шесть месяцев я поняла, что тест можно пройти. Но не благодаря хитрому алгоритму, а благодаря невероятно нетехнологичной практике: чтению книг, содержащих ответы.
Филадельфия – восьмой по количеству учащихся регион в стране, а ученики общеобразовательных школ невероятно бедны: в 2013 г. 79 % из них могли себе позволить обедать либо бесплатно, либо по сниженной цене. Лишь 64 % оканчивали школу, и меньше чем половине удалось пройти тестирование PSSA в 2013 г.
Если проблема существует в школах Филадельфии, значит, она есть и в других районах по всей стране. Одной из явных проблем, наблюдаемых в округах Нью-Йорка, Вашингтона, Чикаго, Лос-Анджелеса и других крупных городов, является то, что школы не могут себе позволить покупать учебники. В аккаунте школьного округа Филадельфии в Twitter однажды появился пост с фотографией бывшего мэра Майкла Наттера, раздающего 2000 книг, пожертвованных ученикам начальной школы. Но, к сожалению, знакомство детей с классической литературой не поможет им писать тесты с высокими результатами.
Все потому, что тесты не основываются на программе общеобразовательной подготовки. Я выяснила, что вопросы опираются на весьма конкретные знания, содержащиеся в конкретных учебниках – учебниках, созданных авторами тестирования.
Все это оказывается тесно связано с экономической стороной тестирования. По всей стране разработкой тестов занимаются лишь три компании: CTB/McGraw-Hill, Houghton Mifflin Harcourt (HMH) и Pearson. Они создают тесты и системы их оценки, а также выпускают учебники, по которым школьникам следует готовиться. Согласно материалам в прессе, HMH занимает 38 % рынка, а в 2013 г. прибыль компании составила $1,38 млрд.
В том же году штат Пенсильвания заключил многомиллионный контракт с компанией Data Recognition Corporation (DRC) для оценки тестов PSSA. Как оказалось, DRC сотрудничала с McGraw-Hill в рамках федерального контракта, по которому консорциуму следовало разрабатывать и оценивать тесты для всей страны. Тем временем McGraw-Hill также писала учебники и разрабатывала программы, которые школы покупали, чтобы подготовить детей к тестам. Например, «Математика на каждый день» (Everyday Math), брендированная программа, по которой учатся пятиклассники в большинстве пенсильванских школ, выпущена как раз McGraw-Hill.
Иначе говоря, учитель, который хочет подготовить учеников к тестам, должен учить их по учебнику одного из трех издательств. И, если посмотреть на содержание учебников и вопросы в тестах, окажется, что ответы на большинство вопросов действительно есть – это заметит даже третьеклассник. В 2012 г. издательство Pearson пережило серьезный скандал: выяснилось, что один из абзацев в тесте был полностью скопирован из учебника, изданного ими.
