12 интересных веб-экспериментов


Оглавление (нажмите, чтобы открыть):

Занимательные опыты и эксперименты в домашних условиях

Многие из представленных опытов можно проводить в домашних условиях. Это касается как простых химических опытов, так и занимательных физических экспериментов. Проводя опыты дома, не забудьте о мерах предосторожности, особенно если за опытами будут наблюдать дети.

Все эксперименты носят обучающий характер, несмотря на использовании в них, зачастую, простых обыденных предметов, например, опыты с атмосферным давлением, холодной и горячей водой, газировкой и т.д. Ведь они не перестают быть научными и при этом интересными, занимательными и прикольными.

Подборка самых интересных опытов и лайфхаков, возможных в домашних условиях (17 фото)

Не так давно мы выпустили два тома детской книги «Простая наука». Она создана для детей от 5 до 12 лет и помогает привить юным читателям любовь к науке, показывает, что наука – это просто и интересно! Книга «Простая наука» — это уникальный сборник самых интересных опытов, которые дети непременно смогут повторить дома!
В продолжении поста — примеры опытов и лайфаков, которые будут интересны не только детям, но и их родителям. В комментариях пишите свои впечатления! Если подборка понравится, выложим еще! 😉

Вот характеристики наших книг:
• формат А4;
• 84 страницы;
• твёрдый переплёт;
• 4 раздела;
• 32 опыта;
• описания к опытам;
• видео ко всем опытам (DVD-диск).

В самом начале книги мы поместили небольшую инструкцию, как пользоваться «Простой наукой»:

Что касается DVD, то каждый опыт снят и переработан именно для детской зрительской аудитории.
Вот пример такого ролика:

Начнём, пожалуй, с самого вкусного опыта! Этот «лайфхак» не только для детей, но и для тех, кто желает приготовить оригинальный завтрак – такое блюдо подарит настроение на весь день! 😉

Опыт «лава-лампа» – просто и красиво!

Во втором томе мы решили добавить информацию, где можно купить те или иные ингредиенты:

Как насчет огнеупорного шарика?

Обратите внимание на предупреждение! Опасные опыты (с огнём или острыми предметами) обязательно имеют предостережение!

А вы знали, что снег можно сделать из подгузников? Этот опыт особенно актуально проводить в канун новогодних праздников (очень в тему) или в период летнего зноя (весьма оригинально!).

Опыты «разбавлены» интересными фактами, каждая подборка которых объединена общей темой

Очень красочный опыт, наглядно показывающий разницу в плотности жидкостей:

Уверен, вы уже слышали, что воздушный шарик можно надуть с помощью пищевой соды:

Гвозди в равновесии – рай для перфекционистов! 😉

Очень зрелищный опыт! Проводить его следует с осторожностью, только в присутствии взрослых!

В заключение содержание книг:

Эти и многие опыты вошли в цикл передач детского телевизионного канала «Карусель», часть представлена на сайте канала. Словом, опыты из книги уже получили признание на федеральном детском телеканале.

Поклонники гаджетов могут скачать приложение «Простая наука» для iPad
Оно, кстати, сразу после анонса заняло лидирующие позиции в своей категории «Образование».

Химические опыты для детей

Химические опыты для детей должны не только вызывать интерес к наблюдаемому явлению, но и послужить отправной точкой к раскрытию тайн природы, привитию интереса к предмету.

Наш сайт по химии предлагает вам подборку простых занимательных химических опытов для детей, которые можно легко провести в домашних условиях. С помощью этих экспериментов можно легко обучить ребёнка основам химии. Большинство занимательных химических опытов совершенно безопасны, но в тоже время очень познавательны и красивы. В случае, если химические эксперименты для детей требуют соблюдения правил обращения с реактивами, это обязательно будет указано в описании опыта. Химические опыты для детей, если требуется, снабжены аннотацией, которые раскрывают сущность эксперимента и которые помогут вам ответить на вопрос любознательного малыша: «Почему так происходит?». Ребенок обязательно должен понять наблюдаемые эксперименты для детей, так как только при этом можно добиться глубоких, а не формальных знаний.

Итак, вперед! Невероятный мир занимательной химии ждет вас!

Подавляющее большинство представленных экспериментов проводятся с реактивами, которые или уже имеются в домашнем хозяйстве или их можно легко приобрести. Читайте наш мини-путеводитель Где взять реактивы для опытов.

Светящийся цветок

Сейчас мы поделимся тремя способами, как сделать настоящий светящийся цветок. Нам обязательно понадобится лампа черного света, она же лампа Вуда, она же лампа ультрафиолетового света.Читать далее

Волшебные бусинки

Когда вы помещаете в жидкость твердый предмет, такой как бусинка или камень, он либо плавает наверху, либо опускается на дно. В нашем сегодняшнем опыте бусинкиЧитать далее

Влияние качества воды на образование мыльной пены

Водопроводная вода очень часто бывает слишком жесткой, т.е. содержит минералы, которые могут мешать очищающей способности моющих средств. Именно поэтому во всем мире достаточно популярны умягчителиЧитать далее

Кола и молоко

Химические опыты могут быть совершенно безопасными, но очень познавательными. Предлагаем вашему вниманию именно такой эксперимент. Главные действующие лица: кола и молоко. Нам понадобятся только бутылка сЧитать далее

Снежинка из буры своими руками

Снежинка из буры — это химический опыт по выращиванию кристаллов, который безопасен и достаточно прост для детей. Стоит ли упоминать про то, что снежинки действительноЧитать далее

Зубная паста для слона

«Зубная паста для слона» — простой химический опыт, который очень нравится детям. В результате опыта мы получим огромное количество густой пены. Такой тип химических реакций называетсяЧитать далее

Горячий лед

С детства всем известно, что лед холодный, а горячий лед — нонсенс. Однако, температура льда запросто может быть выше привычного 0 оС. Опыты английского учёногоЧитать далее

Растворим ли школьный мел?

Множество людей, обучающихся в образовательных учреждениях, не задаются вопросом, растворим ли школьный мел. Некоторые считают его растворимым, некоторые сомневаются. Проверить, растворим ли школьный мел илиЧитать далее

Малахитовое яйцо


Представляем вашему вниманию очень простой, но незаслуженно забытый общественностью опыт по взаимодействию карбоната кальция и медного купороса. С помощью этой химической реакции мы изготовим малахитовоеЧитать далее

Свеча из мыла

В давние времена свечи изготавливали из стеарина, поэтому логично предположить, что раздобыв его, мы сможем изготовить свечку самостоятельно. Стеарин можно легко получить из всем известного хозяйственногоЧитать далее

Шипящие бомбочки для ванны

Отлично расслабиться, отдохнуть, привести тело и дух в порядок можно, если принять ванну с шипучкой. Бомбочки для ванны сравнительно недавно вошли в моду, но теЧитать далее

Опыты с лимоном

Оказывается лимон, к которому мы привыкли с детства является кладезью химических веществ, среди которых нас интересуют лимонен и лимонная кислота. С их помощью мы иЧитать далее

Снег из памперса

Снег жарким летом? Невозможно — скажете вы. А мы ответим, что зная химию все возможно. Причем добыть этот непременный зимний атрибут проще простого. Сегодня мыЧитать далее

Танцующие червячки

Сегодня мы попробуем провести очень простой химический опыт для детей. Называется он — Танцующие червячки. Опыт для детей танцующие червячки Для проведения опыта нам потребуютсяЧитать далее

Опыт с йодом и крахмалом

Предлагаем вашему вниманию очередной волшебный химический опыт с йодом и крахмалом, в котором прозрачная жидкость в считанные мгновения становится синей! Все ингредиенты для этого простогоЧитать далее

Химический опыт Светофор

Сегодня мы проведем занимательный и очень красивый химический опыт под названием Светофор. Этот эксперимент можно смело отнести к лучшим химическим фокусам для детей. Но дляЧитать далее

Где взять реактивы для опытов

В нашей стране множество мелких и крупных компаний, в интернете можно найти сайт по химии, которые продают реактивы. Но зачастую заказать можно только достаточную партию,Читать далее

Химические цветы

Химические цветы — замечательный фокус для детей. Идея химического опыта такова: бумажные цветы опрыскиваются различными «волшебными» растворами и от этого меняют свою окраску. Описание опыта Химические цветыЧитать далее

Лакмусовая бумага своими руками

«Лакмусовая бумага» — это нарицательное наименование для всех типов индикаторов в химии. Название это происходит от лакмуса — природного красящего вещества, которое было открыто однимЧитать далее

Зеленая яичница

В этой статье мы посмотрим как знание химии поможет приготовить необычное блюдо для детей. Сегодня у нас на завтрак зеленая яичница-глазунья! Казалось бы, что можетЧитать далее

Фараонова змея

Фараонова змея — это собирательное название химических реакций, результатом которых является многократное увеличение объема реактивов. Во время реакции результирующее вещество быстро увеличивается, при этом извиваясьЧитать далее

Как лопнуть шарик при помощи апельсина

Интересно, а что произойдет если соком из цедры апельсина брызнуть на надутый воздушный шарик? Невероятно, но он просто лопнет! Сейчас мы расскажем как лопнуть шарикЧитать далее

Лава лампа своими руками

Лавовая лампа была запатентована в 1965 англичанином Эдвардом Крэйвен Уолкером. Его лава лампа представляла стеклянную емкость, которая была наполнена жидкими парафином и маслом. Емкость подогреваласьЧитать далее

Как надуть шарик содой и уксусом

Что делать если нет гелия для надувания воздушных шариков, а нужно надуть много больших шаров в домашних условиях? Сейчас мы продемонстрируем очень простой, но эффектныйЧитать далее

Простые домашние химические фокусы для детей

Всем детям очень очень нравятся фокусы. Одни дети любят просто смотреть за тем, как кто-то выполняет фокусы, ну а другие стараются делать их сами. ФокусыЧитать далее

Светящаяся жидкость своими руками

Некоторое время назад в интернете появилось видео, в котором рассказывалось, как создать светящуюся воду. В комментариях горячо спорили: одни утверждали, что это возможно, другие категорическиЧитать далее

Пластилин своими руками

Самодельный пластилин гораздо интересней и приятней по своим свойствам, чем покупной. Он не такой липучий, более мягкий и податливый, цвета хорошо смешиваются между собой. КЧитать далее

Съедобное сахарное стекло

Съедобное сахарное стекло — один из вариантов шуточного представления, с помощью него легко разыграть друзей. При известной сноровке из съедобного стекла можно изготовить вполне правдоподобноЧитать далее

Хлорофилл

Хлорофилл — это пигмент, который придает листьям растений зелёный цвет. Хлорофилл обеспечивает растениям процесс фотосинтеза, процесс при котором с помощью солнечного света в растении происходятЧитать далее

Раствор для мыльных пузырей своими руками

И дети и взрослые любят мыльные пузыри. Конечно можно легко купить готовый раствор для мыльных пузырей в детском магазине, но, согласитесь, куда приятнее «похимичить» вместе с малышом и тутЧитать далее

Как сделать лизуна в домашних условиях


Помните в детстве у вас была довольно странная игрушка лизун? Сейчас купить его довольно трудно, поэтому в этой статье расскажем как сделать лизуна в домашних условиях,Читать далее

Превращаем железный гвоздь в медный

На простом химическом опыте рассмотрим так называемый процесс меднения металлических изделий, проще говоря медь обладает способностью осаждаться на металлической поверхности. Для проведения эксперимента потребуется: четвертьЧитать далее

Химический опыт для детей Резиновое яйцо

Предлагаем вашему вниманию очень простой и весьма познавательный химический опыт «Резиновое яйцо». Для проведения эксперимента понадобятся: варёное куриное яйцо, стеклянная емкость, уксус. Помещаем варёное яйцоЧитать далее

Химический опыт Дым из пальцев

Очень эффектный химический опыт. Можно нагнать такой мистики с его помощью… И, возможно, знание этого эксперимента поможет в оформлении детских любительских спектаклей и представлений. ВедьЧитать далее

Химический опыт Несгораемая купюра

Несгораемая купюра — очень простой и эффектный химический опыт. Для проведения эксперимента нам понадобится: соль, водно-спиртовой раствор (не менее 50%), щипчики. Добавляем немного соли сЧитать далее

Хрустальное яйцо в домашних условиях

Предлагаем вашему вниманию ещё один простой и красивый химический опыт по выращиванию кристаллов в домашних условиях. На этот раз с помощью яичной скорлупы. Называется он «ХрустальноеЧитать далее

Опыт на смешение жидкостей

На примере этого опыта покажем ребёнку, что разные жидкости имеют различную плотность и что из этого может выйти. Нам понадобится: 1/4 стакана подкрашенной воды, 1/4Читать далее

Цветной взрыв в молоке

Какой ребенок не верит в волшебство? А какой сам хоть раз не хотел стать волшебником? Предложите своим деткам провести вот такой занимательный химический опыт сЧитать далее

Химический опыт Вулкан

Произвести впечатление на трехлетнего ребенка можно, добавив обычный уксус в пищевую соду. Насыпьте побольше соды (где-то 2 столовых ложки) в небольшой сосуд и лейте наЧитать далее

Невидимые чернила

Невидимые чернила представляют собой раствор для письма на бумаге. Изначально надпись нельзя увидеть, но до тех пор пока к чернилам не будет применено какое-то химическоеЧитать далее

Светящийся помидор

Попробуйте сделать очень простой, но в тоже время очень эффектный химический опыт «светящийся помидор». Полученный в результате эксперимента светящийся томат категорически нельзя употреблять в пищу, поэтомуЧитать далее

Как вырастить кристалл

Выращивание кристаллов в домашних условиях — очень длительный, трудоемкий и кропотливый процесс, но он очень увлекательный и однозначно стоящий затраченного времени. Этот опыт очень нравится детям,Читать далее

Топ 10 демонстраций веб-экспериментов JavaScript и HTML5

В Интернете существует очень классный сайт Chrome Experiments, который создан для демонстрации инновационных веб-экспериментов на основе открытых стандартов, таких как JavaScript и HTML5. Если Вы ещё не видели Chrome Experiments, то рекомендую потратить на посещение нескольких минут и насладиться самыми крутыми эффектами в области разработок JavaScript и HTML5. Всё это проекты пользователей, которые наглядно демонстрируют, что можно сделать с помощью технологий на основе стандартов с открытым исходным кодом.

Предлагаю Вашему вниманию Топ 10 лучших демонстраций веб-экспериментов JavaScript и HTML5, которые выделяются среди тысячи других проектов пользователей на Chrome Experiments.

Среди многих оригинальных проектов я собрал самые интересные. Здесь есть эксперименты, связанные с музыкой, образованием, наукой, игры и многое другое. Для запуска некоторых из них понадобиться скачать и установить Google Chrome.

3D Периодическая таблица

Визуальное и интерактивное обучение является лучшим способом что-либо узнать. 3D периодическая таблица поможет Вам узнать больше об элементах периодической таблицы Менделеева Д.И. в интерактивном режиме. Вы можете щелкнуть на любом элементе, и он покажет информацию о себе: плотность, атомная масса, атомный номер и другое. Для того, чтобы изучить его, нажмите на кнопку Explore Atom и увидите модель выбранного элемента в 3D.

Короткометражка о вашем местонахождении

Wilderness Downtown — уникальный короткий фильм, созданный разработчиками Google Creative Lab. Идея фильма и отличие от других короткометражек в том, что Wilderness Downtown показывает видео в нескольких окнах сразу и основан на картах Google, просмотре улиц и Google Maps API. Введите в поисковой строке любое местоположение и наслаждайтесь демонстрацией сцен вокруг этого места сверху, в панорамном режиме и круговом движении в сопровождении хорошего музыкального фона. Это стоит попробовать. Но советую выбирать места с доступностью 3D моделей на картах Google.

Браузерный мячик

Марк Махони (Mark Mahoney) создал Browser Ball. Суть проекта в том, что бы показать всю мощь JavaScript. Браузерный мячик позволяет открывать несколько окон браузера и перетащить пляжный мячик из одного окна в другое. При этом мячик может и сам перекатиться из одного окна в другое.

Музыкальный эксперимент

TypaTone является музыкальным экспериментом. Он показывает клавиатуру, правда только на английском языке, которая позволяет набрать текст. Каждая буква имеет свою уникальную тональность и в совокупности набранные буквы создают мелодию. Для набора текста Вы можете использовать и обычную клавиатуру Вашего устройства.

Можно сначала ввести весь текст, а затем начать воспроизведение музыки. Кроме того получившимся музыкальным фрагментом можно поделиться через Интернет с друзьями.

Нарисуй квадрат

Проект Нарисуй квадрат может проверить, насколько хорошо Вы можете определить размеры в браузере. Попробуйте нарисовать прямоугольник заданных размеров и сравнить с оригиналом. Если Вы не профессионал веб графики, то вряд ли у Вас получится начертить несколько фигур подряд со 100%-ной точностью.

Голосовая игра

Игра Spell Up от Google является одним из лучших проектов на Chrome Experiments, которая позволяет узнать написание слов английского языка в интерактивном режиме. Она имеет три уровня сложности. Чтобы играть, необходимо использовать микрофон. С его помощью Вы называете нужные буквы, которые показываются на экране, чтобы составить правильно всё слово целиком правильно. За правильно названные буквы начисляются очки.

Игра имеет словарь слов, который подскажет значение слова и может перевести его на любой язык. Она также просит Вас произнести слово, чтобы проверить его. Если Ваш ребенок хочет научиться английскому языку, рекомендую попробовать эту игру.

Endurance из Интерстеллар

Надеюсь, что Вы смотрели фильм Интерстеллар 2014 года? Если нет, то Вы многое потеряли.

На всём протяжении фильма присутствует космическая станция Endurance, о техническом оснащении которого можно поговорить отдельно. Если Вы не равнодушны к космическим кораблям, и хотите посетить Endurance, чтобы всё разузнать самому, то этот проект для Вас. Этот проект был создан коллективно несколькими кампаниями (AvatarLabs, Xymatic и Warner Bros). Вы сможете исследовать корабль снаружи, виртуально прогуляться по его внутренним палубам и узнать даже больше, чем показано в фильме.


Надувные шары

Bouncy Balls или надувные шары ещё один потрясающий эксперимент, который к тому же является одним из самых забавных. Нажатия левой мыши позволяют подбросить шары вверх. Физика движения каждого шарика настолько хороша, что сначала даже не верится что это происходит в браузере. Подбрасывать можно не только шары, но и смайлики, пузыри прочее. Можно задать количество предметов и высоту прыжков. А подбрасывать можно не только мышкой, но и громкой эмоцией вроде «БУМ», если задействовать микрофон.

Мастер Йода рекомендует:  Как IT-специалисту зарабатывать 2 миллиона долларов

Планета Судоку

Планета Sudoku позволяет играть в судоку — всемирно известную логическую головоломку. Игра позволяет выбрать размер поля, может изменить цвет фона на тот, который Вы захотите. В ходе игры показывается количество ходов и счёт.

Океан слов

Океан слов — детская игра, которая показывает слова и буквы на английском языке, которые разбросаны в океане. Вы должны управляя китом собрать все буквы и встречающиеся бонусы, чтобы собрать слово и заработать очки. Игра начнётся заново, если Вы допускаете ошибки.

Это действительно интересный способ для ребёнка выучить слова и варианты их написания. Советую попробовать.

Вот некоторые из самых лучших проектов на Chrome Experiments, которые мне удалось отыскать. Если Вы знаете похожие экспериментальные проекты, которые поражают техническими новшествами веб-разработок, то напишите об этом в комментариях.

Опыты для детей: занимательная наука в домашних условиях

Эксперимент: почему утонул очищенный лимон, куда летит пакетик чая и как перевернуть стакан с водой, не пролив ни капли

10 ноября во многих странах отмечают Всемирный день науки. Популяризацией научных знаний занимались Михаил Ломоносов, Яков Перельман, Альфред Брем, Айзек Азимов, Стивен Хокинг. Каждый из них стремился показать, насколько важно изучать законы природы и окружающий мир. Родители могут объяснить явления природы ребенку на простых примерах: что роса на траве появляется из-за конденсации, а яблоко не подпрыгивает в воздух, а падает на землю из-за силы притяжения. А еще лучше вместе сделать физические опыты. Мы предлагаем 6 несложных и эффектных экспериментов, которые можно провести в домашних условиях.

Почему лимон не тонет

Неньютоновская жидкость

Чудо-ракета из чайного пакета

Спица в шарике

Вода в перевернутом стакане

Хрустальное яйцо

Полезность:
Интересность:

Еще по теме «Опыты для школьников»:

Интересные опыты и эксперименты вместе с детьми

Детские опыты по химии. Для наших домашних опытов понадобятся еще шишки из леса и йод из аптечки — и опыты и эксперименты можно начинать! Опыты над животными. Домашние опыты для детей. Опыты и эксперименты в домашних условиях : занимательная физика.

Книги по биологии для начальной школы

Опыты для детей: занимательная наука в домашних условиях. Дистанционные школы — математика, информатика: нужет совет. У кого есть опыт, поделитесь, пожалуйста!

Посоветуйте «научное шоу для детей»

Опыты для детей в домашних условиях : эксперименты по химии, занимательная наука. У детей в школе — на основании того же самого И не думаю, что такие разговоры с родителями дали бы Опыты с детьми в домашних условиях. Занимательные эксперименты с детьми.

занимательная лексикология

Опыты для детей : занимательная наука в домашних условиях. Научные опыты с детьми : 5 домашних химических экспериментов. И школьники, и их родители, кажется, уже порядком выдохлись, а об интересе к школьной учебе и речи не идет.

Проект 2 класс

Опыты для детей : занимательная наука в домашних условиях. Проект «Умная Москва» — это научные шоу для детей от 7 до 14 лет. Группы делятся по возрасту — тех, кто только пошел в школу или для тех, кто постарше. За 2 часа дети проходят несколько зон, в каждой из которых.

занимательная биология

был ли у вас набор юного химика?

у меня был, набор отличный, все опыты описаны, с формулами и пр. очень полезно для химия, НО! был безбожно переведён моей красоткой и её подругами на безссмысленную ерунду, когда.

Микробиология для школьника

Микробиология для школьника. Общее развитие. Образование детей. Про кружки можно еще по ссылке посмотреть, но, ИМХО, там для школьников постарше.

Энцефабол

Кто отправлял детей в Англию на каникулы?

У меня отрицательный опыт поездки в английскую международную школу в Девоншире для А положительный опыт поездки в летний лагерь лондонской частной школы, где не было ни.

Опять я про «Юный химик». Решили все-так

Научные опыты с детьми : 5 домашних химических экспериментов. Ребенок хочет заниматься химией, как наукой. Химические опыты в домашних условиях. Открываем новый набор на научные курсы в «ИнноПарке»! для юных химиков ?

Химия для младших школьников

Химия для младших школьников. Образование, развитие. Ребенок от 7 до 10. Химия для младших школьников. Пчеле Майе, Марии Д. и интересующимся.

Идеи проектов для младших школьников

«Но для такого эксперимента нужно Домашние опыты от MEL Chemistry: химические опыты и Да и при вузах есть исследовательские разные проекты для школьников. а проект может.


Обжигает ли бордоская смесь листья?

Опыты для детей : занимательная наука в домашних условиях. Изготовить жидкость дома очень просто: для этого нужен крахмал (лучше кукурузный, но подойдет и картофельный) и обычная вода. Ребенок и комнатные растения. Готовить бордосскую жидкость следует.

химия, физика для 6-леток

Опыты для детей : занимательная наука в домашних условиях. У нас в школе такое было, только без выезда, приглашали ученого, он показывал интересные эффектные химические и физические опыты, даже Научные опыты с детьми : 5 домашних химических экспериментов.

Эксперименты 🙂

Занимательные опыты и эксперименты для дошкольников» О.Дыбина, Н.рахманова, В.Щетинина. Теперь, год проведя Заниматику — опыты и занимательные задачи — могу дать кучу советов. Попробуйте посмотреть — сколько воды в твердом теле — возьмите яблоко или.

эксперименты с апельсиновым соком

Опыты для детей : занимательная наука в домашних условиях. Занимательные эксперименты с детьми. Популярная наука. Ребенку о явлениях природы. Мой с 9 лет читает детские химические энциклопедии (Аванта, еще парочка каких-то, Л. Ю. Аликберова.

Маше Д и всем про опыты с зеркалами

Маша и все, кому интересны опыты хочу процитировать кусок из одной книги, где рассказывается об экспериментах взрослого и ребенка с зеркалами. Опыты для детей : занимательная наука в домашних условиях.

Занимательная логика- книга

Купила на днях книгу А.Д.Гетмановой Занимательная логика для школьников часть 1 изд.ВЛАДОС Написана просто, увлекательно, с хорошими иллюстрациями.

Химические опыты дома

Раздел: (змея из таблетки норсульфазола химический опыт ). Химические опыты дома. Прочитала внизу о химии дома и решила добавить несколько домашних опытов.

Занимательные опыты, которые можно делать дома в закладки 19

Дети всегда стараются узнать что-то новое каждый день, и у них всегда много вопросов. Им можно объяснять некоторые явления, а можно наглядно показать, как работает та или иная вещь, тот или иной феномен. В этих экспериментах дети не только узнают что-то новое, но и научатся создавать разные поделки, с которыми далее смогут играть.

1. Опыты для детей: лимонный вулкан

– 2 лимона (на 1 вулкан)

– пищевые красители или акварельные краски

– средство для мытья посуды

– деревянная палочка или ложечка (при желании)

1. Срежьте нижнюю часть лимона, чтобы его можно было поставить на ровную поверхность.

2. С обратной стороны вырежьте кусок лимона, как показано на изображении.

* Можно отрезать пол лимона и сделать открытый вулкан.

3. Возьмите второй лимон, разрежьте его наполовину и выдавите из него сок в чашку. Это будет резервный лимонный сок.

4. Поставьте первый лимон (с вырезанной частью) на поднос и ложечкой “помните” лимон внутри, чтобы выдавить немного сока. Важно, чтобы сок был внутри лимона.

5. Добавьте внутрь лимона пищевой краситель или акварель, но не размешивайте.

6. Налейте внутрь лимона средство для мытья посуды.

7. Добавьте в лимон полную ложку пищевой соды. Начнется реакция. Палочкой или ложечкой можете размешивать все, что внутри лимона – вулкан начнется пениться.

8. Чтобы реакция продолжалась дольше, можете добавлять постепенно еще соды, красители, мыло и резервный лимонный сок.

2. Домашние опыты для детей: электрические угри из жевательных червяков

– 4-6 жевательных червяков

– 3 столовые ложки пищевой соды

– 1/2 ложки уксуса

– ножницы, кухонный или канцелярский нож.

1. Ножницами или ножом разрежьте вдоль (именно вдоль – это будет непросто, но наберитесь терпения) каждого червяка на 4 (или более) частей.

* Чем меньше кусочек, тем лучше.

* Если ножницы не хотят нормально резать, попробуйте промыть их водой с мылом.

2. В стакане размешайте воду и пищевую соду.

3. Добавьте в раствор воды и соды кусочки червяков и размешайте.

4. Оставьте червячков в растворе на 10-15 минут.

5. С помощью вилки переместите кусочки червяков на небольшую тарелку.

6. Налейте пол ложки уксуса в пустой стакан и начните по очереди класть в него червячков.

* Эксперимент можно повторить, если промыть червячков обычной водой. Спустя несколько попыток ваши червячки начнут растворяться, и тогда придется нарезать новую партию.


3. Опыты и эксперименты: радуга на бумаге или как свет отражается на ровной поверхности

– прозрачный лак для ногтей

– маленькие кусочки черной бумаги.

1. Добавьте в миску с водой 1-2 капли прозрачного лака для ногтей. Посмотрите, как лак расходится по воде.

2. Быстро (спустя 10 секунд) окуните кусок черной бумаги в миску. Выньте его и дайте высохнуть на бумажном полотенце.

3. После того, как бумага высохла (это происходит быстро) начните поворачивать бумагу и посмотрите на радугу, которая отображается на ней.

* Чтобы лучше увидеть радугу на бумаге, смотрите на нее под солнечными лучами.

4. Опыты в домашних условиях: дождевое облако в банке

Когда маленькие капли воды скапливаются в облаке, они становятся все тяжелее и тяжелее. В итоге они достигнут такого веса, что больше не смогут оставаться в воздухе и начнут падать на землю – так появляется дождь.

Это явление можно показать детям с помощью простых материалов.

– пена для бритья

1. Наполните банку водой.

2. Сверху нанесите пену для бритья – это будет облако.

3. Пусть ребенок начнет капать пищевой краситель на “облако”, пока не начнется “дождь” – капли красителя начнут падать на дно банки.

Во время эксперимента объясните данное явление ребенку.

5. Интересные опыты: салют в банке

– 4 пищевых красителя

1. Наполните банку на 3/4 теплой водой.

2. Возьмите миску и размешайте в ней 3-4 ложки масла и несколько капель пищевых красителей. В данном примере было использовано по 1 капле каждого их 4-х красителей – красный, желтый, синий и зеленый.

3. Вилкой размешайте красители и масло.

4. Аккуратно налейте смесь в банку с теплой водой.

5. Посмотрите, что произойдет – пищевой краситель начнет медленно опускаться через масло в воду, после чего каждая капля начнет рассеиваться и смешиваться с другими каплями.

* Пищевой краситель растворяется в воде, но не в масле, т.к. плотность масла меньше воды (поэтому оно и “плавает” на воде). Капля красителя тяжелее масла, поэтому она начнет погружаться, пока не дойдет до воды, где начнет рассеиваться и походить на небольшой фейерверк.

6. Интересные опыты: в олчок, в котором сливаются цвета

– вырезанное из бумаги колесо, раскрашенное в цвета радуги

– резинка или толстая нить

– шпажка или отвертка (чтобы сделать отверстия в бумажном колесе).

1. Выберите и распечатайте два шаблона, которые вы хотите использовать.

2. Возьмите кусок картона и с помощью клея-карандаша приклейте один шаблон к картону.

3. Вырежьте приклеенный круг из картона.

4. К обратной стороне картонного круга приклейте второй шаблон.

5. Шпажкой или отверткой сделайте два отверстия в круге.

6. Просуньте нить через отверстия и завяжите концы в узел.

Теперь можете крутить ваш волчок и смотреть, как сливаются цвета на кругах.

7. Опыты для детей в домашних условиях: медуза в банке

– небольшой прозрачный полиэтиленовый пакет

– прозрачная пластиковая бутылка

1. Положите полиэтиленовый пакет на ровную поверхность и разгладьте его.

2. Отрежьте дно и ручки пакета.

3. Разрежьте пакет вдоль справа и слева, чтобы у вас получились два листа из полиэтилена. Вам понадобится один лист.

4. Найдите центр полиэтиленового листа и сложите его как шарик, чтобы сделать голову медузы. Завяжите ниткой в области “шеи” медузы, но не слишком туго – вам нужно оставить небольшое отверстие, чтобы через него налить воду в голову медузы.

5. Голова есть, теперь перейдем к щупальцам. Сделайте надрезы в листе – от низа до головы. Вам нужно примерно 8-10 щупальцев.

6. Каждое щупальце разрежьте еще на 3-4 более мелкие детали.

7. Налейте немного воды в голову медузы, оставив место для воздуха, чтобы медуза могла “плавать” в бутылке.


8. Наполните бутылку водой и засуньте в нее вашу медузу.

9. Капните пару капель синего или зеленого пищевого красителя.

* Закройте плотно крышку, чтобы вода не выливалась.

* Пусть дети переворачивают бутылку, и смотрят, как в ней плавает медуза.

8. Химические опыты: магические кристаллы в стакане

– стеклянный стакан или миска

– 1 чашка соли Эпсома (сульфат магния) – используется в солях для ванн

– 1 чашка горячей воды

1. Насыпьте соль Эпсома в миску и добавьте горячей воды. Можете добавить в миску пару капель пищевого красителя.

2. В течение 1-2 минут размешивайте содержимое миски. Большая часть гранул соли должна раствориться.

3. Налейте раствор в стакан или бокал и поместите его в морозилку на 10-15 минут. Не волнуйтесь, раствор не настолько горяч, чтобы стакан треснул.

4. После морозилки переместите раствор в основную камеру холодильника, желательно на верхнюю полку и оставьте на ночь.

Рост кристаллов будет заметен лишь спустя несколько часов, но лучше переждать ночь.

Вот как выглядят кристаллы на следующий день. Помните, что кристаллы очень хрупки. Если дотронуться до них, они вероятнее всего сразу сломаются или рассыплются.

7 научных экспериментов для детей

Научные опыты — это полезно и очень увлекательно. Всё необходимое для демонстрации эффектных химических реакций и физических явлений найдётся в любом доме. В ваших руках самые простые предметы обретут волшебные свойства, а сами вы станете настоящим супергероем в глазах ребёнка.

1. Приручить Лизуна

Совсем скоро выходит ремейк «Охотников за привидениями», и это отличный повод пересмотреть старый фильм и изучить неньютоновские жидкости. Один из героев фильма, глуповатое привидение Лизун, — хороший образ для визуализации. Это персонаж, который очень любит кушать, а ещё он умеет проникать сквозь стены.

Нам понадобится:

  • картофель,
  • тоник.

Что делаем

Очень мелко (можно измельчить в комбайне) режем картофель и заливаем горячей водой. Через 10–15 минут слейте воду через сито в чистую миску и отставьте в сторону. На дне появится осадок — крахмал. Слейте воду, крахмал останется в миске. В принципе, вы уже получите неньютоновскую жидкость. С ней можно играть и наблюдать, как под руками она твердеет, а сама по себе становится жидкой. Ещё можно добавить пищевой краситель — для яркого цвета.

А теперь добавим немного магии.

Крахмал нужно высушить (оставить на пару дней). А затем добавить к нему тоник и сделать эдакое тесто, которое легко взять в руку. В ладонях оно будет сохранять свою консистенцию, а если вы остановитесь и перестанете его месить, начнёт растекаться.

Если включить ультрафиолетовую лампу, то вы и ваш ребёнок увидите, как тесто начнёт светиться. Это происходит из-за хинина, который содержится в тонике. Выглядит волшебно: сияющая субстанция, которая ведёт себя так, словно нарушает все законы физики.

2. Получить суперспособности

Герои комиксов сейчас особенно популярны, поэтому вашему ребёнку понравится чувствовать себя могущественным Магнето, который умеет управлять металлами.

Нам понадобится:

  • тонер для принтера,
  • магнит,
  • растительное масло.

Что делаем

С самого начала приготовьтесь к тому, что после проведения этого опыта вам потребуется много салфеток или тряпочек — будет довольно грязно.

В небольшую ёмкость насыпьте около 50 мл тонера для лазерных принтеров. Добавьте две столовые ложки растительного масла и очень хорошо перемешайте. Готово — у вас в руках жидкость, которая будет реагировать на магнит.

Можно приложить магнит к ёмкости и смотреть, как жидкость буквально прилипает к стенке, формируя забавный «ёжик». Будет ещё интереснее, если вы найдёте доску, на которую не жаль вылить немного чёрной смеси, и предложите ребёнку с помощью магнита поуправлять каплей тонера.

3. Превратить молоко в корову

Предложите ребёнку сделать жидкое твёрдым, не прибегая к заморозке. Это очень простой и впечатляющий опыт, правда, чтобы получить результат, придётся пару дней подождать. Зато какой эффект!

Нам понадобится:


  • стакан молока,
  • уксус.

Что делаем

Нагреваем стакан молока в микроволновой печи или на плите. Не кипятим. Затем в него нужно добавить столовую ложку уксуса. А теперь начинаем мешать. Активно двигаем ложкой в стакане, чтобы увидеть, как появляются белые сгустки. Это казеин — белок, который содержится в молоке.

Когда сгустков будет много, слейте смесь через сито. Всё, что останется в дуршлаге, нужно встряхнуть, а затем выложить на бумажное полотенце и немного просушить. Затем начните разминать материал руками. Он будет похож на тесто или глину. На этом этапе можно добавить пищевые красители или блёстки, чтобы сделать белую массу ярче и интереснее для малыша.

Предложите ребёнку слепить что-то из этого материала — фигурку животного (например, коровы) или какой-нибудь другой предмет. Но можно и просто выложить массу в пластиковую форму. Оставьте сушиться на день-два.

Когда масса высохнет, у вас получится фигурка из очень твёрдого гипоаллергенного материала. Такую «самодельную пластмассу» использовали до 1930-х годов. Из казеина делали украшения, фурнитуру, пуговицы.

4. Управлять змеями

Получение реакции уксуса и соды — чуть ли не самый скучный опыт, который можно представить. «Вулканы» и «шипучки» не будут интересны современным детям. Зато можно предложить ребёнку стать «повелителем змей» и показать, как же всё-таки реагируют кислота и щёлочь.

Нам понадобится:

  • упаковка желейных червячков,
  • сода,
  • уксус.

Что делаем

Берём два больших прозрачных стакана. В один наливаем воды и насыпаем соды. Перемешиваем. Открываем упаковку желейных червячков. Лучше разрезать каждого из них вдоль, сделать тоньше. Тогда опыт будет более зрелищным.

Тонких червячков нужно положить в смесь воды и соды и перемешать. Отставить в сторону на 5 минут.

В другой стакан наливаем уксус. А теперь добавляем в этот сосуд червячков, которые побывали в стакане с содой. Из-за соды на их поверхности будут видны пузыри. Значит, реакция идёт. Чем больше червячков вы добавите в стакан, тем больше газа выделится. И спустя какое-то время пузыри будут поднимать червячков к поверхности. Добавите больше соды — реакция будет активнее и червячки сами начнут вылезать из стакана. Круто!

5. Сделать голограмму как в «Звёздных войнах»

Конечно, в домашних условиях настоящую голограмму создать сложно. Но её подобие — вполне реально и даже не очень трудно. Вы научитесь использовать свойства света и превращать 2D-картинки в объёмные изображения.

Нам понадобится:

  • смартфон,
  • коробка от компакт-диска,
  • канцелярский нож,
  • скотч,
  • бумага,
  • карандаш.

Что делаем

На бумаге нужно начертить трапецию. Чертёж можно увидеть на фото: длина нижней стороны трапеции — 6 см, верхней — 1 см.

Аккуратно вырезайте трапецию из бумаги и доставайте коробку от CD. Нам нужна прозрачная её часть. Приложите выкройку к пластику и с помощью канцелярского ножа вырежьте из пластика трапецию. Повторите ещё три раза — нам понадобится четыре одинаковых прозрачных элемента.

Теперь их нужно склеить вместе с помощью скотча так, чтобы получилось подобие воронки или усечённой пирамиды.

Возьмите смартфон и запустите на нём одно из таких видео. Поставьте пластиковую пирамиду узкой частью вниз в центр экрана. Внутри вы увидите «голограмму».

Можно запустить видео с персонажами из «Звёздных войн» и, например, воссоздать известную запись принцессы Леи или же полюбоваться собственным миниатюрным BB-8.

6. Выйти сухим из воды

Построить замок из песка на берегу моря сможет каждый ребёнок. А как насчёт того, чтобы выстроить его под водой? Попутно вы сможете изучить понятие «гидрофобный».

Нам понадобится:

  • цветной песок для аквариумов (можно взять и обычный, но его нужно промыть и высушить),
  • гидрофобный спрей для обуви.


Что делаем

Аккуратно высыпаем песок на большую тарелку или противень. Наносим на него гидрофобный спрей. Делаем это очень тщательно: распыляем, перемешиваем, повторяем несколько раз. Задача простая — убедиться, что каждую песчинку обволакивает защитный слой.

Когда песок высохнет, соберите его в бутылку или пакет. Возьмите большую ёмкость для воды (например, банку с широким горлышком или аквариум). Покажите ребёнку, как «работает» гидрофобный песок. Если насыпать его тонкой струйкой в воду, он опустится на дно, но останется сухим. Это легко проверить: пусть малыш возьмёт немного песка со дна ёмкости. Как только песок поднимется из воды, он рассыплется в ладони.

7. Засекречивать информацию лучше, чем Джеймс Бонд

Писать секретные послания лимонным соком — прошлый век. Есть другой способ получить невидимые чернила, который к тому же позволяет узнать немного больше о реакции йода и крахмала.

Нам понадобится:

  • рис,
  • йод,
  • бумага,
  • кисть.

Что делаем

Сначала варим рис. Кашу можно будет съесть потом, а нам нужен отвар — в нём много крахмала. Опустите в него кисть и напишите на бумаге секретное послание, например «Я знаю, кто вчера съел всё печенье». Подождите, пока бумага высохнет. Крахмальные буквы будут невидимы. Чтобы расшифровать послание, нужно смочить другую кисть или ватный тампон в растворе йода и воды и провести ей по написанному. Из-за химической реакции на бумаге начнут проступать синие буквы. Вуаля!

Мастер Йода рекомендует:  21 ошибка программиста PHP

Семь эмпирических правил для экспериментов с веб-сайтами

Владельцы веб-порталов, от самых маленьких, до таких крупных, как Amazon, Facebook, Google, LinkedIn, Microsoft и Yahoo, пытаются улучшить свой сайты, оптимизируя различные метрики, начиная с количества повторных использований до проведенного у них времени и выручки. Нас привлекали к проведению тысячи экспериментов на Amazon, Booking.com, LinkedIn и Microsoft, и хотим поделиться семью эмпирическими правилами, которые мы вывели из этих экспериментов и их результатов. Мы верим, что эти правила широко применимы как при оптимизации веба, так и в ходе анализа за пределами контрольных экспериментов. Хотя бывают исключения.

Чтобы сделать эти правила более весомыми, мы приведём реальные примеры из нашей работы, причем большинство из них будут опубликованы впервые. Некоторые правила озвучивались и ранее (например, «Скорость имеет значение»), но мы дополнили их допущениями, которые можно использовать при проектировании экспериментов, и делимся дополнительными примерами, которые улучшили наше понимание того, где скорость особенно важна, а в каких областях веб-страниц она не критична.

Эта статья преследует две цели.

Первая: научить экспериментаторов правилам хорошего тона, которые помогут оптимизировать сайты.

Вторая: предоставить сообществу KDD новые темы для исследований применимости этих правил, их улучшения и наличия исключений.

Введение

Владельцы веб порталов от самых маленьких, до крупнейших гигантов пытаются улучшить свои сайты. Передовые компании используют для оценки изменений контрольные тесты (например, А/Б-тесты). Это делают Amazon [1], Ebay, Etsy [2], Facebook [3], Google [4], Groupon, Intuit [5], LinkedIn [6], Microsoft [7], Netflix [8], ShopDirect [9], Yahoo и Zynga [10].

Мы получили опыт оптимизации сайтов, работая со многими компаниями, в том числе Amazon, Booking.com, LinkedIn и Microsoft. К примеру, Bing и LinkedIn проводят сотни параллельных экспериментов в каждый момент времени [6; 11]. Благодаря разнообразию и многочисленности экспериментов, в которых мы принимали участие, сложились эмпирические правила, о которых мы здесь расскажем. Они подтверждены реальными проектами, но из любого правила бывают исключения (о них мы тоже расскажем). Например, «правило 72-ух» — хороший пример полезного эмпирического правила в финансовой сфере. Оно утверждает, что необходимо умножить годовой процент роста на 72, чтобы примерно определить, через сколько лет вы удвоите свои инвестиции. В обычных ситуациях правило очень полезное (когда процентная ставка колеблется между 4 и 12 %), но в других сферах оно не работает.

Так как эти правила были сформулированы по результатам контрольных экспериментов, то они хорошо применимы для оптимизации сайтов и простого анализа, даже если на сайтах не проводят контрольные эксперименты (хотя в этом случае не получится точно оценить влияние сделанных изменений).

Что вы найдёте в этой статье:

  1. Полезные правила для экспериментов над веб-сайтами. Они ещё развиваются, и нужно дополнительно оценить широту их применения и выяснить наличие новых исключений из этих правил. Важность использования контрольных экспериментов обсуждалось в статье «Online Controlled Experiments at Large Scale»[11]
  2. Усовершенствование предыдущих правил. Наблюдения вроде «скорость имеет значение» уже озвучивались другими авторами [12;13] и нами [14]. Но мы сделали некоторые допущения при проектировании эксперимента, и расскажем об исследованиях, которые демонстрируют, что в одних областях страницы скорость особенно критична, а в других — нет. Еще мы усовершенствовали старое правило «тысячи пользователей», отвечающее на вопрос, сколько нужно человек для проведения контрольного эксперимента.
  3. Реальные примеры контрольных экспериментов, публикуются впервые. В Amazon, Bing и LinkedIn контрольные эксперименты используются как часть процесса разработки [7;11]. Многие компании, которые до сих пор не используют контрольные эксперименты, могут извлечь большую пользу из дополнительных примеров работы с изменениями при введении новых парадигм разработки [7;15]. Компании, которые уже используют контрольные эксперименты, извлекут пользу из описанных инсайтов.

Контрольные эксперименты, данные и процесс извлечения знания из данных

Мы обсудим здесь контрольные online-эксперименты, в которых пользователи делятся на группы случайным образом (например, для показа различных вариантов сайта). При этом деление выполняется на постоянной основе, то есть каждый пользователь будет иметь одинаковый опыт на протяжении всего эксперимента (ему всегда будут показывать одну и ту же версию сайта). Взаимодействие пользователя с сайтом (клики, просмотры страницы и т.п.) фиксируется, и на его основе вычисляются ключевые метрики (CTR, количество сессий на пользователя, выручка с пользователя). Проводятся статистические тесты для анализа посчитанных метрик. И если разница между метриками контрольной группы (которая видела старую версию сайта) и экспериментальной (которая видела новую версию) группы статистически значима, то мы, с высокой вероятностью, можем говорить и том, что сделанные изменения повлияют на метрики наблюдаемым в эксперименте образом. Подробнее рассказывается в «Controlled experiments on the web: survey and practical guide» [16].

Мы участвовали в проведении множества экспериментов, чьи результаты были некорректными, и потратили много времени и усилий, чтобы понять причины и найти способы исправления. Многие подводные камни описаны в статьях [17] и [18]. Мы хотим осветить некоторые вопросы о данных, которые используются в проведение контрольных онлайн экспериментах, и о процессе получения знаний из этих данных:

  1. Источник данных — это реальные сайты, о которых мы говорили выше. Здесь не будет никаких искусственно сгенерированной информации. Все примеры основаны на реальном пользовательском взаимодействии, а метрики вычислены после удаления ботов [16].
  2. Группы пользователей в примерах взяты случайно из равномерного распределения целевой аудитории (т.е. пользователей, которые, например, должны кликнуть по ссылке, чтобы увидеть изучаемые изменения) [16]. Способ идентификации пользователя зависит от сайта: если пользователь не залогинен, используются Cookies, а если он вошел в систему, то используется его логин.
  3. Размеры групп пользователей, после очистки от ботов, колеблются от сотен тысяч до миллионов (точные значения указаны в примерах). В большинстве экспериментов, это необходимо для того, чтобы незначительные отличия в метриках имели высокую статистическую значимость.
  4. Отмеченные результаты были статистически значимыми при p-value

, если мы имеем предварительную вероятность успеха равную ⅓ (как мы говорили в [7], это среднее значение среди экспериментов в Microsoft), тогда апостериорная вероятно истинноположительного статистически значимого эксперимента равна 89 %. А если эксперимент — один из тех, про которые мы говорили в первом правиле, когда только 1 из 500 содержит прорывное решение, то вероятность падает до 3,1 %.

Забавным следствием из этого правила является тот факт, что держаться кого-то гораздо проще, чем развиваться в одиночку. Решения, принятые в компании, которая ориентируется на статистическую значимость, с большей вероятностью и у вас будут иметь положительный эффект. Например, если у нас уровень успешности экспериментов равен 10-20 %, то если мы возьмем тесты тех фичей, которые были успешными и выкатились на бой в других поисковых системах, то наш уровень успешности будет выше. Верно и обратное: другие поисковые системы тоже должны тестировать и вводить в бой вещи, которые реализовал Bing.

С опытом мы научились не доверять результатам, которые выглядят слишком хорошо, чтобы быть правдой. Люди по-разному реагируют на разные ситуации. Они подозревают неладное и изучают негативные результаты от экспериментов с их великой новой фичей, задают вопросы и погружаются глубже в поиск причин такого результата. Но если результат просто положительный, то подозрительность отступает и люди начинают праздновать, а не изучать глубже и не искать аномалии.

Когда результаты исключительно выдающиеся, мы привыкли следовать закону Twyman’а [27]: Все то выглядит интересным или отличающимся — обычно ложно.

Закон Twyman’а можно объяснить с помощью Байесовского вывода. По нашему опыту мы знали, что прорыв — редкое явление. Например, несколько экспериментов значимо улучшили нашу путеводную метрику, количество сессий на пользователя. Представим, что распределение, которое мы встречаем в экспериментах, нормальное с центром в точке 0 и со стандартным отклонением 0,25 %. Если эксперимент показал +2 % к значению ключевой метрики, тогда мы призываем закон Twyman’а и говорим, что это очень интересный результат, который находится на расстоянии 8 стандартных отклонений от среднего и имеет вероятность 10 -15 , исключая прочие факторы. Даже при наличии статистической значимости, предварительное ожидание настолько сильное, что мы отложим празднование успеха и углубимся в поиски причины ложноположительной ошибки второго типа. Закон Twyman’а часто применяется к доказательству того, что Р=NP . Сегодня ни один редактор сайта не обрадуется, если ему придет такое доказательство. Скорее всего, он сразу ответит шаблонным ответом: «в вашем доказательстве, что P = NP, допущена ошибка на странице Х».

Пример: Суррогатная метрика Office Online

Cook и его команда [17] рассказали об интересном эксперименте, который они провели c Microsoft Office Online. Команда тестировал новый дизайн страницы в котором сильно выделялась кнопка, призывающая заплатить за продукт. Ключевая метрика, которую хотела измерить команда: количество покупок на пользователя. Но отслеживание реальных покупок требовало модифицирования системы биллинга, а в то время это было сложно сделать. Тогда команда решила использовать метрику «клики, приводящие к покупке» и применять формулу (количество кликов) * конверсию = количество покупок , где берётся конверсия из кликов в покупку.

К их удивлению, в эксперименте количество кликов снизилось на 64 %. Такие шокирующие результаты заставили глубже проанализировать данные, и оказалось, что предположение о стабильной конверсии из клика в покупку является ложным. Экспериментальная страница, которая показывала стоимость продукта, привлекала меньше кликов, но те пользователи, которые по ней кликали, были лучше квалифицированы и имели гораздо большую конверсию из клика в покупку.

Пример: Больше кликов с медленной страницы

На страницу результатов поиска Bing добавили JavaScript-код. Этот скрипт обычно замедлял работу страницы, поэтому все ожидали увидеть небольшое негативное влияние на основные метрики вовлеченности, такие как количество кликов на пользователя. Но результаты показали обратное, кликов стало больше! [18] Несмотря на положительную динамику, мы последовали закону Twyman’а и разгадали загадку. Клик-трекеры основаны на веб-маяках, и некоторые браузеры не совершали вызов, если пользователь покидал страницу. [28] Таким образом, JavaScript повлиял на достоверность подсчета кликов.

Пример: Bing Edge

На протяжении нескольких месяцев в 2013-м Bing менял свою Content Delivery Network с Akamai на свою собственную Bing Edge. Переключение трафика на Bing Edge было совмещено со многими другими улучшениями. Несколько команд рапортовало, что они улучшили ключевые метрики: CTR главной страницы Bing повысился, фичи стали использоваться чаще, а отток начал снижаться. И так вышло, что все эти улучшения были связаны с чистотой подсчета кликов: Bing Edge улучшило не только скорость страницы, но и доставляемость кликов. Чтобы оценить эффект, мы запустили эксперимент в котором маячковый подход к отслеживанию кликов заменили на подход с перезагрузкой страницы. Этот прием используется в рекламе и ведет к незначительной потере кликов, замедляя действие каждого клика. Результаты показали, что доля потерянных кликов упала более чем на 60 %! И большинство заявленных в тот период достижений оказались результатом улучшения доставки клика.

Пример: MSN Поиск в Bing


Автодополнение — выпадающий список, в котором предлагаются варианты завершения запроса, пока человек его набирает. MSN планировала улучшить эту фичу с помощью нового и улучшенного алгоритма (команды разработки фич всегда готовы объяснить, почему их новый алгоритм априори лучше старого, но часто расстраиваются, когда видят результаты экспериментов). Эксперимент имел большой успех, количество поисковых запросов, которые приходили в Bing с MSN, значительно выросло. Следуя нашим правилам, мы начали разбираться и выяснили, что когда пользователь кликал в подсказку, новый код делал два поисковых запроса (один из которых сразу закрывался браузером, как только появлялась поисковая выдача).

Так что объяснение многих положительных результатов может быть не столь захватывающим. А наша задача — найти реальное влияние на пользователя, и правило Twyman’а очень помогло в этом и в понимании многих результатов экспериментов.

Правило №3. Ваша выгода будет варьироваться

Существует много задокументированных примеров успешных контрольных экспериментов. Например, «Which Test Won?» содержит сотни примеров A/B-тестов, и список пополняется каждую неделю.

Хотя это отличный генератор идей, у этих примеров есть несколько проблем:

  1. Качество варьируется. В этих исследованиях кто-то из какой-то компании рассказывает о результате A/B-теста. Была ли там экспертная оценка? Правильно ли он проводился? Были там выбросы? Было p-value достаточно маленьким (мы видели опубликованные A/B-тесты с p-value больше 0,05, что обычно считается статистически незначимым)? Были там подводные камни, о которых мы рассказывали раньше, и которые авторы теста не проверили должным образом?
  2. То, что работает в одном домене, может не работать в другом. Например, Neil Patel [29] рекомендует использовать слово «free» в рекламе, предлагающей 30-дневную пробную версию, вместо «30-ти дневная гарантия возврата денег». Это может работать с одним продуктом и одной аудиторией, но мы подозреваем, что результат будет сильно зависеть и от продукта, и от аудитории. Joshua Porter [30] заявляет, что «Красный лучше зеленого» для кнопок с призывом к присоединиться «Get Started Now». Но так как мы не видели много сайтов с красной кнопкой призыва к действию, то, видимо, данный результат не столь хорошо воспроизводится.
  3. Эффект новизны и первого раза. Мы добиваемся стабильности в наших экспериментах, а многие эксперименты во многих примерах не проводились достаточно долго, чтобы проверить наличие таких эффектов.
  4. Неправильная интерпретация результатов. Какая-то скрытая причина или специфический фактор может быть не распознан или понят неправильно. Приведем два примера. Один из них — первый задокументированный контрольный эксперимент.

Пример 1. Цинга — это заболевание, обусловленное дефицитом витамина C. Она убила более 100 000 человек в 16-18 веках, большинство из них — моряки, которые уходили в дальние плавания и оставались в море дольше, чем могли бы сохраниться фрукты и овощи. В 1747 году доктор James Lind заметил, что цингой меньше страдают на кораблях в Средиземноморье. Он начал давать некоторым морякам лимоны и апельсины, другим оставив обычное питание. Эксперимент оказался очень успешным, но доктор не понял причины. В Королевском Морском Госпитале в Великобритании он лечил пациентов с цингой концентрированным лимонным соком, который он называл «rob». Врач концентрировал его с помощью нагревания, что уничтожало витамин C. Lind потерял веру и стал часто прибегать к кровопусканию. В 1793 году были проведены настоящие испытания. и лимонный сок стал частью дневного рациона моряков. Цинга быстро исчезла, а британских моряков до сих пор называют лимонниками.

Пример 2. Marissa Mayer рассказала об эксперименте, в ходе которого Google увеличил количество результатов на странице поиска с 10 до 30. Трафик и прибыль от пользователей, которые искали в Google, упали на 20 %. И как же она это объяснила? Мол, страница требовала на полсекунды больше, чтобы сгенерироваться. Конечно, производительность — важный фактор, но мы подозреваем, что это повлияло только на малую долю потерь. Вот наше видение причин:

  • В Bing проводились изолированные замедляющие эксперименты [11], в ходе которых менялась только производительность. Задержка реакции сервера в 250 миллисекунд повлияла на выручку примерно на 1,5 % и на CTR на 0,25 %. Это большое влияние, и можно предположить, что 500 миллисекунд повлияют на выручку и CTR на 3 % и 0,5 % соответственно, но никак не на 20 % (предположим, что здесь применима линейная аппроксимация). Старые тесты в Bing [32] показывали схожее влияние на клики и меньшее влияние на выручку при задержке в 2 секунды.
  • Jake Brutlag из Google писал в своем блоге об эксперименте [12], показывающем, что замедление выдачи результатов поиска со 100 миллисекунд до 400 имеет значительное влияние на удельное количество поисков и колеблется между 0,2 % и 0,6 %, что очень хорошо сочетается с нашими экспериментами, но очень далеко от результатов Marissa Mayer.
  • В BIng провели эксперимент с показом 20 результатов поиска вместо 10. Потеря прибыли полностью нивелировала добавление дополнительной рекламы (которая сделала страницу еще чуть-чуть медленнее). Мы верим, что соотношение рекламы и алгоритмов поиска гораздо важнее, чем производительность.

Мы скептично относимся ко многим замечательным результатам A/B-тестов, опубликованных в разных источниках. Когда проверяете результаты экспериментов, спрашивайте самих себя, какой уровень доверия у вас к ним? И запомните, даже если идея работала на одном сайте, то совершенно не обязательно, что она будет работать на другом. Самое лучше, что мы можем сделать, это рассказать о воспроизведении экспериментов и об их успехе или провале. Это принесет больше всего пользы науке.

Правило №4: Скорость значит многое

Веб-разработчики, которые проверяют свои фичи с помощью контрольных экспериментов, быстро поняли, что производительность или скорость сайта — критичные параметры [13;14;33]. Даже небольшая задержка при работе сайта может влиять на ключевые метрики тестовой группы.

Лучший способ оценить влияния производительности — произвести изолированный эксперимент с замедлением, т.е. просто с добавить задержку. На рисунке 3 показан стандартный график зависимости между производительностью и проверяемой метрикой (CTR, удельные успешность и выручка). Обычно чем быстрее сайт, тем лучше (выше на этом графике). Замедляя работу у тестовой группы по отношению к контрольной группе, вы можете измерить влияние производительности на интересующую вас метрику. Важно отметить:

  1. Влияние замедления на тестовую группу замеряется здесь и сейчас (пунктирная линия на графике) и зависит от сайта и аудитории. Если изменится сайт или аудитория, то снижение производительности может по-другому влиять на ключевую метрику.
  2. Эксперимент показывает влияние замедления на ключевую метрику. Это может быть очень полезно, когда вы пытаетесь измерить эффект от новой фичи, первая реализация которой не эффективна. Допустим, что она улучшает метрику M на X %, и в то же время замедляет сайт на T %. С помощью эксперимента с замедлением мы можем оценить влияние замедление на метрику М, подкорректировать влияние фичи и получить прогнозируемый эффект X’ % (логично предположить, что эти эффекты обладают свойством аддитивности). И таким образом сможем ответить на вопрос: «Как оно повлияет на ключевую метрику, если будет реализовано эффективно?».
  3. Мы можем предположить, как повлияет на ключевую метрику тот факт, что сайт начнет работать быстрее и поможет вычислить ROI усилий на оптимизацию. Воспользовавшись линейной аппроксимацией (первый член ряда Тейлора), мы можем предположить, что влияние на метрику одинаково в обоих направлениях. Мы предполагаем, что вертикальная дельта одинакова в обоих направлениях и просто отличается по знаку. Поэтому экспериментируя с замедлением на различные значения мы можем примерно представить, как будет влиять ускорение на эти же значения. Мы проводили такие тесты в Bing и наша теория полностью подтвердилась.

Насколько важна производительность? Критически важна. В Amazon замедление работы на 100 миллисекунд приводит к падению продаж на 1 %, как говорил Greg Linded [34 p.10]. А докладчики из Bing и Google [32] свидетельствуют о значительном влиянии производительности на ключевые метрики.

Пример: Эксперимент по замедлению сервера

Мы проводили в Bing двухнедельный эксперимент по замедлению работы сервиса на 100 миллисекунд у 10 % пользователей, на 250 миллисекунд у других 10 % пользователей. Оказалось, что каждые 100 миллисекунд ускорения работы сервиса увеличивали выручку на 0,6 %. Отсюда даже появилась фраза, которая хорошо отражает суть нашей организации: Инженер, который улучшит производительность сервера на 10 миллисекунд (1/30 от скорости моргания нашего глаза) заработает для компании более чем годовой свой заработок. Каждая миллисекунда имеет значение.

В описанном эксперименте мы замедляли время ответа сервера, потом замедляли время работы всех элементов на странице. Но у страницы есть более важные части, а есть менее важные. Например, пользователи не могут знать, что элементы за границей видимости экрана еще не подгрузились. Но есть ли отображаемые сразу элементы, которые можно замедлить без ущерба для пользователя? Как вы увидите ниже, такие элементы есть.

Пример: производительность правой панели не так критична

В Bing некоторые элементы, называемые снапшотами, находятся на правой панели и загружаются поздно (после события window.onload). Недавно мы провели эксперимент: элементы правой панели замедлили на 250 миллисекунд. Если это и повлияло на ключевые метрики, то столь незначительно, что мы ничего не заметили. А в эксперименте участвовало почти 20 миллионов пользователей.

Время загрузки страницы (PLT) часто вычисляется с помощью события window.onload, как признака завершения полезной активности браузера. Но сегодня такая метрика имеет серьезный изъян при работе с современными браузерами. Как показал Steve Souders [32], верхняя часть страницы Amazon рендерится за 2 секунды, тогда как windows.onload срабатывает через 5,2 секунды. В Schurman [32] заявляли, что умеют рендерить страницу динамически, поэтому им важно показать шапку очень быстро. Бывает верно и обратное: в Gmail windows.onload срабатывает через 3,3 секунды, тогда как на экране в этот момент появилась только полоса загрузки, а весь контент будет показан через 4,8 секунды.

Существуют метрики, связанные со временем, например: время до первого результата (скажем, время до первого твита в Twitter, первый результат поиска на странице с результатами). Но термин «Perceived performance» всегда используется для описания такой скорости работы страницы, чтобы пользователь воспринимал её достаточно полноценной. Концепцию «Perceived performance» проще описать интуитивно, чем строго сформулировать, поэтому ни у одно из браузеров нет в планах реализации события perception.ready() . Для решения этой задачи используется много предположений и допущений, например:

  1. Время показа верхней части страницы (AFT) [37]. Измеряется как момент, когда будут отображены все верхние пикселы страницы. Реализация основана на эвристиках, которые особенно сложны, когда имеем дело с видео, гифками, прокручивающимися галереями и прочим динамическим контентом, который изменяет верхнюю часть страницы. Можно выставлять пороги на «процент нарисованных пикселей», чтобы избежать влияния мелких и незначительных элементов, которые могут увеличить измеряемую метрику.
  2. Индекс скорости [38] — некоторое обобщение AFT, которое усредняет время, в течение которого видимые элементы страницы появляются на экране. Скорость не страдает от мелких элементов, которые появляются поздно, но на неё всё ещё влияет динамический контент, который меняет верхнюю часть страницы.
  3. Время фаз страниц и время готовности пользователя [39]. Время фаз страниц — время, требуемое на каждую отдельную фазу рендеринга страницы. Тоже является мерой того, как быстро меняются пиксели на странице. Время готовности пользователя — время, необходимое для отображения главных для пользователя элементов.

Новый W3C-интерфейс работы со временем, предложенный в новом стандарте HTML, предоставляет доступ к более детальному разделению событий на странице и, скорее всего, позволит лучше понять проблемы с производительностью. Все эксперименты, о которых мы говорили выше, проводились для десктопной версии сайтов, но из них можно многое извлечь и для мобильных интерфейсов.

В Bing мы используем множество метрик производительности для диагностики состояния сервиса, но наша ключевая метрика «Время до выполнения своей задачи» (TTS) [24] находится за рамками обсуждения проблем измерения метрик. Цель поискового движка — чтобы пользователь решил свою задачу как можно быстрее. Для кликабельных элементов считается успехом, если пользователь как минимум 30 секунд не возвращался обратно после клика на элемент. Метрика времени необходимого для успеха пользователя — она коррелирует с «Perceived performance». Если страница отображается медленно, то пользователи медленнее кликают и медленнее достигнут желаемого; если страница начинает работать быстрее, то быстрее отработают все скрипты, пользователь раньше сможет интерпретировать страницу и быстрее добьётся желаемого. Кроме того, этой относительно простой метрике не нужны эвристики, которые обычно появляются, когда разговор заходит об измерениях времени. Эта метрика очень устойчива к изменениям, но при этом достаточно чувствительна. Её недостаток в том, что она подходит для тех случаев, когда необходим клик, когда бывают запросы, при которых пользователю для достижения цели кликать никуда не надо — в подобных ситуациях эта метрика не применима.

Правило №5: уменьшить отток со страницы — тяжело, а вот перекидывать клики из одной области в другую — просто

Ключевая метрика, которая измеряется в Bing во время контрольных экспериментов — уровень оттока, то есть какой процент пользователей покинул страницу, ни кликнув ни по одной ссылке. Увеличение пользовательского вовлечения в продукт, уменьшение оттока — это очень положительные результаты, но это те метрики, которые очень тяжело изменить. Большинство экспериментов показывают, что можно значительно перемещать клики из одной области в другую, но отток меняется редко или на ничтожно маленькие значения. Ниже мы опишем несколько экспериментов, в ходе которых были сделаны большие изменения, но отток статистически значимо не изменился.

Пример: Связанные поиски в правой колонке

В Bing в правой колонке показываются связанные поисковые запросы. например, если вы искали «data mining», Bing покажет справа «Examples of data mining», «Advantages of Data Mining», «definition of data mining», «Data mining companies»,«data mining software» и т.д. Это может помочь пользователям изменить свой запрос и успешнее находить нужную информацию. В эксперименте связанные поисковые запросы убрали из правой колонки для 10 миллионов пользователей. В результате пользовательские клики переехали в другую область, но статистически значимого изменения оттока не произошло (p-value 0,64).

Пример: Связанные поиски под верхней рекламой

Bing показывается связанные поиски в строках, которые могут плавать в поисковой выдаче, если поисковик считает, что они более релевантны, чем верхние результат работы алгоритма. В эксперименте мы зафиксировали связанные поиски прямо под верхней рекламой. В результате этого эксперимента клики на связанные поисковые запросы упали на 17 %, но статистически значимого изменения уровня оттока не произошло (p-value 0,71).

Пример: Обрезание страницы поисковой выдачи

Bing задает размер страницы с поисковой выдачей динамически, а не всегда показывает классические 10 голубых ссылок. Это изменение стало возможным благодаря стабильности уровня оттока, который показали два эксперимента:

  1. Когда возникает блок со вложенными ссылками, например, для запроса «ebay», то CTR на этот верхний блок равен 75 %. Показывать 10 результатов для такого запроса бессмысленно. Поэтому провели эксперимент: для 8 миллионов пользователей, по чьим запросам была выдача с вложенным блоком, показали под ним всего 4 результата работы поискового алгоритма. Статистически значимого изменения уровня оттока не произошло (p-value 0,92), но страницы стали грузиться значительно быстрее и эта фича была реализована в production.
  2. Когда пользователь уходит из поисковой выдачи, а потом возвращается с помощью кнопки «назад» в браузере или повторяет запрос, Bing в этом случае выдаёт больше строк с результатами поиска (14 результатов). Эксперимент, который затронул 3 миллиона «целевых» пользователей, показал статистически значимое изменение метрик: на 1,8 % упала выручка с пользователей, на 30 миллисекунд замедлилась загрузка страницы, на 18 % упала пагинация (листание результатов поиска), но статистически значимого изменения уровня оттока не произошло (p-value 0,93). Это изменение не было вынесено на бой.

Пример: цвет фона рекламной ссылки

Все основные поисковые движки экспериментируют с фоном для рекламы. В недавнем эксперименте с 10 миллионами пользователей тестовый цвет привел к тому, что выручка упала на 12 % (годовые потери порядка $150 млн, если бы это изменение было выкачено на бой). Клики пользователей переехали с рекламы в другие места сайта, но статистически значимого изменения уровня оттока не произошло (p-value 0,83)

Мы видели эксперименты, когда уровень оттока улучшался, значительно повышалась релевантность поисковой выдачи. Но это необычные эксперименты, а изменение оказалось значительно меньше, чем можно было бы ожидать.

Это правило очень важно потому, что мы наблюдали много экспериментов (в Microsoft, Amazon и по рассказам других.), в которых на страницу добавляли модуль или виджет с хорошим CTR. Далее люди заявляли, что это очень полезный для пользователей модуль, потому что они на него кликают. Но может быть так, что модуль просто перетягивает на себя клики из других областей страницы. И если такая каннибализация имеет место, то этот модуль хороший только если клики на него лучше. При этом понятие «лучше» для каждого сайта и ситуации определяется отдельно. В заключение можно сказать следующее: локальное улучшение — это простая задача, а глобальное улучшение — гораздо сложнее.

Правило №6: избегать сложных экспериментов, действовать итеративно

Добротный и подробный план эксперимента жизненно необходим для получения хорошего результата. Сэр Р.А.Фишер однажды сказал [40]: «Консультация с аналитиком после того, как эксперимент закончился, это словно проведение посмертного обследования. Единственное, что он сможет сказать — что эксперимент мертв». Опыт подсказывает нам, что простые эксперименты являются лучшими в online-мире, и несмотря на то, что у них есть свои подводные камни [17;41], их проще понять и проверить корректность, следовательно, они более надёжны. В сложных экспериментах нет необходимости, к тому же в них могут таиться баги. Вот несколько примеров из опыта LinkedIn.

Пример: Объединенный поиск в LinkedIn

В LinkedIn запуск продукта включает в себя множество фич и компонентов. В 2013 году было проведено масштабное обновление поиска, в благодаря которому появилось автозавершение, предложение вариантов, и, самое главное — универсальный поиск по всему LinkedIn, который позволял одновременно искать среди различных категорий сервиса. В прошлом человек должен был выбрать, что именно он ищет: людей, должности или работодателей. С универсальным поиском стал достаточно умным, чтобы самому догадаться, что именно ты ищешь, и выдать релевантный результат. Но это было не всё. Изменили практически каждый элемент поисковой страницы: от левого ползунка навигации до сниппетов и кнопок. Первый эксперимент провели со всеми изменениями, собранными в одну кучу, и множеством метрик, и получили билиберду в целевых метриках. Затем долго удаляли фичи одну за другой, и обнаружили, что падение кликов и выручки произошло из-за пачки фич, не включенных в итоговую версию, а не из-за самого универсального поиска. После исправления этих фич универсальный поиск положительно повлиял на поведение пользователей и был раскачен на всю аудиторию сервиса.

Пример: Контакты в LinkedIn

Недавно LinkedIn показал широкой публике новую страницу контактов. Предполагалась, что с ней людям будет проще поддерживать связь друг с другом. Все верили, что это очень хорошая фича для пользователей. Но когда пришли результаты эксперимента, то все пришли в ужас. Эксперимент был очень сложен, поэтому было достаточно тяжело разбираться, где и что пошло не так. Прежде всего, не предполагалось участия людей из белого списка. Поэтому перед тем, как отнести пользователя к контрольной или тестовой группе, проверяли, подходит ли пользователь для участия в эксперименте. Далее, в зависимости от от выбранной группы запускалось еще два эксперимента, которые решали, какую страницу контактов показать пользователю. План эксперимента был достаточно сложен и потребовалось время, чтобы понять, что был баг в процедуре отбора пользователя. Если пользователь однажды видел новую страницу контактов, то он попадал в белый список и навсегда вычеркивался из эксперисмента. Ничего удивительного, что мы увидели растущий отток и падение вовлеченности пользователя на тестовой группе.

В offline-экспериментах сложный проект может иметь значение, потому что тестируемый объект конечен или дорог, но в online, когда мы имеем бесконечный поток пользователей, мы можем проводить сотни параллельных экспериментов, тестируя различные изменения [4;11]. Литературы по многопеременным (Mullty-Variable) тестам достаточно много, и коммерческие продукты рекламируют свою возможность проводить MV-тесты. Но мы предпочитаем однопеременные (такие как А/B/C/D) или двухпеременные тесты.

Один из аргументов в пользу однопеременных тестов — их совместимость с идеологией Agile, в которой приветствуется создание MVP [15]: вместо написания кода для сложного MVT, запускаете тест, как только готова основная фича. Вы узнаете важные вещи после того, как покажете фичу пользователю. Увидите динамику в неожиданных метриках, получите голосовую обратную связь, встретитесь с багами и т.д. Большие MV-тесты на новом коде чаще всего оказываются некорректными из-за допущенной ошибки хотя бы в одной переменной.

Мы поощряем наши команды за быструю выкатку кода и проведение экспериментов и предлагаем им форму контроля эффективности: начиная с 1 % контрольной группы с дальнейшим повышением, если не наблюдалось никаких вопиющих ухудшений в метриках. Придерживаясь Agile-методологий и не контролируя эффективность через контрольные тесты вы рискуете повторить одну из выкаток Knight Capital, которая в августе 2012 привела к потере 440 миллионов долларов и понизила стоимость Knights на 75 %.

Правило №7: Имейте достаточное количество пользователей

Методологии проведения экспериментов часто основаны на мат. ожиданиях, про которые предполагается, что они распределены нормально. Центральная предельная теорема гласит, что среднее случайной величины распределено нормально, если выборка достаточно велика. Книги по прикладной статистике часто предполагают, что будет достаточно маленького числа. Например, в статье [42] говорится, что в большинстве практических случаев, если n > 30, распределение средних можно считать нормальным несмотря на форму исходного распределения. Так как мы добиваемся статистической значимости ориентируясь на хвосты распределений, нам понадобятся гораздо большие выборки. Мы давали совет в предыдущих статьях — использовать тысячи пользователей, Neil Patel советует десятки тысяч месячных пользователей, но фактическое количество зависит от интересующей вас метрики.

Есть формула вычисления минимального размера выборки, она зависит от стандартного отклонения метрики и от чувствительности (ожидаемого эффекта на этой метрике) [16], но предполагается, что распределение средних является нормальным. Наш опыт говорит о том, что многие интересующие вас метрики будут смещенными и нижняя граница должна будет проходить слишком высоко, чтобы можно было считать распределение нормальным.

Мы пришли к тому, что для каждого варианта формула 355 * s^2 определяет минимальное количество независимых и одинаково распределенных наблюдений, необходимое для того, чтобы среднее считалось нормально распределенным. Здесь s — это степень смещенности распределения переменной, определяемая как:

Мы рекомендуем использовать это правило, когда смещение больше 1. Ниже приведена таблица со значениями смещений, размерами выборки и чувствительностью, которые получены в экспериментах с некоторыми метриками в Bing:

Метрика Смещение Размер выборки Чувствительность
Revenue/User 17,9 114 тыс. 4,4 %
Revenue/User (capped) 5,2 9,7 тыс. 10,5 %
Sessions/User 3,6 4,7 тыс. 5,4 %
Time To Success 2,1 1,55 тыс. 12,3 %

В нашей практике был случай, когда на одном сайте смещенность метрики «количество покупок на человека» была больше 10, а смещённость метрики «выручка с пользователя» — больше 30. Наше правило дает 95 % вероятность того, что оба конца распределения, которые обычно равны 0,025, будут на самом деле не больше 0,3 и не меньше 0,2. Это правило было взято из работы Boos и Hughes-Oliver [43]. Смещённые распределения с тяжелым хвостом очень часты в работе с веб данными, поэтому наша формула очень полезна. Из таблицы видно, что выручка на пользователя имеет коэффициент смещения 18,2, поэтому необходимо 114 тыс. пользователей для проведения достоверного эксперимента. Ниже на графике 4 видно, что если семплируем только 100 или 1000 пользователей, то точки плохо ложаться на диагональ QQ. Это говорит о смещенности распределения и поэтому 95-процентный доверительный двусторонний интервал, предполагающий нормальность, не совпадёт с реальным более чем на 5 %. Когда же мы взяли 100 000 пользователей, распределение стало очень близким к нормальному в интервале от -2 до 2.

Если метрика сильно смещена, то иногда можно как-то трансформировать её значения для уменьшения смещения, чтобы среднее сходилось к нормальному быстрее. После того, как мы ограничили метрику «доход на пользователя» десятью долларами в неделю, то увидели, что смещенность упала с 18 до 5, чувствительность значительно выросла. При равных размерах выборки ограничение удельной выручки помогает обнаружить изменения, которые на 30 % меньше, чем при использовании оригинальной метрики.

Наше правило позволяет оценить количество пользователей, необходимое для того, чтобы считать распределение средних нормальным. Если предполагается, что контрольная и тестовые группы имеют одно распределение, то никаких ценных советов мы дать не можем убедитесь только, что они имеют одинаковый размер, тогда распределение их разницы будет идеально симметричным и смещенность будет близка к 0. В этом случае наше правило не будет иметь смысла, так как оно действует при коэффициенте смещенности большем по модулю 1.

Есть более сложные вычисления, которые могут помочь снизить нижнюю границу количества пользователей [16]. А для смещенных распределений с малым количеством семплов можно использовать bootstrap [44].

Заключение

В этой статье мы рассказали про 7 правил проведения контрольных экспериментов с примерами, которые мы вынесли из своего опыта, проведя тысячи экспериментов. Первые два правила говорят нам, что даже маленькие изменения на сайте могут дать большое изменение метрики, но положительное изменение случается редко, и чаще всего движение идет за счет небольших подвижек, полученных в разных экспериментах. Если результаты эксперимента кажутся слишком хорошими, то воспользуйся правилом Twyman’а и не доверяй этому эксперименту, разберись в нем глубже, в большинстве случаев найдёте ошибку. Третье правило касается любых публикуемых экспериментов, мы научились относиться к ним осторожно, и при попытке внедрять аналогичные решения всегда проверяем результат контрольным тестом, будучи готовыми к тому, что у нас результат может отличаться. Четвертое правило — наше любимое — касается скорости. Мы провели множество экспериментов, чтобы понять взаимоотношение между скоростью, производительностью и ключевыми метриками, показали, что скорость ответа сервера — критичный показатель для нашего сервиса. Также мы показали, что скорость ключевых частей страниц важнее, чем остальных элементов (например, боковой панели). Несмотря на наше отношение, мы сомневаемся в некоторых примерах, которые привели в рамках третьего правила. Пятое правило — это эмпирическое наблюдение, которое, как мы думаем, будет уточнено в дальнейшем. Но поражает то, насколько широко это правило применимо: можно легко и сколько угодно гонять клики пользователей по разным частям страницы, но уровень покидания изменить очень трудно. Поэтому, когда делаете локальные оптимизации убедитесь, что вы не снизили ключевую метрику у другого блока. Шестое правило предлагает не планировать сложные эксперименты, а выкатывать маленькие итерации. Эта идея хорошо сочетается с современной парадигмой Agile. Седьмое правило — предоставляем нижнюю границу количества пользователей, необходимого для контрольного эксперимента со смещенным распределением. Большинство примеров, приведённых в этой статье, демонстрируются впервые. Они зиждятся на эмпирических правилах и усиливают наше убеждение, что эксперименты — необходимая вещь в разработке продукта. Мы надеемся, что эти правила помогут сообществу и стимулируют новые исследования, которые, возможно добавят новые правила.

Благодарности

Мы хотим поблагодарить наших коллег, которые провели с нами множество экспериментов, что помогло нам составить этот список из семи правил. Mujtaba Khambatti, John Psaroudakis, и Sreenivas Addagatke, были вовлечены в процесс оценки быстродействия и его анализа. Мы хотим поблагодарить за отзывы и комментарии к черновикам статьи Juan Lavista Ferres, Urszula Chajewska, Greben Langendijk, Lukas Vermeer, и Jonas Alves. Комментарии к последним черновикам дали Eytan Bakshy, Brooks Bell и Colin McFarland.

Самые простые физические и химические опыты

Более 160 экспериментов, которые наглядно демонстрируют законы физики и химии, сняты, смонтированы и выложены в сеть на научно-познавательном видео-канале «Простая наука». Многие из опытов настолько просты, что их легко повторить и дома – они не требуют специальных реактивов и приспособлений. О том, как сделать простые химические и физические опыты в домашних условиях не только интересными, но и безопасными, какие эксперименты увлекут малышей, а какие будут любопытны школьникам, «Летидору» рассказал Денис Мохов, автор и главный редактор научно-познавательного видео-канала «Простая наука».

– С чего начался ваш проект?

Я с детства люблю различные опыты. Сколько себя помню, собирал различные идеи для экспериментов, в книгах, телепередачах, чтобы потом самостоятельно их повторить. Когда я сам стал отцом (моему сыну Марку сейчас 10 лет), для меня всегда было важно сохранить любознательность в сыне и, конечно, суметь ответить на его вопросы. Ведь, как и любой ребёнок, он смотрит на мир совершенно иначе, чем взрослые. И и в определенный момент его самым любимым словом стало слово «почему?». Именно из этих «почему?» начались домашние опыты. Ведь рассказать – это одно, а показать – совсем другое. Можно сказать, что любопытство моего ребёнка послужило импульсом для создания проекта «Простая наука».

– Сколько лет было вашему сыну, когда вы начали практиковать домашние опыты?

Опытами дома мы занимаемся c того момента, как сын пошел в детский сад, где-то после двух лет. Сначала это были совершенно простые эксперименты с водой и равновесием. Например, реактивный пакет, бумажные цветы на воде, две вилки на спичечной головке. Сыну сразу понравились эти забавные «фокусы». Причем ему, как и мне, всегда интересно не столько наблюдать, сколько повторить их самостоятельно.

– Какие опыты вы бы порекомендовали для малышей, а какие для детей постарше?

С маленькими детьми можно провести интересные эксперименты в ванной: с лодочкой и жидким мылом, бумажным корабликом и воздушным шаром,
теннисным шариком и струей воды. Ребенок с самого рождения стремится познавать все новое, эти зрелищные и красочные опыты ему обязательно понравятся.

Когда же мы имеем дело со школьниками, пусть даже и первоклассниками, тут уже можно развернуться вовсю. В этом возрасте детям интересны взаимосвязи, они будут внимательнее наблюдать эксперимент, а потом искать объяснение, почему происходит так, а не иначе. Здесь как раз можно разъяснить суть явления, причины взаимодействий, пусть даже и не совсем научными терминами. И, когда на школьных уроках ребенок столкнется с подобными явлениями (в том числе в старших классах), объяснения учителя ему будут понятны, ведь он это уже знает с детства, у него есть личный опыт в этой области.

Занимательные опыты и эксперименты в домашних условиях

Многие из представленных опытов можно проводить в домашних условиях. Это касается как простых химических опытов, так и занимательных физических экспериментов. Проводя опыты дома, не забудьте о мерах предосторожности, особенно если за опытами будут наблюдать дети.

Все эксперименты носят обучающий характер, несмотря на использовании в них, зачастую, простых обыденных предметов, например, опыты с атмосферным давлением, холодной и горячей водой, газировкой и т.д. Ведь они не перестают быть научными и при этом интересными, занимательными и прикольными.

Мастер Йода рекомендует:  Как создать надпись в виде шоколадных конфет
Добавить комментарий