Воскобойников Ю. Е.Регрессионный анализ данных в пакете MATHCAD + CD:Учебное пособие. 1-е изд.ISBN 978-5-8114-1096-5Год выпуска 2011Тираж 1500 экз.Формат 12,8 20 смПереплет: твердыйСтраниц 224Цена 450,76 руб. Книга содержит основные теоретические положения по следующим разделам регрессионного анализа экспериментальных данных: регрессионные модели и регрессионное моделирование, парный и множественный регрессионный анализ, построение регрессионных моделей на практике. Приводятся необходимые расчетные соотношения. Большое внимание уделяется реализации этих соотношений в математическом пакете Mathcad. Учебное пособие содержит большое количество примеров и копий фрагментов документов Mathcad, которые позволят читателям не только лучше понять и усвоить учебный материал, но и эффективно использовать пакет Mathcad при выполнении курсовых и дипломных работ, а также при работе над магистерскими и кандидатскими диссертациями. Файлы, включенные в прилагаемый CD, содержат документы Mathcad, позволяющие построить и проанализировать парные и множественные регрессионные модели. Это, с одной стороны, позволит читателю использовать эти документы для построения «своих» регрессионных моделей с минимальными затратами времени, а с другой стороны, послужит некоторым примером при составлении «своих» программ обработки данных. Книга рекомендуется студентам технических и экономических специальностей при изучении учебных дисциплин, включающих корреляционный и регрессионный анализ данных. Книга будет также полезна магистрантам, аспирантам, инженерам и научным сотрудникам при построении регрессионных моделей и эмпирических зависимостей по экспериментальным данным с использованием современных математических пакетов.Введение Среди методов прикладной математической статистики регрессионный анализ занимает важное положение. Это обусловлено тем, что регрессионный анализ является одним из самых распространенных методов обработки результатов наблюдений для построения математических моделей, которые широко используются при исследованиях процессов в различных системах (технических, экономических, социальных и т. д.). Объектом рассмотрения регрессионного анализа является некоторый физический (технический, экономический, социальный) процесс, который характеризуется несколькими переменными. Одна из этих переменных (называемая зависимой) функционально связана с другими независимыми переменными. Под независимыми переменными понимаются переменные, для которых можно устанавливать желаемые значения, либо те, которые можно наблюдать, но не управлять. В результате изменения независимых переменных появляется некоторый эффект, который приводит к изменению зависимой переменной (иногда называемой переменной-откликом). В большинстве случаев функциональная связь между этими переменными является неизвестной, и необходимо построить некоторое аналитическое выражение — уравнение регрессии, которое с приемлемой точностью описывала бы зависимость среднего значения зависимой переменной от одной или нескольких независимых переменных. В данном учебном пособии рассматриваются следующие основные задачи регрессионного анализа экспериментальных данных: отбор значимых независимых переменных; выбор вида уравнения регрессии (линейная, полиномиальная, экспоненциальная и т. д.); вычисление оценок для неизвестных коэффициентов; построение доверительных интервалов для неизвестных коэффициентов; проверка значимости вычисленных оценок и построенного уравнения регрессии; регрессионные модели с фиктивными переменными; робастные алгоритмы оценивания коэффициентов регрессии. В России и за рубежом издано большое количество литературы, посвященной регрессионному анализу и обработке экспериментальных данных. Основными недостатками этих изданий являются сложность изложения материала и отсутствие алгоритмической реализации тех или иных расчетных соотношений в среде определенного математического пакета, которые сегодня широко используются в научно-инженерных расчетах. Поэтому автор при написании учебного пособия преследовал следующие цели: 1) изложить материал в максимально доступной и понятной форме (оставляя в стороне сложные доказательства, которые можно найти в приводимом списке литературы); 2) при изложении материала придерживаться рецептурной формы, т. е. непосредственно для практического применения излагаемых методов или алгоритмов; 3) показать алгоритмическую и численную реализацию основных расчетных соотношений в математическом пакете Mathcad; 4) проанализировать основные трудности, возникающие при решении задач регрессионного анализа на практике. Изложение материала сопровождается большим количеством примеров, а также заданий, решение которых служит закреплению теоретических положений изучаемой дисциплины. Эту же цель преследуют контрольные вопросы и учебные задания, приводимые в конце каждой темы пособия. Предполагается, что читатель знаком с основами работы в пакете Mathcad. При отсутствии таких знаний можно обратиться к учебным пособиям [3, 6] и изучить требуемые конструкции пакета Mathcad. Программирование в пакете Mathcad подробно рассматривается в [3]. Необходимые сведения по теории вероятностей и математической статистике кратко изложены в теме 1 данного пособия, а также в соответствующей учебной литературе (например, [1, 2, 4]). Значок в тексте означает описание программного обеспечения, приводимого на прилагаемом компакт-диске.Воскобойников Ю. Е.Регрессионный анализ данных в пакете MATHCAD + CD:Учебное пособие. 1-е изд.Оглавление Введение .......... 3 Тема 1. Выборочные характеристики распределений случайных величин .......... 6 1.1. Необходимые определения и понятия теории вероятностей .......... 61.1.1. Случайная величина и законы ее распределения .......... 61.1.2. Числовые характеристики случайных величин .......... 81.1.3. Нормально распределенная случайная величина .......... 91.1.4. Двумерная случайная величина и ее характеристики .......... 121.1.5. Векторная случайная величина и ее характеристики .......... 171.2. Выборочные оценки числовых характеристик случайных величин .......... 201.2.1. Точечные оценки числовых характеристик .......... 201.2.2. Интервальные оценки числовых характеристик .......... 241.3. Проверка статистических гипотез .......... 261.3.1. Статистические гипотезы .......... 261.3.2. Основные этапы проверки статистических гипотез .......... 271.4. Предварительная обработка выборочных данных .......... 291.4.1. Фильтрация выборочных данных .......... 291.4.2. Аномальные измерения и их исключение из выборочной совокупности .......... 351.4.3. Ошибки фильтрации выборочных данных .......... 40Контрольные вопросы и задания .......... 42Тема 2. Регрессионные модели и задачи регрессионного анализа .......... 44 2.1. Регрессионный анализ данных и регрессионные модели .......... 442.1.1. Регрессионный анализ данных .......... 442.1.2. Регрессионные модели .......... 452.2. Основные предпосылки и задачи регрессионного анализа .......... 472.2.1. Основные предпосылки регрессионного анализа .......... 472.2.2. Основные этапы построения регрессионной модели .......... 482.2.3. Задачи регрессионного анализа данных .......... 49Контрольные вопросы и задания .......... 50Тема 3. Парный регрессионный анализ .......... 51 3.1. Парная регрессия .......... 513.1.1. Постановка задачи парной регрессии .......... 513.1.2. Выбор вида функции регрессии .......... 553.2. Линейная парная регрессия и вычисление ее коэффициентов .......... 583.2.1. Метод наименьших квадратов .......... 583.2.2. Свойства оценок метода наименьших квадратов .......... 613.2.3. Дисперсии оценок метода наименьших квадратов .......... 623.2.4. Интерпретация уравнения парной регрессии .......... 633.3. Вычисление коэффициентов уравнения регрессии в пакете Mathcad .......... 643.3.1. Программирование алгоритмов МНК в Mathcad .......... 643.3.2. Функции Mathcad для вычисления оценок МНК .......... 663.4. Интервальные оценки функции регрессии и ее параметров .......... 673.4.1. Интервальные оценки параметров .......... 673.4.2. Интервальные оценки для коэффициентов 0, 1и дисперсии 2 .......... 683.4.3. Интервальная оценка для функции регрессии .......... 693.4.4. Интервальная оценка для индивидуальных значений зависимой переменной .......... 723.5. Значимость уравнения регрессии и коэффициент детерминации .......... 723.5.1. Проверка статистической значимости коэффициентов регрессии .......... 733.5.2. Проверка статистической значимости выборочного коэффициента корреляции .......... 753.5.3. Проверка статистической значимости уравнения регрессии .......... 763.6. Нелинейная парная регрессия .......... 803.6.1. Нелинейность регрессии по объясняющей переменной .......... 803.6.2. Нелинейность по коэффициентам уравнения регрессии .......... 823.6.3. Индекс детерминации и значимость нелинейной регрессии .......... 843.7. Построение нелинейных парных регрессий в пакете Mathcad .......... 873.7.1. Вычисление коэффициентов с использованием стандартных функций Mathcad .......... 873.7.2. Вычисление коэффициентов регрессии на основе минимизации функционала .......... 973.8. Точностная интерпретация коэффициентов нелинейной парной регрессии .......... 1013.8.1. Ковариационная матрица коэффициентов уравнения регрессии .......... 1013.8.2. Интервальные оценки для коэффициентов нелинейной регрессии .......... 1063.9. Робастные методы оценивания и метод наименьших модулей .......... 1093.9.1. Робастные методы оценивания параметров .......... 1093.9.2. Метод наименьших модулей .......... 110Контрольные вопросы и задания .......... 112Тема 4. Множественный регрессионный анализ .......... 114 4.1. Линейная модель множественной регрессии и оценивание ее параметров .......... 1154.1.1. Линейная множественная регрессия .......... 1154.1.2. Оценка коэффициентов линейной модели методом наименьших квадратов .......... 1184.1.3. Стандартизованные коэффициенты регрессии и коэффициенты эластичности .......... 1214.1.4. Свойства оценок метода наименьших квадратов .......... 1234.1.5. Построение множественной линейной регрессии в Mathcad .......... 1264.2. Интервальные оценки для функции регрессии и ее коэффициентов .......... 1294.2.1. Интервальные оценки для коэффициентов j .......... 1294.2.2. Интервальная оценка для дисперсии 2 .......... 1304.2.3. Интервальная оценка для множественной функции регрессии .......... 1324.3. Значимость уравнения множественной регрессии и его коэффициентов .......... 1354.3.1. Проверка статистической значимости коэффициентов регрессии .......... 1354.3.2. Проверка статистической значимости уравнения множественной регрессии .......... 1364.4. Нелинейная множественная регрессия .......... 1404.4.1. Преобразования нелинейных моделей .......... 1404.4.2. Минимизация функционала нелинейной множественной регрессии .......... 1444.5. Точностная интерпретация коэффициентов нелинейной множественной регрессии .......... 1464.5.1. Ковариационная матрица коэффициентов уравнения регрессии .......... 1464.5.2. Интервальные оценки для коэффициентов нелинейной регрессии .......... 1484.6. Исследование остатков регрессионной модели .......... 1494.6.1. Статистическая характеристика остатков регрессионной модели .......... 1494.6.2. Общий график остатков .......... 1534.6.3. График остатков в зависимости от предсказанных значений .......... 155Контрольные вопросы и задания .......... 155Тема 5. Практические аспекты множественного регрессионного анализа .......... 158 5.1. Мультиколлинеарность модели множественной регрессии .......... 1585.1.1. Мультиколлинеарность модели и ее признаки .......... 1585.1.2. Методы устранения или уменьшения мультиколлинеарности .......... 1635.2. Отбор объясняющих переменных регрессионной модели .......... 1655.2.1. Методы отбора значимых переменных .......... 1655.2.2. Процедура добавления независимых переменных .......... 1675.3. Неполнота и избыточность уравнения регрессии .......... 1715.3.1. Неполное уравнение регрессии .......... 1715.3.2. Избыточное уравнение регрессии .......... 1745.4. Фиктивные переменные в линейных регрессионных моделях .......... 1765.4.1. Модели с одной фиктивной переменной .......... 1775.4.2. Модели с несколькими фиктивными переменными .......... 1805.5. Частная корреляция .......... 1815.5.1. Коэффициент частной корреляции .......... 1825.5.2. Проверка значимости частного коэффициента корреляции .......... 1835.6. Гетероскедастичность модели и метод взвешенных наименьших квадратов .......... 1855.6.1. Тест ранговой корреляции Спирмена .......... 1855.6.2. Метод взвешенных наименьших квадратов .......... 1885.6.3. Метод взвешенных наименьших квадратов для парной регрессии .......... 1895.6.4. Двухшаговый метод взвешенных наименьших квадратов .......... 191Контрольные вопросы и задания .......... 192Заключение .......... 195Приложение 1. Лабораторные работы по построению регрессионных моделей .......... 196 Приложение 2. Статистическое моделирование в регрессионном анализе .......... 202 Приложение 3. Содержание прилагаемого компакт-диска (CD) .......... 208 Список литературы .......... 220