Студопедия
Случайная страница | ТОМ-1 | ТОМ-2 | ТОМ-3
АвтомобилиАстрономияБиологияГеографияДом и садДругие языкиДругоеИнформатика
ИсторияКультураЛитератураЛогикаМатематикаМедицинаМеталлургияМеханика
ОбразованиеОхрана трудаПедагогикаПолитикаПравоПсихологияРелигияРиторика
СоциологияСпортСтроительствоТехнологияТуризмФизикаФилософияФинансы
ХимияЧерчениеЭкологияЭкономикаЭлектроника

Метод наименьших квадратов

Читайте также:
  1. A. Методы измерения мертвого времени
  2. HR– менеджмент: технологии, функции и методы работы
  3. I метод.
  4. I. 2. 1. Марксистско-ленинская философия - методологическая основа научной психологии
  5. I. 2.4. Принципы и методы исследования современной психологии
  6. I. Анализ методической структуры и содержания урока
  7. I. Методические указания к изучению курса

I Постановка задачи и суть метода

Предположим, что произведены измерения двух величин и , связанных некоторой зависимостью . Например, – температура растворителя, –количество растворяющегося вещества. Результаты измерений сведены в таблицу:

х ...

Измерения неизбежно содержат ошибки. Поэтому точки , , не “лягут” точно на график функции. Например, для линейной зависимости картинка может иметь вид:

Задача состоит в таком выборе параметров функции , чтобы её график “наилучшим” образом вписывался во множество точек , . В качестве меры близости графика к этим точкам наиболее часто используется сумма квадратов отклонений наблюдённого значения от теоретического значения :

Те значения параметров функции , которые доставляют этой сумме минимальное значение, считаются “наилучшими”.

В случае линейной зависимости “наилучшие” значения и минимизируют сумму:

, (1)

т.е должны обращать в нуль частные производные и . Вычислим эти производные:

,

.

Итак, для определения стационарной точки функции имеем т. н. систему нормальных уравнений:

(2)

II Одно полезное неравенство

Чтобы исследовать систему (2), а затем и стационарную точку, докажем одно неравенство.

Рассмотрим чисел , исключая случай . Обозначим – среднее арифметическое этих чисел: . Тогда:

Но сумма квадратов, стоящая в начале этой цепочки равенств, строго положительна (ибо не все одинаковые), следовательно, и

.

Из этого неравенства легко получить требуемое нам:

.

Замечание. Полученное неравенство есть частный случай неравенства Коши-Буняковского

,

которое является обобщением неравенства для векторов: .

III Исследование системы нормальных уравнений

Вернёмся к системе (2). Её определитель:

,

т.е. , следовательно система (2) имеет единственное решение, а функция (1) одну стационарную точку . Чтобы исследовать эту точку, найдём значения вторых производных функции (1) в этой точке:

, , .

Определитель, составленный из этих чисел

,

значит в точке есть экстремум, а так как , то этот экстремум – минимум.

Итак, задача минимизации функции всегда имеет единственное решение.

Пример. Результаты измерений приведены в таблице:

–1            
             

Используя метод наименьших квадратов, определить “наилучшие” значения параметров линейной функции .

Решение. Вычислим коэффициенты системы нормальных уравнений (2):

, , , .

Составим систему:

Её решение: , . Линейная функция, которая “наилучшим” образом описывает результаты измерений, имеет вид:

.

 


Дата добавления: 2015-07-24; просмотров: 114 | Нарушение авторских прав


Читайте в этой же книге: Предел функции нескольких переменных. Непрерывность | Частные производные | Дифференцируемость и полный дифференциал | Производные сложных функций | Сущестование и дифференцируемость неявной функции | Касательная к кривой в пространстве | Касательная плоскость к поверхности | Производные высших порядков | Экстремумы функции нескольких переменных | Наибольшее и наименьшее значения функции в области |
<== предыдущая страница | следующая страница ==>
Производная по направлению. Градиент| БИОЛОГИЧЕСКОЕ И СЕКСУАЛЬНАЯ НАУКА ФРЕЙДА

mybiblioteka.su - 2015-2024 год. (0.008 сек.)