Metody optymalizacji Wykład 1b /2016

Slides:



Advertisements
Podobne prezentacje
Metody badania stabilności Lapunowa
Advertisements

Nieliniowa metoda najmniejszych kwadratów
Systemy stacjonarne i niestacjonarne (Time-invariant and Time-varing systems) Mówimy, że system jest stacjonarny, jeżeli dowolne przesunięcie czasu  dla.
Wybrane zastosowania programowania liniowego
Nie-archimedesowe (leksykograficzne) PZ
Programowanie matematyczne
Metoda simpleks Simpleks jest uniwersalną metodą rozwiązywania zadań programowania liniowego. Jest to metoda iteracyjnego poprawiania wstępnego rozwiązania.
Badania operacyjne. Wykład 2
Ü     warunkiem koniecznym istnienia ekstremum funkcji jest by pierwsze pochodne spełniały warunek:
Wykład 2 Pole skalarne i wektorowe
Metody Sztucznej Inteligencji w Sterowaniu 2009/2010Optymalizacja miary efektywności działania sztucznych sieci neuronowych Dr hab. inż. Kazimierz Duzinkiewicz,
Nieliniowa metoda najmniejszych kwadratów
Modele problemów decyzyjnych – przykłady
Komputerowe Wspomaganie Decyzji 2007/2008 Modele problemów decyzyjnych – przykłady II Dr hab. inż. Kazimierz Duzinkiewicz, Katedra Inżynierii Systemów.
Komputerowe Wspomaganie Decyzji 2010/2011 Zagadnienia wielocelowe II Dr hab. inż. Kazimierz Duzinkiewicz, Katedra Inżynierii Systemów Sterowania 1 Metody.
Liniowe modele decyzyjne – rozwiązania i analiza post-optymalizacyjna
Metoda simpleks opracowanie na podstawie „Metody wspomagające podejmowanie decyzji w zarządzaniu” D. Witkowska, Menadżer Łódź Simpleks jest uniwersalną.
Analiza matematyczna - Badanie przebiegu zmienności funkcji wykład IV
6. Pochodne cząstkowe funkcji n zmiennych
OPORNOŚĆ HYDRAULICZNA, CHARAKTERYSTYKA PRZEPŁYWU
Metody Symulacyjne w Telekomunikacji (MEST) Wykład 6/7: Analiza statystyczna wyników symulacyjnych  Dr inż. Halina Tarasiuk
Stabilność Stabilność to jedna z najważniejszych właściwości systemów dynamicznych W większości przypadków, stabilność jest warunkiem koniecznym praktycznego.
Metody Lapunowa badania stabilności
Optymalizacja liniowa
Podstawy analizy matematycznej II
Obserwatory zredukowane
Stabilność Stabilność to jedno z najważniejszych pojęć teorii sterowania W większości przypadków, stabilność jest warunkiem koniecznym praktycznego zastosowania.
Rozważaliśmy w dziedzinie czasu zachowanie się w przedziale czasu od t0 do t obiektu dynamicznego opisywanego równaniem różniczkowym Obiekt u(t) y(t) (1a)
Zadanie programowania liniowego PL dla ograniczeń mniejszościowych
Krzysztof Kucab Rzeszów, 2012
Elementy Rachunku Prawdopodobieństwa i Statystyki
Zadanie programowania liniowego PL dla ograniczeń mniejszościowych
Zakładamy a priori istnienie rozwiązania α układu równań.
Wykład 2. Pojęcie regularnego odwzorowania powierzchni w powierzchnię i odwzorowania kartograficznego Wykład 2. Pojęcie regularnego odwzorowania powierzchni.
Technika optymalizacji
Modelowanie i Identyfikacja 2011/2012 Metoda propagacji wstecznej Dr hab. inż. Kazimierz Duzinkiewicz, Katedra Inżynierii Systemów Sterowania 1 Warstwowe.
Modelowanie i identyfikacja 2010/2011Optymalizacja miary efektywności działania sztucznych sieci neuronowych Dr hab. inż. Kazimierz Duzinkiewicz, Katedra.
Miary efektywności/miary dobroci/kryteria jakości działania SSN
Teoria sterowania 2011/2012Stabilno ść Kazimierz Duzinkiewicz, dr hab. in ż. Katedra In ż ynierii Systemów Sterowania 1 Stabilność Stabilność to jedno.
Krzysztof Kucab Rzeszów, 2012
II. Matematyczne podstawy MK
Dana jest sieć dystrybucji wody w postaci: Ø      m- węzłów,
Sterowanie – metody alokacji biegunów II
Stabilność Stabilność to jedno z najważniejszych pojęć dynamiki systemów i teorii sterowania W większości przypadków, stabilność jest warunkiem koniecznym.
MS Excel - wspomaganie decyzji
Ekonometryczne modele nieliniowe
Zagadnienie i algorytm transportowy
WYKŁAD 5 OPTYKA FALOWA OSCYLACJE I FALE
Wydział Elektroniki PWr AiR III r. Metody numeryczne i optymalizacja Dr inż. Ewa Szlachcic Wykład 3 Właściwe minimum lokalne: Funkcja f(x) ma w punkcie.
Ruch jednowymiarowy Ruch - zmiana położenia jednych ciał względem innych, które nazywamy układem odniesienia. Uwaga: to samo ciało może poruszać się względem.
Warstwowe sieci jednokierunkowe – perceptrony wielowarstwowe
Wykład Rozwinięcie potencjału znanego rozkładu ładunków na szereg momentów multipolowych w układzie sferycznym Rozwinięcia tego można dokonać stosując.
Metody sztucznej inteligencji – technologie rozmyte i neuronoweReguła propagacji wstecznej  Dr hab. inż. Kazimierz Duzinkiewicz, Katedra Inżynierii Systemów.
Ruch – jedno w najczęściej obserwowanych zjawisk fizycznych
Podstawy automatyki I Wykład /2016
1 Metody optymalizacji - Energetyka 2015/2016 Podstawy matematyczne metod optymalizacji © Kazimierz Duzinkiewicz, dr hab. inż. Katedra Inżynierii Systemów.
Niech f(x,y,z) będzie ciągłą, różniczkowalną funkcją współrzędnych. Wektor zdefiniowany jako nazywamy gradientem funkcji f. Wektor charakteryzuje zmienność.
Metody sztucznej inteligencji - Technologie rozmyte i neuronowe 2015/2016 Systemy rozmyte – wnioskowanie Mamdani’ego II © Kazimierz Duzinkiewicz, dr hab.
Treść dzisiejszego wykładu l Postać standardowa zadania PL. l Zmienne dodatkowe w zadaniu PL. l Metoda simpleks –wymagania metody simpleks, –tablica simpleksowa.
Metody optymalizacji Wykład /2016
Struktury i algorytmy wspomagania decyzji
Modelowanie i podstawy identyfikacji
Metody optymalizacji Materiał wykładowy /2017
(x1, x2) – decyzja (zmienne decyzyjne)
Teoria sterowania Wykład /2016
Metody matematyczne w Inżynierii Chemicznej
Jednorównaniowy model regresji liniowej
Teoria sterowania Materiał wykładowy /2017
Sterowanie procesami ciągłymi
Hiperpowierzchnia energii potencjalnej cząsteczki
Zapis prezentacji:

Metody optymalizacji Wykład 1b - 2015/2016 Energetyka - studia stacjonarne I stopnia Kazimierz Duzinkiewicz, dr hab. inż. Katedra Inżynierii Systemów Sterowania Wykład 1b - 2015/2016 Podstawy matematyczne metod optymalizacji

Czym jest optymalizacja? Optymalizacja jest procesem (i) formułowania i (ii) rozwiązywania problemu optymalizacyjnego o następującej ogólnej postaci spełniając ograniczenia gdzie , oraz są funkcjami skalarnymi wektora

Przykłady formułowania problemów optymalizacyjnych 1. Opis werbalny problemu Należy zaprojektować puszkę, która może pomieścić co najmniej 400 ml (1ml=1cm3) cieczy, spełniając przy tym inne wymagania projektowe. Puszka ma być produkowana w bardzo dużych ilościach, zatem pożądana jest minimalizacja kosztów jej wytworzenia. Ponieważ koszt wytworzenia może być odniesiony bezpośrednio do powierzchni zużytego materiału, rozsądnym jest minimalizować ilość materiału potrzebnego do produkcji puszki. Produkcja, użytkowanie, estetyka i względy transportowe nakładają następujące wymagania na rozmiary puszki: średnica nie powinna być większa niż 8 cm i mniejsza niż 3,5 cm, a wysokość powinna być nie większa niż 18 cm i nie mniejsza niż 8 cm. 2. Zebranie danych i informacji Zawarte są w opisie problemu 3. Zdefiniowanie zmiennych decyzyjnych Definiujemy dwie zmienne decyzyjne:

4. Określenie kryterium, które ma być optymalizowane Projekt puszki ma być taki, aby minimalizował jej powierzchnię boczną S składającą się z powierzchni ścianki bocznej i dwóch denek 5. Określenie ograniczeń Pierwsze ograniczenie – puszka musi pomieścić co najmniej 400cm3 cieczy Druga grupa ograniczeń – wymiary puszki muszą mieścić się w okrteślonych przedziałach Charakterystyka zadania: - zadanie optymalizacji nieliniowej - z ograniczeniami - zmienne decyzyjne rzeczywistoliczbowe

Przykład 2: 1. Opis werbalny problemu Celem projektu jest określenie grubości izolacji zbiornika kulistego t minimalizującej koszty chłodzenia tego zbiornika w okresie jego cyklu życia. Koszty chłodzenia obejmują koszty instalacji i eksploatacji wyposażenia chłodniczego oraz koszty instalacji izolacji. Założony został 10 letni cykl życia, 10% oprocentowanie w stosunku rocznym i zerową wartość instalacji na końcu użytkowania. Zbiornik jest już zaprojektowany i jego średnica wynosi r [m]. 2. Zebranie danych i informacji Aby obliczyć objętość materiału izolacyjnego należy znać powierzchnię kulistego zbiornika Aby obliczyć wydajność wyposażenia chłodniczego i koszt jego eksploatacji należy znać roczny ubytek ciepła ze zbiornika - średnia różnica pomiędzy temperaturami wewnętrzną i zewnętrzną - oporność cieplna na jednostkę grubości - grubość izolacji

Niech ponadto: - koszt jednostkowy izolacji (j.p. – jednostka pieniężna) na jednostkę objętości - koszt jednostkowy wyposażenia chłodniczego na jednostkę energii - roczny koszt jednostkowy eksploatacji wyposażenia chłodniczego na jednostkę energii 3. Zdefiniowanie zmiennych decyzyjnych - grubość izolacji

4. Określenie kryterium, które ma być optymalizowane Celem jest minimalizacja kosztów chłodzenia zbiornika kulistego w okresie 10 lat. Koszt ten w okresie cyklu życia ma trzy składowe: - koszt instalacji izolacji (zakup i montaż) - koszt instalacji wyposażenia chłodniczego - koszt eksploatacji w okresie 10 lat Koszt eksploatacji należy sprowadzić do kosztów bieżących korzystając ze współczynnika bieżącej wartości (USPWF – Uniform Series Present Worth Factor) - stopa procentowa - liczba rocznych wpłat

Można założyć, że grubość izolacji jest znacznie mniejsza od promienia zbiornika Optymalizowany koszt wyrazi się wówczas 5. Określenie ograniczeń Przyjąć należy, że grubość izolacji nie może być mniejsza od pewnej granicznej wartości izolacji dostępnej na rynku Policzymy przed podaniem ostatecznego sformułowania zadania

Ostateczne sformułowanie zadania: Dane: Znaleźć: Minimalizując: gdzie: Spełniając ograniczenie: Charakterystyka zadania: - zadanie optymalizacji nieliniowej - z ograniczeniami - zmienna decyzyjna rzeczywistoliczbowa

Zdolność przerobowa/dzień Przykład 3: 1. Opis werbalny problemu Firma posiada dwa tartaki i dwa lasy. Tablica poniżej podaje zdolności przerobowe [kłody/dzień] i odległości pomiędzy lasami i tartakami [km]. Z każdego lasu można pozyskać do 200 kłód/dzień w rozważanym okresie czasu a koszt transportu kłód został oszacowany na 0.15 [j.p./(km·kłoda)]. Istnieje zapotrzebowanie na cięcie co najmniej 300 kłód dziennie. Firma chciałaby minimalizować koszty transportu kłód każdego dnia. Tablica 1. Odległość, km Tartak Las 1 Las 2 Zdolność przerobowa/dzień kłód

Tartak A Las 1 Las 2 Tartak B x1A x1B x2B x2A 2. Zebranie danych i informacji Zawarte są w opisie problemu i Tablicy 3. Zdefiniowanie zmiennych decyzyjnych Celem projektu jest określenie ile kłód należy przewieźć z Lasu i do Tartaku j, zatem - liczba kłód przewożonych z Lasu 1 do Tartaku A - liczba kłód przewożonych z Lasu 1 do Tartaku B - liczba kłód przewożonych z Lasu 2 do Tartaku A - liczba kłód przewożonych z Lasu 2 do Tartaku B

4. Określenie kryterium, które ma być optymalizowane Optymalizowany koszt transportu wyraża się 5. Określenie ograniczeń Pierwsza grupa ograniczeń związana jest z ze zdolnościami przerobowymi tartaków Druga grupa ograniczeń związana jest z możliwościami pozyskiwania drewna z lasów

Trzecia grupa ograniczeń związana jest z zapotrzebowaniem na pocięte kłody Czwarta grupa ograniczeń to warunki nieujemności Charakterystyka zadania: - zadanie optymalizacji liniowej - z ograniczeniami - zmienne decyzyjna całkowitoliczbowa

Inne przykłady podczas ćwiczeń laboratoryjnych

II etap procesu optymalizacji: (ii) rozwiązywanie problemu optymalizacyjnego o następującej ogólnej postaci spełniając ograniczenia gdzie , oraz są funkcjami skalarnymi wektora Krócej będziemy dla potrzeb wykładu pisali gdzie jest obszarem dopuszczalnym

Twierdzenie 1: Zadanie optymalizacyjne z funkcją celu jest równoważne zadaniu optymalizacyjnemu z funkcją celu Jest przy tym spełniona zależność:

Przykład 1: spełniając spełniając x x z’ x x z

Twierdzenie 2: Jeżeli w zadaniu optymalizacyjnym zastąpimy funkcję celu postaci funkcją celu postaci to rozwiązanie optymalne, o ile ono istnieje, dla obu zadań będzie identyczne

 Minimum globalne silne: Punkt jest unikatowym minimum globalnym silnym funkcjonału jeżeli zachodzi , dla wszystkich  Minimum globalne słabe: Punkt jest minimum globalnym słabym funkcjonału jeżeli zachodzi , dla wszystkich

Minimum globalne silne Przykład 2: Minimum globalne silne

Przykład 3: Minimum globalne słabe Minimum globalne słabe wzdłuż prostej x1 = 0

 Minimum lokalne silne: Punkt jest minimum lokalnym silnym funkcjonału jeżeli istnieje skalar taki, że zachodzi , dla wszystkich takich, że ,  Minimum lokalne słabe: Punkt jest minimum lokalnym słabym funkcjonału a istnieje skalar , jeżeli taki, że zachodzi , dla wszystkich takich, że nie jest minimum silnym ,

Maksimum lokalne silne Przykład 4: Minima lokalne silne Maksimum lokalne silne Minimum globalne silne Maksimum lokalne silne Minimum lokalne silne Minimum globalne silne

Przykład 5: Minima lokalne silne Minimum globalne silne Minimum lokalne silne Punkt siodłowy Minimum globalne Punkt siodłowy

Przykład 6: Minima lokalne silne Minimum globalne

Kiedy minimum lokalne na pewno jest minimum globalnym? x x z z x

Zbiory wypukłe Zbiór S jest zbiorem wypukłym, jeżeli odcinek łączący jego dowolne dwa punkty zawiera się całkowicie w zbiorze S Matematycznie, S jest zbiorem wypukłym, jeżeli dla dowolnych dwóch punktów/wektorów punkt/wektor dla

Funkcja wypukła Funkcja jest ściśle wypukła na zbiorze S jeżeli dla dowolnych dwóch punktów

Funkcja wklęsła Funkcja jest ściśle wklęsła na zbiorze S, jeżeli jest ściśle wypukła

Pierwsza pochodna (nachylenie) funkcjonału wzdłuż osi Jeżeli , to znaczy posiada ciągłe pierwsze pochodne cząstkowe to gradient jest definiowany Pierwsza pochodna (nachylenie) funkcjonału wzdłuż osi : - i-ty element gradientu Pierwsza pochodna (nachylenie) funkcjonału wzdłuż wektora :

Przykład 7:

Ilustracja graficzna: Pochodne kierunkowe: Pochodne kierunkowe: 1.4 1.3 1.0 0.5 0.0

Przykład 8:

Ilustracja graficzna: 2.4 Pochodne kierunkowe:

gradient funkcjonału (jakobian) Warto pamiętać, że:  Kierunek gradientu w punkcie x pokrywa się z kierunkiem normalnej do powierzchni stałej wartości funkcjonału przechodzącej przez punkt x.  Zwrot gradientu w punkcie x odpowiada zwrotowi najszybszego wzrostu wartości funkcjonału w otoczeniu punktu x.

Druga pochodna (krzywizna) funkcjonału wzdłuż osi Hesian funkcjonału hessian funkcjonału Druga pochodna (krzywizna) funkcjonału wzdłuż osi : - (i,i)-ty element hessianu

Druga pochodna (krzywizna) funkcjonału wzdłuż wektora Krzywizna określa jak szybko zmienia się gradient w wybranym (wskazanym) punkcie Druga pochodna (krzywizna) funkcjonału wzdłuż wektora :

Optymalność  Warunki konieczne minimum Rozwinięcie , takiego, że w szereg Taylor’a w otoczeniu

Optymalność  Warunki konieczne minimum (silnego lub słabego)  Warunek konieczny pierwszego rzędu: Jeżeli x* jest punktem lokalnego minimum i F jest różniczkowalne w sposób ciągły w otwartym otoczeniu x*, wówczas  Warunek punktu stacjonarnego – zerowanie się gradientu

Optymalność  Warunek konieczny drugiego rzędu: Jeżeli x* jest punktem lokalnego minimum i 2F jest ciągłe w pewnym otwartym otoczeniu x*, wówczas dla dowolnych  Warunek dodatniej półokreśloności hessianu dla punktu stacjonarnego

mimo, że składnik drugiego rzędu w szeregu Taylor’a wynosi zero, Optymalność Dodatnia określoność macierzy hessianu jest warunkiem wystarczającym drugiego rzędu istnienia minimum silnego w mimo, że składnik drugiego rzędu w szeregu Taylor’a wynosi zero, może istnieć Nie jest to warunek konieczny. Minimum silne w ale składnik trzeciego rzędu jest dodatni

Przykład 9: Warunek punktu stacjonarnego Punkt stacjonarny - jedyny Sprawdzenie warunków rzędu drugiego

Punkt x*=0 spełnia warunki konieczne pierwszego i drugiego rzędu dla minimum

Warunki określoności macierzy hessianu można badać przez sprawdzenie wartości własnych tej macierzy Macierz hessianu jest dodatnio określona, jeżeli wszystkie jej wartości własne są dodatnie Macierz hessianu jest dodatnio półokreślona, jeżeli wszystkie jej wartości własne są nieujemne

Przykład 10: Warunek punkt stacjonarnego Punkt stacjonarny - jedyny Sprawdzenie warunków rzędu drugiego

Pozyskanie informacji o określoności macierzy hessianu Nie można stwierdzić czy macierz hessianu jest dodatnio określona lub dodatnio półokreślona

Wartości własne hessianu

Minimum silne (globalne) w

 Warunki wystarczające minimum  Warunek drugiego rzędu: Jeżeli dla pewnego x*, 2F jest ciągłe w pewnym otwartym jego otoczeniu i F(x*) = 0 i 2F(x*) jest dodatnio określona, wówczas x* jest silnym minimum lokalnym  Warunek globalnego minimum Jeżeli F jest funkcją wypukłą, wówczas każde minimum lokalne jest minimum globalnym

– koniec materiału prezentowanego podczas wykładu Dziękuję za uwagę – koniec materiału prezentowanego podczas wykładu