Olympia Nikou1 Τίτλος Παρουσίασης: Προσεγγιστικός Υπολογισμός των λύσεων ενός προβλήματος με: Δειγματοληψία στον χώρο αναζήτησης των λύσεων.

Slides:



Advertisements
Παρόμοιες παρουσιάσεις
Πιθανότητες & Τυχαία Σήματα
Advertisements

ΜΑΘΗΜΑΤΙΚΑ ΚΑΤΕΥΘΥΝΣΗΣ
Πιθανοκρατικοί Αλγόριθμοι
Πιθανότητες & Τυχαία Σήματα Συσχέτιση
Επίπεδα Γραφήματα : Προβλήματα και Υπολογιστική Πολυπλοκότητα TexPoint fonts used in EMF. Read the TexPoint manual before you delete this box.: AA A AA.
Πολυπλοκότητα Παράμετροι της αποδοτικότητας ενός αλγόριθμου:
Δομές Αναζήτησης TexPoint fonts used in EMF. Read the TexPoint manual before you delete this box.: AA A A A εισαγωγή αναζήτησηεπιλογή διατεταγμένος πίνακας.
Μια Μπεϋζιανή Μέθοδος για την Επαγωγή Πιθανοτικών Δικτύων από Δεδομένα ΠΑΝΕΠΙΣΤΗΜΙΟ ΠΑΤΡΩΝ ΤΜΗΜΑ ΜΗΧ/ΚΩΝ Η/Υ & ΠΛΗΡΟΦΟΡΙΚΗΣ B. Μεγαλοοικονόμου, Χ. Μακρής.
Εισαγωγικές Έννοιες Διδάσκοντες: Σ. Ζάχος, Δ. Φωτάκης Επιμέλεια διαφανειών: Δ. Φωτάκης Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστών Εθνικό Μετσόβιο.
Αναγνώριση Προτύπων.
Παραγωγή τυχαίων γεωμετρικών δομών Παναγιώτης Τίγκας Ενδιάμεση εξέταση πτυχιακής εργασίας.
Γραφήματα & Επίπεδα Γραφήματα
Διαίρει και Βασίλευε πρόβλημα μεγέθους Ν διάσπαση πρόβλημα μεγέθους Ν-k πρόβλημα μεγέθους k.
Κοντινότεροι Κοινοί Πρόγονοι α βγ θ δεζ η π ν ι κλμ ρσ τ κκπ(λ,ι)=α, κκπ(τ,σ)=ν, κκπ(λ,π)=η κκπ(π,σ)=γ, κκπ(ξ,ο)=κ ξο κκπ(ι,ξ)=β, κκπ(τ,θ)=θ, κκπ(ο,μ)=α.
Προσεγγιστικοί Αλγόριθμοι
Τυχαιοκρατικοί Αλγόριθμοι TexPoint fonts used in EMF. Read the TexPoint manual before you delete this box.: AA Πιθανότητες και Αλγόριθμοι Ανάλυση μέσης.
Μάθημα 2 ο : Βασικές έννοιες 1 Ακαδημαϊκό Έτος
1 Χαρακτηριστικά ενός Μ/Μ/1 συστήματος : Αφίξεις κατανεμημένες κατά Poisson Εκθετικά κατανεμημένοι χρόνοι εξυπηρέτησης Οι χρόνοι εξυπηρέτησης είναι αμοιβαία.
Ανάλυση Πολλαπλής Παλινδρόμησης
Μέθοδοι Monte Carlo Τι είναι: Οποιαδήποτε αριθμητική μέθοδος
Ανάλυση Πολλαπλής Παλινδρόμησης
Ειδικά θέματα υπολογισμού και πολυπλοκότητας Θέμα : Προσεγγιστικοί αλγόριθμοι Γαζη Ιωαννα ΑΜ:3900.
ΘΕΩΡΙΑ ΠΟΛΥΠΛΟΚΟΤΗΤΑΣ ΠΑΡΟΥΣΙΑΣΗ ΣΤΑ ΚΕΦΑΛΑΙΑ 7.4 – 7.6 NP ΠΛΗΡΟΤΗΤΑ.
ΧΡΗΜΑΤΟΔΟΤΗΣΗ ΚΑΙ ΑΞΙΟΛΟΓΗΣΗ ΕΠΕΝΔΥΣΕΩΝ ΣΤΗ ΓΕΩΡΓΙΑ
Ενεργή επιλογή αλγορίθμου, Active Algorithm Selection, Feilong Chen and Rong Jin Εύα Σιταρίδη.
Βασικές Αρχές Μέτρησης
Alpha-Beta Pruning for Games with Simultaneous Moves Abdallah Saffidine, Hilmar Finnsson, Michael Buro Παρουσίαση: Βάλβης Δημήτριος Εργασία στο μάθημα.
Probabilistically Checkable Proofs Theorem (PCP THEOREM) Ομιλητής Ασημακόπουλος (Ευ)Άγγελος.
ΘΕΩΡΙΑ ΠΟΛΥΠΛΟΚΟΤΗΤΑΣ ΠΑΡΟΥΣΙΑΣΗ ΣΤΑ ΚΕΦΑΛΑΙΑ 7.4 – 7.6 NP ΠΛΗΡΟΤΗΤΑ.
Δυναμικά Σύνολα TexPoint fonts used in EMF. Read the TexPoint manual before you delete this box.: AA A AA A A Δυναμικό σύνολο Tα στοιχεία του μεταβάλλονται.
Κ. Μόδη: Γεωστατιστική και Εφαρμογές της (Κεφάλαιο 4) 1 Από κοινού κατανομή πολλών ΤΜ Ορίζεται ως από κοινού συνάρτηση κατανομής F(x 1, …, x n ) n τυχαίων.
Χρονική Πολυπλοκότητα και Μοντέλα
Διπλωματική Εργασία Πειραματική Αξιολόγηση της Μοναδιαίας Οκνηρής Συνέπειας Τόξου (Singleton Lazy Arc Consistency) Ιωαννίδης Γιώργος (ΑΕΜ: 491)
Μέγιστη ροή TexPoint fonts used in EMF. Read the TexPoint manual before you delete this box.: AA A AA A A Συνάρτηση χωρητικότητας Κατευθυνόμενο γράφημα.
Βάσεις Δεδομένων Ευαγγελία Πιτουρά1 Λογικός Σχεδιασμός Σχεσιακών Σχημάτων.
ΚΑΤΑΝΟΜΕΣ ΠΙΘΑΝΟΤΗΤΩΝ ΔΙΑΚΡΙΤΩΝ ΚΑΙ ΣΥΝΕΧΩΝ ΤΥΧΑΙΩΝ ΜΕΤΑΒΛΗΤΩΝ
ΔΙΑΣΤΗΜΑΤΑ ΕΜΠΙΣΤΟΣΥΝΗΣ
Μηχανική Μάθηση σε Συστήματα Πολλαπλών Πρακτόρων Παπαλιάς Κωνσταντίνος Τμήμα Πληροφορικής.
Advanced Data Indexing (Προηγμένη ευρετηρίαση δεδομένων) Ροές Δεδομένων (3 ο Μέρος)
Αρχές επαγωγικής στατιστικής
Στατιστική και λογισμικά στις επιστήμες συμπεριφοράς Ενότητα 6 : Δειγματοληπτικές Κατανομές Γεράσιμος Μελετίου Ελληνική Δημοκρατία Τεχνολογικό Εκπαιδευτικό.
Στατιστική – Πειραματικός Σχεδιασμός Βασικά. Πληθυσμός – ένα μεγάλο σετ από Ν παρατηρήσεις (πιθανά δεδομένα) από το οποίο το δείγμα λαμβάνεται. Δείγμα.
Σχεδιασμός των Μεταφορών Ενότητα #5: Δειγματοληψία – Sampling. Δρ. Ναθαναήλ Ευτυχία Πολυτεχνική Σχολή Τμήμα Πολιτικών Μηχανικών.
Διαστήματα Εμπιστοσύνης α) για τη μέση τιμή β) για ένα ποσοστό.
Σήματα και Συστήματα ΙΙ Διάλεξη: Εβδομάδα Καθηγητής Πέτρος Γρουμπός Επιμέλεια παρουσίασης: Βασιλική Μπουγά 1.
 Ο Νόμος των Μεγάλων Αριθμών είναι το θεώρημα που περιγράφει τον τρόπο με τον οποίο συμπεριφέρεται ένα συγκεκριμένο πείραμα, όταν ο αριθμός των επαναλήψεων.
Αρχές επαγωγικής στατιστικής Τμήμα :Νοσηλευτικής Πατρών Διδάσκουσα: Παναγιώταρου Αλίκη Διάλεξη 9.
Έλεγχος υποθέσεων για αναλογίες. Εάν έχουμε αναλογίες σχετικά με ένα συγκεκριμένο χαρακτηριστικό σε έναν πληθυσμό τότε κάνουμε ελέγχους υποθέσεων για.
ΕΛΕΓΧΟΙ ΣΤΑΤΙΣΤΙΚΩΝ ΥΠΟΘΕΣΕΩΝ Η πιο συνηθισμένη στατιστική υπόθεση είναι η λεγόμενη Υπόθεση Μηδέν H 0. –Υποθέτουμε ότι η εμφανιζόμενη διαφορά μεταξύ μιας.
Έλεγχος Υποθέσεων Ο έλεγχος υποθέσεων αναφέρεται στη διαδικασία αποδοχής ή απόρριψης μιας στατιστικής υπόθεσης, Κατά την εκτέλεση ενός στατιστικού ελέγχου,
ΣΥΣΤΗΜΑΤΑ ΑΥΤΟΜΑΤΟΥ ΕΛΕΓΧΟΥ Ι 7 η Διάλεξη Η ΜΕΘΟΔΟΣ ΤΟΥ ΓΕΩΜΕΤΡΙΚΟΥ ΤΟΠΟΥ ΡΙΖΩΝ  Ορισμός του γεωμετρικού τόπου ριζών Αποτελεί μια συγκεκριμένη καμπύλη,
ΣΗΜΑΤΑ ΚΑΙ ΣΥΣΤΗΜΑΤΑ II Καθ. Πέτρος Π. Γρουμπός Διάλεξη 3η Μετασχηματισμός Fourier.
Σήματα και Συστήματα 11 10η διάλεξη. Σήματα και Συστήματα 12 Εισαγωγικά (1) Έστω γραμμικό σύστημα που περιγράφεται από τη σχέση: Αν η είσοδος είναι γραμμικός.
ΣΗΜΑΤΑ ΚΑΙ ΣΥΣΤΗΜΑΤΑ II Καθ. Πέτρος Π. Γρουμπός Διάλεξη 8η Στοχαστικά Σήματα - 1.
ΣΗΜΑΤΑ ΚΑΙ ΣΥΣΤΗΜΑΤΑ II Καθ. Πέτρος Π. Γρουμπός Διάλεξη 4η Δειγματοληψία.
Τι είναι «διάστημα» (1). Διαστήματα Εμπιστοσύνης α) για τη μέση τιμή (ποσοτικά) β) για ένα ποσοστό (ποιοτικά)
ΣΤΑΤΙΣΤΙΚΑ ΜΕΤΡΑ ΔΙΑΣΠΟΡΑΣ - ΑΣΥΜΜΕΤΡΙΑΣ - ΚΥΡΤΩΣΕΩΣ
ΕΙΣΑΓΩΓΗ ΣΤΟΥΣ ΕΞΕΛΙΚΤΙΚΟΥΣ ΑΛΓΟΡΙΘΜΟΥΣ
Βιομετρία - Γεωργικός Πειραματισμός
Διδάσκων: Δρ. Τσίντζα Παναγιώτα
Αλγόριθμοι - Τμήμα Πληροφορικής ΑΠΘ - Εξάμηνο 4ο
Μέγιστη ροή Κατευθυνόμενο γράφημα 12 Συνάρτηση χωρητικότητας
ΕΙΣΑΓΩΓΗ ΣΤΟΥΣ ΕΞΕΛΙΚΤΙΚΟΥΣ ΑΛΓΟΡΙΘΜΟΥΣ
Διαφορικές εξισώσεις τάξης ανώτερης της πρώτης
Αν. Καθηγητής Γεώργιος Ευθύμογλου
ΑΣΥΜΠΤΩΤΙΚΗ ΑΝΑΛΥΣΗ & ΠΡΟΣΘΕΣΗ
Στατιστικά Περιγραφικά Μέτρα
Μη Γραμμικός Προγραμματισμός
Τι είναι «διάστημα» (1). Διαστήματα Εμπιστοσύνης α) για τη μέση τιμή (ποσοτικά) β) για ένα ποσοστό (ποιοτικά)
Μη Γραμμικός Προγραμματισμός
Μεταγράφημα παρουσίασης:

Olympia Nikou1 Τίτλος Παρουσίασης: Προσεγγιστικός Υπολογισμός των λύσεων ενός προβλήματος με: Δειγματοληψία στον χώρο αναζήτησης των λύσεων.

Olympia Nikou2 Εισαγωγή: Ο υπολογισμός των λύσεων ενός προβλήματος είναι ένα γνωστό #P-complete πρόβλημα. Υπάρχουν προηγούμενες προσεγγίσεις υπολογισμού των λύσεων ενός προβλήματος βασίζονται: α) Στην επέκταση της συστηματικής αναζήτησης (systematic search-based) λυτών CSP προβλημάτων, όπως DPLL. β) Στον περιορισμό των μεταβλητών, που είναι χωρικά και χρονικά εκθετικοί αλγόριθμοι. γ) Η μέθοδος «ApproxCount» που βασίζεται στην τυχαία διαδρομή και στη δειγματοληψία Markov Chain Monte Carlo (MCMC).H μέθοδος αυτή δίνει μια καλύτερη προσέγγιση στο ακριβές πλήθος των λύσεων του προβλήματος. Στη συγκεκριμένη περίπτωση αντικαθιστούμε την MCMC δειγματολειψία με την «Importance Sampling».ΠΡΟΒΛΗΜΑ:Απευθείας εφαρμογή της Importance Sampling δεν μας δίνει καλή απόδοση.

Olympia Nikou3 Background: Για |X| = n, η ανάθεση μεταβλητής X=x, x=(x1,…,xn) δίνει μια τιμή απο το {0,1} σε κάθε μία μεταβλητή του Χ. Έστω μια φόρμουλα F = F1^...^Fm ορισμένη στο σύνολο Χ. Αν το X=x ικανοποιεί όλες τις προτάσεις της F, τότε X=x είναι λύση της F, όποτε F(x)=1, αλλιώς F(x)=0. S = {X = x|F(x) = 1}, αποτελεί το σύνολο των λύσεων της F.

Olympia Nikou4 Importance Sampling: Έστω η συνάρτηση g(x) ορισμένη στο Ω. Η importance sampling είναι η διαδικασία για τον υπολογισμό του: Έστω μια συνάρτηση επιλογής Q(x) στο Ω, τότε: που αποτελεί την αναμενόμενη τιμή της Τ.Μ. Η ιδέα της Importance Sampling είναι η δημιουργία δειγμάτων ανεξάρτητα και ίδια κατανεμημένα (x1,x2,…xN), τ.ω. g(x)>0 Q(x)>0. Μια εκτίμηση του M απο τα δείγματα είναι Τότε η αναμενόμενη τιμή θα είναι Απαραίτητη προϋπόθεση: Η Q(x) πρέπει να δειγματοληπτείται εύκολα, οπότε ορίζουμε την,οπότε μπορούμε να δημιουργήσουμε i.i.d δείγμα ανάλογα με την διάταξη O=

Olympia Nikou5 Προσεγγιστικός Υπολογισμός του πλήθους των λύσεων με χρήση της Importance Sampling: Το πλήθος των λύσεων μπορεί να γραφτεί ως: Η συνάρτηση επιλογής Q(x), που είναι ορισμένη στο Ω, πρέπει να είναι τέτοια τ.ω. F(x)>0 Q(x)>0. Απο τα δείγματα που προκύπτουν απο την Q(x), υπολογίζουμε το πλήθος των λύσεων ως εξής: οπότε το πλήθος των λύσεων προκύπτει ως εξής:

Olympia Nikou6 The Rejection Problem Η απευθείας εφαρμογή της Importance Sampling δεν μας δείνει καλές προσεγγίσεις του πλήθους των λύσεων. Στην Importance Sampling έχουμε υποθέσει οτι η Q(x) πρέπει να ικανοποιεί τη συνθήκη: F(x) > 0 Q(x) > 0. Q(x)>0 μπορεί να είναι και αν F(x)=0, τότε αν η πιθανότητα δημιουργίας ενός δείγματος, που δεν είναι λύση, είναι μεγαλύτερη απο την πιθανότητα δημιουργίας ενός δείγματος – λύση, τότε ένας μεγάλος αριθμός των δειγμάτων που θα δημιουργηθούν, θα έχουν μηδενικό βάρος (w), οπότε δεν θα συνεισφέρουν στο άθροισμα, οπότε λάθος εκτίμηση του πλήθους των λύσεων του προβλήματος (Rejection Problem). Για να ξεπεράσουμε το Rejection Problem, επαυξάνουμε την δειγματοληψία με Αναζήτηση, χρήση του Sample-Search scheme. Αντί να επιστραφεί ένα δείγμα, που θα είναι ασυνεπές, οπισθοδρομεί μέχρι να βρεί λύση.

Olympia Nikou7 Υποθέτουμε, ότι η F έχει μια λύση!

Olympia Nikou8 Η SampleSearch χρησιμοποιεί τα δείγματα, που επιστρέφει μια συνάρτηση επιλογής Q και έχει σαν αποτέλεσμα δείγματα, που είναι λύσεις της F, οπότε έχουμε: και

Olympia Nikou9 Θεώρημα 1: Δωσμένης μιας συνάρτησης επιλογής Q, οι δειγματοληπτημένες επιλογές της SampleSearch είναι μια backtrack-free επιλογή Τότε το εκτιμώμενο πλήθος των λύσεων του προβλήματος θα είναι: Επειδή όλα τα δείγματα, που δημιουργούνται απο την Sample-Search είναι λύσεις, θα ισχύει: Οπότε, το εκτιμώμενο πλήθος των λύσεων του προβλήματος θα γίνει: Οπότε, η αναμενόμενη τιμή θα ισούται με το πληθός των λύσεων:

Olympia Nikou10 Ο υπολογισμός του έχει πολυπλοκότητα Ο(n), σε περίπτωση, που το n είναι πολύ μεγάλο, ο υπολογισμός του είναι πολύ αργός. Θα υπολογίσουμε μια προσέγγιση του το, που βασίζεται στην ασυμπτωτική αμεροληψία. Μικρότερη Απόκλιση στο πλήθος των λύσεων Βασίζεται στην Markov Ανισότητα: Για κάθε Τ.Μ Χ και p>1, Χρησιμοποιούμε την ίδια λογική με μια τροποποίηση στο SampleSearch.

Olympia Nikou11 Θεώρημα (Lower Bound): Η πιθανότητα, να επιστρέψει ο SampleSearch – LB καλύτερη προσέγγιση του πλήθους των λύσεων, είναι Πειραματικά Αποτέλεσματα: Ο αλγόριθμος SampleMinisat – LB συμπεριφέρεται καλύτερα στο μέγεθος του προβλήμτος και δίνει καλύτερες προσεγγίσεις στο πραγματικό πλήθος των λύσεων του προβλήματος. Οι αλγόριθμοι SampleMinisat – exact και SampleMinisat – app είναι παρόμοιοι, αλλά σε χρόνο εκτέλεσης υπερτερεί ο SampleMinisat – app.

Olympia Nikou12