How Machines Learn
Πίνακας περιεχομένων:
- Η άνοδος του πλανήτη του AI
- Ενίσχυση της μάθησης
- Πώς είναι διαφορετικό από το φυσιολογικό Bot;
- Ανταμοιβές και τιμωρίες
- Γιατί δεν υπάρχουν ακόμη αυτοκίνητα χωρίς οδηγό;
- Το μέλλον
Την περασμένη εβδομάδα, η ιστορία δημιουργήθηκε στις σφαίρες της Dota 2 και της AI. Στο The International, ο Dendi, ένας από τους καλύτερους παίκτες του παιχνιδιού, χτυπήθηκε ανελέητα σε ένα 1v1, από ένα bot, δύο φορές στη σειρά. Το εν λόγω bot έγινε από την OpenAI, μια εκκίνηση του Elon Musk.

Τώρα μπορεί να έχετε κάποιες ερωτήσεις. Τι είναι η Dota; Τι είναι το OpenAI; Και γιατί είναι αυτό ακόμη σημαντικό; Αρχικά, η Dota είναι ένα παιχνίδι MOBA ελεύθερο για παιχνίδι στο οποίο ελέγχετε τους ήρωες και ο στόχος σας είναι να καταστρέψετε τους αρχαίους αντιπάλους. Πολλοί οπαδοί της Dota μπορούν να παραβιάζουν την τελευταία φράση, καθώς υπάρχουν τόσα πολλά για τη Dota, τότε έχω συνοψίσει.
Το παιχνίδι είναι πολύ σύνθετο με μια πολύ απότομη καμπύλη μάθησης σε αυτό. Είχα ξεκινήσει μια αποστολή να μάθω τη Dota πριν από λίγο καιρό και μου πήρε μια εβδομάδα μόνο για να περάσω από ένα βασικό βίντεο How To, όπου εξηγούν τη στρατηγική του παιχνιδιού, ποια όπλα, ξόρκια, ήρωες κάνουν και πώς να πετάξουν. Και αυτό κάνει ολόκληρο το AI vs Dendi μάχη σημαντικό επειδή δείχνει πόσο προηγμένη AI και ML έχει γίνει. Ας δούμε λοιπόν τι τροφοδοτεί αυτό το bot και χρειάζεται να φοβόμαστε για την εξέγερση του AI.
Η άνοδος του πλανήτη του AI
Το AI που γίνεται Skynet είναι ένα συζητήσιμο πρόβλημα. Ο Elon Musk πιστεύει ότι αν δεν τηρείται υπό έλεγχο, ένα σενάριο όπως το Skynet είναι πιθανό να συμβεί. Από την άλλη πλευρά, ο Mark Zuckerberg λέει ότι το AI είναι ακίνδυνο και δεν θα προκαλέσει σκηνικό Doomsday. Ο Elon Musk ξεκίνησε το OpenAI με αυτόν τον στόχο.
Για να αποφευχθεί η κακή χρήση του AI και η έρευνα για AI που δεν θα στρέψει εναντίον μας. Και είμαι στο πλευρό του.
Αλλά αυτό δεν είμαστε εδώ για να συζητήσουμε. Το κύριο θέμα είναι να γνωρίζουμε τι τροφοδοτεί το bot από το OpenAI. Για να το καταλάβω, διάβασα μερικά ερευνητικά έγγραφα και ιστολόγια για το θέμα και επίσης επικοινωνήσαμε με τον φίλο μου Anmol Sharma που είναι ερευνητής AI & ML.
Ενίσχυση της μάθησης
Αυτό είναι το όνομα της τεχνολογίας πίσω από το Dota bot της OpenAI. Αλλά πριν το βάλουμε σε αυτό, πρέπει να καταλάβουμε πώς λειτουργεί γενικά το AI, ή ειδικά το AI στα Βιντεοπαιχνίδια. Το AI είναι ένας πολύ σημαντικός πίνακας και περιέχει πολλά θέματα όπως το Machine Learning, Deep Learning και Νευρωνικά Δίκτυα για να αναφέρουμε μερικά. Για να καθορίσουμε με ακρίβεια το AI, μπορούμε να πούμε ότι είναι η ικανότητα ενός υπολογιστή να μαθαίνει από πληροφορίες και να λαμβάνει αποφάσεις με βάση τη μάθησή του. Όσο περισσότερο μαθαίνει, τόσο περισσότερο είναι η ορθότητα της απόφασης αυξάνεται.
Πώς είναι διαφορετικό από το φυσιολογικό Bot;
Τα bots στα γενικά βιντεοπαιχνίδια μπορεί να φαίνονται σαν να είναι έξυπνα αλλά δεν είναι μια πραγματική μορφή AI. Σχεδόν όλα αυτά τα bots στα παιχνίδια προγραμματίζονται με βάση το set If..This.. Then..That δηλώσεις. Απλώς ακολουθούν τις δηλώσεις και αναλαμβάνουν ενέργειες βάσει των όρων που περιγράφονται στη δήλωση.

Πάνω έχω δείξει ένα πολύ απλό παράδειγμα. Οι δηλώσεις σε πραγματικά παιχνίδια είναι πολύ πιο πολύπλοκες με συνθήκες εντός των συνθηκών. Όσο πιο συγκεκριμένα και λεπτομερέστερα είναι αυτές οι δηλώσεις, τόσο περισσότερο το bot θα φαίνεται να είναι έξυπνο.
Ανταμοιβές και τιμωρίες
Στο AI lingo, αυτό που ονομάζουμε bot είναι γνωστό ως Agent. Ο στόχος είναι να κάνει ο πράκτορας να μάθει ό, τι θέλουμε να μάθει. Ο πράκτορας μαθαίνει με την ίδια μέθοδο που μαθαίνει το σκυλί σας, μέσω ανταμοιβών και τιμωριών. Κάθε φορά που ο πράκτορας κάνει ένα λάθος, τιμωρείται και κάθε φορά που κάνει τη σωστή εικασία ή δίνει σωστή απάντηση, ανταμείβεται. Μέσα από αυτό το σύστημα, ο πράκτορας μαθαίνει να συνδέει τις ενέργειες που δεν πρέπει να κάνει για να αποφύγει την ποινή και να εκτελέσει τη δράση (ή παρόμοιες ενέργειες) που δίνουν ανταμοιβές.

Εάν το σκεφτείτε από κοντά, είναι ακριβώς όπως να κάνετε αποφάσεις που βασίζονται σε συγκεκριμένες συνθήκες, όπως κάνουν οι αλγόριθμοι. Όπως έχω δείξει παραπάνω, ένα bot bot, που έρχεται σε ένα εκρηκτικό βαρέλι, θα αναλάβει δράση σύμφωνα με τον αλγόριθμο. Οι αλγόριθμοι στο AI, προφανώς είναι πολύ περίπλοκοι από αυτό, γεγονός που καθιστά το σύστημα όλο νοητό.
Έρχομαι στο OpenAI bot μας, σύμφωνα με τους προγραμματιστές, έμαθε όλο το παιχνίδι σε χρόνο 2 εβδομάδων. Σε όλη τη διάρκεια των 2 εβδομάδων, ήταν online 24 × 7 και παίζει εναντίον ενός αντιγράφου του. Αυτό είναι ένα αξιοσημείωτο ορόσημο λαμβάνοντας υπόψη την πολυπλοκότητα του παιχνιδιού και το γεγονός ότι θα μπορούσε να νικήσει τον Dendi.
Γιατί δεν υπάρχουν ακόμη αυτοκίνητα χωρίς οδηγό;
Αυτό ήταν ένα από τα πρώτα ερωτήματα που έπεσαν στο μυαλό μου όταν άκουσα για όλο αυτό το γεγονός. Εάν ένα bot μπορεί να μάθει ένα τέτοιο παιχνίδι και να εκπαιδεύσει τον εαυτό του σε ένα σημείο να νικήσει τους κορυφαίους παίκτες, γιατί ακόμα φτάνουμε στον τροχό. Και αυτό ήταν το ίδιο ερώτημα που πυροβόλησα στο φίλο μου, τον κ. Anmol Sharma, ο οποίος έχει επίσης ερευνήσει αυτοκίνητα χωρίς κίνηση. Αυτό έπρεπε να πει.
Σε ένα παιχνίδι, που αναπτύσσεται από έναν άνθρωπο, ο αριθμός των μεταβλητών είναι μικρότερος. Επιπλέον, αν ο πράκτορας (bot) κάνει λάθος, η χειρότερη ποινή είναι μια στρογγυλή απώλεια. Στον πραγματικό κόσμο, ένα λάθος είναι ο θάνατος.
Παρόλο που η Dota είναι ένα πολύπλοκο παιχνίδι, οι πιθανοί συνδυασμοί κινήσεων, ξόρκων και τακτικών, αν και ακόμα παράλογα μεγάλων, εξακολουθούν να είναι περιορισμένοι. Και τα λάθη επιτρέπονται χωρίς καμία πραγματική ποινή. Αλλά σε περίπτωση ενός πράκτορα αυτοκινήτων χωρίς οδηγό, τα λάθη μπορούν να οδηγήσουν σε επικίνδυνα ατυχήματα και ακόμη και θάνατο.

Στον πραγματικό κόσμο, ο αριθμός των μεταβλητών που ο πράκτορας πρέπει να παρακολουθεί είναι ατελείωτος και οι καταστάσεις που προκύπτουν εξαιτίας αυτών των μεταβλητών, όπως ένα άλλο αυτοκίνητο που μεταβάλλει ξαφνικά τη λωρίδα, το άλμα πεζών μπροστά από το αυτοκίνητο, είναι επίσης ατελείωτες. Επιπλέον, όπως το έθεσε ο Jeremy Clarkson, θα πρέπει να κάνουν ηθικές και ηθικές αποφάσεις όταν βρίσκονται στα πρόθυρα ενός άμεσου ατυχήματος (αν και η θεωρία του δεν είναι έγκυρη).
Το μέλλον
Γνωρίζουμε ήδη το ανθρώπινο ελεγχόμενο ρομπότ που εκτελεί ενδογενείς χειρουργικές επεμβάσεις. Το επόμενο άλμα είναι τα ρομπότ που ελέγχονται από την AI και τα εκτελούν. Και αυτό είναι μόνο στον ιατρικό τομέα. Η AI θα είναι σίγουρα η κυρίαρχη νέα τεχνολογία στην επόμενη δεκαετία σε πολλούς τομείς. Αλλά, το AI μπορεί επίσης να χρησιμοποιηθεί για κακόβουλους σκοπούς, όπως οι επιθέσεις DDoS, Ransomware Bots και η πειρατεία άλλων υπολογιστών ή συστημάτων εταιρειών.

Σε ό, τι αφορά την Dota και άλλα παιχνίδια, μπορούμε να περιμένουμε να δούμε τέτοια νοήμονα bots να γίνονται και για άλλα παιχνίδια, εναντίον των οποίων οι παίκτες μπορούν να εκπαιδεύσουν ακόμα καλύτερα. Και ανέφερα ότι το OpenAI θα κάνει 5v5 στο Διεθνή Διεθνή; Συνεπώς, είμαι έτοιμος να βουρτσίσω τις ικανότητές μου Dota για να νικήσω τουλάχιστον τα ενσωματωμένα bots. Θεία Rapier εδώ έρχομαι!
Οι ερευνητές του Invisible Things Labs Rafal Wojtczuk και Joanna Rutkowska δήλωσαν ότι έχουν δημιουργήσει λογισμικό που μπορεί να «υπονομεύσει την ακεραιότητα» του λογισμικού που φορτώνεται με την Trusted Execution Technology (TXT) που αποτελεί μέρος της πλατφόρμας επεξεργαστή vPro της Intel. Αυτό είναι άσχημα νέα, επειδή το TXT υποτίθεται ότι βοηθά στην προστασία του λογισμικού - ενός προγράμματος που τρέχει μέσα σε μια εικονική μηχανή, για παράδειγμα - από το να το βλέπει κανείς ή να το παραβι
Παρόλο που σχεδόν κανένα λογισμικό δεν χρησιμοποιεί την τεχνολογία TXT σήμερα, η έρευνα θα μπορούσε να έχει σημασία για τις εταιρείες υπολογιστών και τις κυβερνητικές υπηρεσίες που σκέφτονται να το χρησιμοποιήσουν
Αν ψάχνετε να εντοπίσετε χειροκίνητα το Spyware ή να επιταχύνετε την εκκίνηση του συστήματος - και είστε ένας τεχνάτης ευφυής χρήστης που είναι άνετος με τις ρυθμίσεις του Registry - τότε το δωρεάν RunAlyzer μπορεί να είναι ακριβώς αυτό που χρειάζεστε. Εκτελέστε το και εκτελεί μια εμπεριστατωμένη και εξελιγμένη ανάλυση όλων των προγραμμάτων και υπηρεσιών που εκτελούνται κατά την εκκίνηση του υπολογιστή σας και σας παρουσιάζει λεπτομέρειες για κάθε μια από τις ρυθμίσεις του Registry που τις εκκιν
Το RunAlyzer βοηθάει τους τεχνάτες να επιταχύνουν την εκκίνηση του συστήματος και αναζητούν τα συστήματά τους για spyware.
6 Δικαιώματα και εξουσίες που απολαμβάνουν οι διαχειριστές ομάδων που προσφέρουν
Ο διαχειριστής είναι ο επικεφαλής της ομάδας WhatsApp. Ελέγξτε τη θέση για να μάθετε για τα δικαιώματα και τις εξουσίες του διαχειριστή έναντι των άλλων.







