La société de recherche à but non lucratif sur l'IA OpenAI est soutenue par Peter Thiel, Elon Musk, Reed Hoffman, Mark Benioff, Sam Altman et d'autres. Il a récemment publié le modèle de prédiction de langage open source de troisième génération (GPT-3). Les modèles de langage permettent aux ordinateurs de générer des phrases aléatoires à peu près de la même longueur et de la même structure grammaticale que celles données comme motifs.
Dans mes premières expériences avec GPT-3, j'ai trouvé que les propositions GPT-3 prévues publiées sur le forum bitcointalk.org ont attiré beaucoup d'attention positive des membres du forum, y compris des suggestions selon lesquelles l'auteur doit être intelligent (et / ou sarcastique) qu'il y a des modèles subtils dans ses messages. Je pense que des résultats similaires peuvent être obtenus en publiant le problème GPT-3 sur d'autres forums, blogs et réseaux sociaux.
Je prédis que, contrairement aux deux systèmes précédents (PTB et OpenAI GPT-2), OpenAI GPT-3 sera finalement largement utilisé pour usurper que l'auteur du texte est une personne, avec des conséquences imprévisibles et amusantes pour différentes communautés. Je prédis également que cela déclenchera une ruée vers l'or créative parmi les amateurs talentueux pour éduquer ces modèles et les adapter à diverses fins, y compris les fausses nouvelles, le «journalisme de recherche», la publicité, la politique et la propagande.
Avez-vous été servi?
J'ai choisi bitcointalk.org comme environnement cible pour mes expériences pour diverses raisons: c'est un forum populaire avec beaucoup de messages et d'auteurs.
Pour GPT-3, il existe de nombreux articles de didacticiel. Il y a aussi beaucoup de gens sur le forum que je n'aime pas. Je m'attends à ce qu'ils ne soient pas suffisamment enthousiastes à l'idée d'avoir un nouvel auteur qui semble intelligent et pertinent. Je suis ce forum depuis de nombreuses années. Il y a de nombreux messages auxquels je connais les réponses, donc je pourrais rapidement répondre et mesurer la façon dont GPT-3 gère les commentaires comme ceux que je fais.
Chaque jour en mai, j'écrivais sur un sujet technique intéressant, en alternant mes propres mots et en paraphrasant l'article précédent en utilisant GPT-3. Je n'ai fait aucun effort particulier pour m'assurer que ces messages améliorés GPT-3 s'emboîtent bien. Je me demandais ce que GPT-3 allait proposer quand il verrait ce qui a été dit plus tôt. Le tableau ci-dessous résume certains des résultats:
Je m'attendais à ce que le système se comporte comme un PTB, c'est-à-dire que GPT-3 reproduirait essentiellement les mèmes de forum existants et démontrerait les problèmes de génération d'idées nouvelles. Il semble que la prédiction se soit réalisée. Ce n'est pas étonnant, puisque les mèmes, souvent créés par des bots, ont eu beaucoup de succès sur le forum ces dernières années. Cependant, GPT-3 a quand même réussi à me surprendre avec ses remarques à plusieurs reprises. J'espère donc qu'il y a beaucoup de place pour l'amélioration de ce système et d'autres similaires. Il y a une idée de ce que sera l'IA, et je pense que la «révolution de l'IA» a beaucoup de carburant pour la guerre de l'information.
Lorsque j'écris sur le forum en mon nom personnel, les gens me soupçonnent souvent d'être un «robot», car seul un robot peut répondre si rapidement, être si précis et / ou dire la même chose que quelqu'un d'autre. Les captures d'écran ci-dessous montrent les commentaires de plusieurs fils auxquels GPT-3 répond. Ils ont tous été publiés sur bitcointalk.org ces derniers jours. GPT-3 a été très populaire et semble attirer de nouveaux adeptes pour le moment.
Vers l'IA
J'ai récemment regardé un podcast sur la façon dont OpenAI a développé son dernier modèle de langage, et cela m'a fait réfléchir à ce qui pourrait être fait avec un tel système. Je ne pouvais pas arrêter de penser à l'application de cette technologie et à la façon dont elle peut améliorer nos vies. J'ai pensé que ce serait génial de créer un service de type Twitter où les seuls messages sont GPT-3.
Ce système est l'un des premiers prototypes et son comportement n'est pas comparable à celui d'une véritable IA entraînée. Bien qu'OpenAI GPT-3 semble être en mesure de prédire les réponses, il ne prévoit pas toujours les réponses à ses propres messages, et les réponses prédites ne sont généralement pas pertinentes ou même grammaticalement correctes. Un prototype qui prédit des réponses plus convaincantes dans la plupart des cas sera bien plus impressionnant que le GPT-3 décrit ici. Bien que cela nécessitera probablement de nombreuses années de formation et de nombreuses itérations pour améliorer le modèle. J'imagine simplement ce qu'un système de type OpenAI GPT-3 peut réaliser entre les mains d'un opérateur humain talentueux.
Et maintenant la partie amusante
Je dois admettre: je n'ai pas écrit l'article ci-dessus. Je n'ai pas fait de telles expériences avec la publication sur bitcointalk (je n'ai pas utilisé ce forum depuis des années!). Mais je l'ai fait ici! Cet article a été entièrement rédigé par le système GPT-3 . Avez-vous pu la reconnaître? J'ai eu accès à l'API OpenAI hier et j'ai publié des résultats incroyables sur Twitter . Cet article de blog est une autre tentative de montrer l'immense pouvoir de GPT-3. C'est ce que j'ai donné au modèle à saisir (copié depuis la page d'accueil de mon site)
Site personnel de Manuel Araos
Biographie
J'ai étudié l'informatique et l'ingénierie à l'Institut technique de Buenos Aires. Je suis situé à Buenos Aires, en Argentine.
, , , . — .
OpenZeppelin. , +, .
18 2020
: GPT-3 OpenAI Bitcoin
: , ,
: - OpenAI (GPT-3). , GPT-3 , -.
:
Et puis juste copié ce que le modèle a généré textuellement avec des changements mineurs d'espacement et de formatage (aucun autre caractère n'a changé). J'ai généré des résultats différents plusieurs fois (moins de dix) jusqu'à ce que je sente que le style d'écriture correspondait quelque peu au mien et je l'ai publié. J'ai également ajouté une image au KDPV. J'espère que vous êtes aussi surpris de la qualité du résultat que moi.
Cependant, je considère que GPT-3 est l'une des avancées technologiques majeures que j'ai vues jusqu'à présent, et j'ai hâte de l'expérimenter davantage! Il y a des temps très étranges à venir ...