Comment créer un bot LINE à intelligence artificielle avec l'API de messagerie Flask + LINE

Comment créer un bot LINE à intelligence artificielle avec l'API de messagerie Flask + LINE

Le livre de Nakano Hitoshi <a target = "_ blank" href = "https://www.amazon.co.jp/gp/product/B07QLGKJ8T/ref=as_li_tl?ie=UTF8&camp=247&creative=1211&creativeASIN=B07QLGKJ8T&linkCode=aska3&tag2kok=cchas265 > Introduction au développement de l'intelligence artificielle avec Python + LINE - Comment créer un robot LINE pour intelligence artificielle avec Flask + API de messagerie LINE <img src = "// ir-jp.amazon-adsystem.com/e/ir?t = kokkahasan-22 & l = am2 & o = 9 & a = B07QLGKJ8T "width =" 1 "height =" 1 "border =" 0 "alt =" "style =" border: none! Important; margin: 0px! Important; "/>

C'était assez intéressant. À la fin de cet exemple d'exercice, vous trouverez une application bot qui masque les visages avec des tampons par reconnaissance faciale à l'aide de l'API Google Vision. Il existe de nombreuses applications comme celle-ci, mais elles peuvent être plus faciles à utiliser si vous utilisez un bot LINE.

Enfin, il doit essayer de faire correspondre plusieurs reconnaissances de visage. Une seule personne est prise en charge dans l'application de lecture. Il n'y a pas de réponse, c'est facile, faisons de notre mieux, monsieur Nakano.

J'ai fait une réponse avec un petit effort, donc pour référence.

Détection de visage de l'image envoyée par l'utilisateur avec l'API Google Vison et réponse de la photo composite masquée par cat.png (prend en charge plusieurs visages)
#app.py

#Détection de visage de l'image envoyée par l'utilisateur avec l'API Google Vison et le chat.Répondre à une photo composite cachée en png(Prend en charge plusieurs visages)

import io
import os
import base64
import json
import requests
from flask import Flask, request, abort
from PIL import Image #Oreiller installer pip3 installer oreiller

from linebot import (
    LineBotApi, WebhookHandler
)
from linebot.exceptions import (
    InvalidSignatureError
)
from linebot.models import (
    MessageEvent, TextMessage, TextSendMessage, ImageMessage, ImageSendMessage
)


#Jeton d'accès LINE et secret d'application
ACCESS_TOKEN = ''
SECRET = ''
#Clé API Google Vision
API_KEY = ''

app = Flask(__name__)

line_bot_api = LineBotApi(ACCESS_TOKEN)
handler = WebhookHandler(SECRET)


@app.route('/')
def hello_world():
    return 'Hello World!'


@app.route('/callback',methods=['POST'])
def callback():
    signature = request.headers['X-Line-Signature']

    body = request.get_data(as_text=True)
    app.logger.info("Request body: " + body)

    try:
        handler.handle(body, signature)
    except InvalidSignatureError:
        print("Invalid signature. Please check your channel access token/channel secret.")
        abort(400)
    
    return 'OK'

@handler.add(MessageEvent,message=ImageMessage)
def handle_message(event):
    try:
        message_content = line_bot_api.get_message_content(event.message.id)
        # event.message.Les données du corps de l'image peuvent être lues en spécifiant l'identifiant
        # message_content.content #Corps du fichier image acquis

        image_base64 = base64.b64encode(message_content.content) #Convertir le fichier image en base64

        #Créer le corps de la requête (json.dumps()Converti en JSON)
        req_body = json.dumps({
            'requests': [{
                'image': {
                    'content': image_base64.decode('utf-8')
                },
                'features': [{
                    'type': 'FACE_DETECTION',
                    'maxResults': 20,
                }]
            }]
        })
                            #Point de terminaison de l'API Vision ↓
        res = requests.post("https://vision.googleapis.com/v1/images:annotate?key=" + API_KEY, data=req_body)
        #print('le contenu res est' + res.text)

        result = res.json()
    
        vertices = result["responses"][0]["faceAnnotations"]
        #print('Le contenu des sommets est' + json.dumps(vertices)) 
        ##le contenu de la réponse est une réponse.Voir json.

        if vertices:
            print('J'ai pu obtenir')
            image_base = Image.open(io.BytesIO(message_content.content))
            for face in vertices:
                corner = face["boundingPoly"]['vertices'][0]
                print('le coin est' + json.dumps(corner))
                print('face["boundingPoly"]["vertices"][1]["x"]Est' + json.dumps(face["boundingPoly"]['vertices'][1]["x"]))
                width = face["boundingPoly"]['vertices'][1]["x"] - face["boundingPoly"]['vertices'][0]["x"]
                height = face["boundingPoly"]['vertices'][2]["y"] - face["boundingPoly"]['vertices'][1]["y"]

                image_cover = Image.open('static/cat.png') # cat.png doit être une image de canal alpha. ValueError:erreur de masque de transparence incorrecte
                image_cover = image_cover.resize((width,height))
                image_base.paste(image_cover, (corner['x'],corner['y']), image_cover)
                # Image.paste(im, box=None, mask=None)
                print('pour la fin de la boucle')

            image_base.save('static/' + event.message.id + '.jpg')


        line_bot_api.reply_message(
            event.reply_token,
            ImageSendMessage(
                    original_content_url = "https://hidden-savannah-xxxxx.herokuapp.com/static/" + event.message.id + ".jpg ",
                    preview_image_url = "https://hidden-savannah-xxxxx.herokuapp.com/static/" + event.message.id + ".jpg "
            )
        )

    except:
        line_bot_api.reply_message(
            event.reply_token,
            TextSendMessage(text="Je n'ai pas pu reconnaître mon visage (pas d'animaux, seulement des humains. C'est difficile d'avoir un profil ou de trop près")
        )


if __name__ == "__main__":
    app.run(host="0.0.0.0", port=int(os.environ.get("PORT", 5000)))


référence:

Juste au cas où, le contenu de la réponse de print ('le contenu des sommets est' + json.dumps (sommets)) à la ligne 80

[
	{
		"boundingPoly": {
			"vertices": [
				{
					"x": 917,
					"y": 318
				},
				{
					"x": 1174,
					"y": 318
				},
				{
					"x": 1174,
					"y": 616
				},
				{
					"x": 917,
					"y": 616
				}
			]
		},
		"fdBoundingPoly": {
			"vertices": [
				{
					"x": 971,
					"y": 396
				},
				{
					"x": 1163,
					"y": 396
				},
				{
					"x": 1163,
					"y": 588
				},
				{
					"x": 971,
					"y": 588
				}
			]
		},
		"landmarks": [
			{
				"type": "LEFT_EYE",
				"position": {
					"x": 1031.1968,
					"y": 456.0161,
					"z": 0.0003030986
				}
			},
			{
				"type": "RIGHT_EYE",
				"position": {
					"x": 1112.0862,
					"y": 460.92987,
					"z": 28.232975
				}
			},
			{
				"type": "LEFT_OF_LEFT_EYEBROW",
				"position": {
					"x": 1008.84607,
					"y": 436.544,
					"z": -1.8571037
				}
			},
			{
				"type": "RIGHT_OF_LEFT_EYEBROW",
				"position": {
					"x": 1060.1007,
					"y": 440.86813,
					"z": -7.585352
				}
			},
			{
				"type": "LEFT_OF_RIGHT_EYEBROW",
				"position": {
					"x": 1095.2485,
					"y": 442.76245,
					"z": 5.0468025
				}
			},
			{
				"type": "RIGHT_OF_RIGHT_EYEBROW",
				"position": {
					"x": 1131.141,
					"y": 444.30832,
					"z": 41.595203
				}
			},
			{
				"type": "MIDPOINT_BETWEEN_EYES",
				"position": {
					"x": 1075.8728,
					"y": 455.9283,
					"z": -1.5975293
				}
			},
			{
				"type": "NOSE_TIP",
				"position": {
					"x": 1080.8457,
					"y": 504.33997,
					"z": -20.247692
				}
			},
			{
				"type": "UPPER_LIP",
				"position": {
					"x": 1071.2343,
					"y": 531.5437,
					"z": -1.6211907
				}
			},
			{
				"type": "LOWER_LIP",
				"position": {
					"x": 1069.6505,
					"y": 551.9242,
					"z": 4.4038887
				}
			},
			{
				"type": "MOUTH_LEFT",
				"position": {
					"x": 1035.7985,
					"y": 538.815,
					"z": 8.222528
				}
			},
			{
				"type": "MOUTH_RIGHT",
				"position": {
					"x": 1101.0676,
					"y": 541.8905,
					"z": 30.981604
				}
			},
			{
				"type": "MOUTH_CENTER",
				"position": {
					"x": 1070.1655,
					"y": 541.40643,
					"z": 4.1978736
				}
			},
			{
				"type": "NOSE_BOTTOM_RIGHT",
				"position": {
					"x": 1092.8889,
					"y": 510.94235,
					"z": 16.238985
				}
			},
			{
				"type": "NOSE_BOTTOM_LEFT",
				"position": {
					"x": 1049.6199,
					"y": 507.50146,
					"z": 0.9902145
				}
			},
			{
				"type": "NOSE_BOTTOM_CENTER",
				"position": {
					"x": 1072.0765,
					"y": 515.82806,
					"z": -2.7877321
				}
			},
			{
				"type": "LEFT_EYE_TOP_BOUNDARY",
				"position": {
					"x": 1037.2472,
					"y": 452.2355,
					"z": -4.3320293
				}
			},
			{
				"type": "LEFT_EYE_RIGHT_CORNER",
				"position": {
					"x": 1047.4124,
					"y": 459.2465,
					"z": 6.317641
				}
			},
			{
				"type": "LEFT_EYE_BOTTOM_BOUNDARY",
				"position": {
					"x": 1030.3141,
					"y": 461.9699,
					"z": 0.34013578
				}
			},
			{
				"type": "LEFT_EYE_LEFT_CORNER",
				"position": {
					"x": 1018.07513,
					"y": 455.93164,
					"z": 2.3924496
				}
			},
			{
				"type": "LEFT_EYE_PUPIL",
				"position": {
					"x": 1034.6456,
					"y": 457.22366,
					"z": -1.4217875
				}
			},
			{
				"type": "RIGHT_EYE_TOP_BOUNDARY",
				"position": {
					"x": 1109.9236,
					"y": 456.6617,
					"z": 21.767094
				}
			},
			{
				"type": "RIGHT_EYE_RIGHT_CORNER",
				"position": {
					"x": 1119.8134,
					"y": 462.12448,
					"z": 38.996845
				}
			},
			{
				"type": "RIGHT_EYE_BOTTOM_BOUNDARY",
				"position": {
					"x": 1110.3936,
					"y": 466.81308,
					"z": 26.98832
				}
			},
			{
				"type": "RIGHT_EYE_LEFT_CORNER",
				"position": {
					"x": 1094.9646,
					"y": 462.28857,
					"z": 22.470396
				}
			},
			{
				"type": "RIGHT_EYE_PUPIL",
				"position": {
					"x": 1109.2263,
					"y": 461.79114,
					"z": 25.238665
				}
			},
			{
				"type": "LEFT_EYEBROW_UPPER_MIDPOINT",
				"position": {
					"x": 1037.4519,
					"y": 429.95596,
					"z": -10.386488
				}
			},
			{
				"type": "RIGHT_EYEBROW_UPPER_MIDPOINT",
				"position": {
					"x": 1116.0272,
					"y": 434.71762,
					"z": 18.003847
				}
			},
			{
				"type": "LEFT_EAR_TRAGION",
				"position": {
					"x": 954.1669,
					"y": 484.3548,
					"z": 76.21559
				}
			},
			{
				"type": "RIGHT_EAR_TRAGION",
				"position": {
					"x": 1119.6852,
					"y": 494.08078,
					"z": 135.9113
				}
			},
			{
				"type": "FOREHEAD_GLABELLA",
				"position": {
					"x": 1078.9543,
					"y": 441.30212,
					"z": -4.084726
				}
			},
			{
				"type": "CHIN_GNATHION",
				"position": {
					"x": 1062.5234,
					"y": 589.9864,
					"z": 16.94458
				}
			},
			{
				"type": "CHIN_LEFT_GONION",
				"position": {
					"x": 968.6994,
					"y": 536.28186,
					"z": 52.295383
				}
			},
			{
				"type": "CHIN_RIGHT_GONION",
				"position": {
					"x": 1117.5015,
					"y": 545.4246,
					"z": 105.74548
				}
			}
		],
		"rollAngle": 4.5907497,
		"panAngle": 19.758451,
		"tiltAngle": -3.1237326,
		"detectionConfidence": 0.91960925,
		"landmarkingConfidence": 0.5607769,
		"joyLikelihood": "VERY_UNLIKELY",
		"sorrowLikelihood": "VERY_UNLIKELY",
		"angerLikelihood": "VERY_UNLIKELY",
		"surpriseLikelihood": "VERY_UNLIKELY",
		"underExposedLikelihood": "VERY_UNLIKELY",
		"blurredLikelihood": "VERY_UNLIKELY",
		"headwearLikelihood": "LIKELY"
	},
・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・

]


Ça ressemble à ça
GoogleVisionテスト.jpg
Voici quelques-uns des livres qui n'ont pas fonctionné: [Déployer l'application Flask sur heroku (amèrement)](https://qiita.com/atomyah/items/91196f5fda95e4b9c7a6)
Référence: [Détection de visage à l'aide de Google Cloud Vision en Python](https://vaaaaaanquish.hatenablog.com/?page=1471257396)

Recommended Posts

Comment créer un bot LINE à intelligence artificielle avec l'API de messagerie Flask + LINE
Comment créer un BOT Cisco Webex Teams à l'aide de Flask
Les débutants en Python ont décidé de créer un bot LINE avec Flask (commentaire approximatif de Flask)
J'ai essayé de créer un LINE BOT "Sakurai-san" avec API Gateway + Lambda
Faire un bot d'analyse morphologique de manière lâche avec LINE + Flask
Essayez de créer une API RESTful avec MVC à l'aide de Flask 1.0.2
Comment créer un serveur HTTPS avec Go / Gin
Comment faire fonctionner l'API Discord avec Python (enregistrement de bot)
[LINE Messaging API] Créer un BOT de retour de perroquet avec Python
J'ai essayé de créer LINE-bot avec Python + Flask + ngrok + LINE Messaging API
Comment créer un bot slack
L'explication la plus facile à comprendre au monde sur la création de LINE BOT (3) [Coopération avec un serveur avec Git]
Comment créer un LINE BOT 004 interactif (répondre à la date de clôture d'une société cotée)
[LINE Messaging API] Créez un BOT qui se connecte à quelqu'un avec Python
[Python] Créez rapidement une API avec Flask
Comment télécharger avec Heroku, Flask, Python, Git (4)
Introduction à l'intelligence artificielle avec Python 1 «Théorie des algorithmes génétiques»
Comment créer un pilote de périphérique Linux intégré (11)
Comment créer un pilote de périphérique Linux intégré (8)
Comment créer un pilote de périphérique Linux intégré (1)
Introduction à l'intelligence artificielle avec Python 2 «Pratique de l'algorithme génétique»
Comment créer un pilote de périphérique Linux intégré (4)
Comment créer un dictionnaire avec une structure hiérarchique.
Comment créer un pilote de périphérique Linux intégré (7)
Comment créer un pilote de périphérique Linux intégré (2)
Comment recadrer une image avec Python + OpenCV
Comment créer un pilote de périphérique Linux intégré (3)
LINE BOT avec Python + AWS Lambda + API Gateway
Comment lire un tableau avec ConfigParser de Python
Comment créer un pilote de périphérique Linux intégré (6)
Créer un bot LINE WORKS avec Amazon Lex
Comment créer un pilote de périphérique Linux intégré (5)
Comment créer un pilote de périphérique Linux intégré (10)
Comment créer un pilote de périphérique Linux intégré (9)
L'explication la plus simple au monde sur la création de LINE BOT (2) [Préparation de l'application Bot dans un environnement local avec Django de Python]
[Mémo d'apprentissage] Comment créer une application avec Django ~ Jusqu'à ce que Hello World soit affiché ~
L'explication la plus simple au monde sur la création de LINE BOT (1) [Account preparation]
[Mémo d'apprentissage] Comment créer une application avec Django ~ De l'environnement virtuel au push vers github ~
Comment créer un article à partir de la ligne de commande
[Python] Comment dessiner un graphique linéaire avec Matplotlib
Expliquez en détail comment créer un son avec python
Jouer avec l'API d'intelligence artificielle locale de l'utilisateur en Python
Comment télécharger avec Heroku, Flask, Python, Git (Partie 3)
Comment faire du zéro-padding sur une ligne avec OpenCV
Comment faire un jeu de tir avec toio (partie 1)
J'ai essayé d'implémenter le perceptron artificiel avec python
Comment créer un outil CLI interactif avec Golang
Comment télécharger avec Heroku, Flask, Python, Git (Partie 1)
Comment télécharger avec Heroku, Flask, Python, Git (Partie 2)
Comment créer un pilote de périphérique Linux intégré (12) (Terminé)
Comment analyser avec Google Colaboratory à l'aide de l'API Kaggle
J'ai essayé de créer une application OCR avec PySimpleGUI
[Super facile] Faisons un LINE BOT avec Python.
Créer un LINE BOT
Création d'un BOT «Présentation non officielle du produit remis à neuf par Apple» avec l'API de messagerie LINE (v2) + API Gateway + lambda (python)