Pensez à l'environnement d'analyse (Partie 1: Vue d'ensemble) * Depuis janvier 2017
Préface
――Cet article n'est qu'une opinion individuelle ――Je pense qu'il existe une forme plus adaptée en fonction de l'environnement --Il existe peut-être un moyen plus intelligent en raison du manque d'études
Construction de l'environnement de flux d'analyse
――Nous allons construire un environnement virtuel selon le flux suivant
| No. | Contenu |
|---|---|
| 1 | Vue d'ensemble |
| 2 | Créez un environnement virtuel avec VirtualBox + vagrant |
| 3 | pyenv＋Anaconda[Python、R]＋ jupyter ＋ Installation de Rstudio |
| 4 | postgreSQL+Installez Pgadmin 4 |
À quel genre de personne est-il destiné?
―― En pensant à l'environnement d'analyse, j'ai pensé à l'environnement d'analyse par ** le type de travail que je fais habituellement ** «Je pense qu'il existe différentes manières de travailler, mais cette fois je penserai à l'environnement d'analyse suivant pour les personnes.
Le résultat de la réflexion
――Nous avons pris en compte l'environnement d'analyse suivant
- Plus vous écrivez, plus c'est compliqué et difficile à comprendre
Pensées
[1] Pourquoi est-il virtualisé?
- L'environnement d'exécution de l'analyse est probablement SSH vers un serveur Linux.
- Réduire les retouches en créant un environnement Linux localement
- Plus précisément, car j'ai expérimenté les retouches suivantes
Il y a de la pratique ①
- L'environnement PC de l'ordinateur portable est Windows ou Mac --Il existe un environnement Linux si vous vous connectez en SSH au serveur d'analyse ――Bien qu'il existe un serveur pour l'analyse, j'aimerais d'abord le développer localement plutôt que sur le serveur. --Raison (1): Je ne veux pas déranger les gens qui utilisent le serveur d'analyse en envoyant un code étrange. --Raison (2): il est difficile de transférer le résultat ――Raison ③: il est gênant de SSH chaque fois que vous souhaitez analyser rapidement
- Une erreur se produit lors de l'exécution de code analysé localement sur un serveur d'analyse --Cause (1): le package n'est pas installé --Cause (2): la version du package est différente --Cause ③: le codage et le code de saut de ligne sont différents. --Essai et erreur sur le serveur d'analyse
Il y a de la pratique ②
- L'environnement PC de l'ordinateur portable est Windows --Je veux l'exécuter sur le terminal, mais MS-DOS est difficile à utiliser et j'ai mis Cygwin
- Trébucher sur l'installation de la bibliothèque «Vous pouvez faire de votre mieux et le déplacer pour le moment, mais l'environnement sera gâché.
- Quand j'essaye de mettre Anaconda dans Cygwin, ça ne marche pas.
- Abandonnez et analysez dans un environnement Windows et ne courez pas sur le terminal --Essai et erreur sur le serveur d'analyse
[2] Outil client d'analyse
――J'aime personnellement un environnement d'analyse comme Rstudio ――Les raisons que j'aime sont les suivantes
- Le résultat de l'exécution du script est affiché séparément
- Peut être exécuté ligne par ligne
- Peut écrire des démarques
- Vous pouvez faire un diaporama
- Peut travailler avec un environnement virtuel
- Construction d'environnement facile --Python a également recherché un environnement similaire et résumé ci-dessous
- Il y a une possibilité d'enquête insuffisante
| Logiciel | résultat | 1 | 2 | 3 | 4 | 5 | 6 | Remarques |
|---|---|---|---|---|---|---|---|---|
| Rodeo | × | 〇 | 〇 | △ | × | △ | 〇 | Officiellement, il est dit que vous pouvez marquer et spécifier le serveur, mais la version 2.0.Je ne pouvais pas le faire à 13 ans. |
| Spyder | × | 〇 | 〇 | × | × | × | 〇 | Il y a une possibilité d'enquête insuffisante. |
| PyCharm | × | 〇 | × | × | 〇 | 〇 | × | Il y a une possibilité d'enquête insuffisante. |
| Jupyter | 〇 | × | 〇 | 〇 | 〇 | 〇 | 〇 | R peut également être utilisé dans un environnement similaire. Vous pouvez utiliser RISE pour créer un diaporama. |
| Jupyter lab | × | × | 〇 | 〇 | 〇 | 〇 | 〇 | Il semble que vous puissiez faire ce que vous pouvez faire avec jupyter. Le terminal et le script sont des écrans séparés, mais les résultats ne sont pas reflétés dans le terminal. Je veux l'attendre dans le futur. |
[3] Licence logicielle
--Utiliser une licence open source
- Les raisons de son utilisation sont les suivantes ―― Compte tenu de la coopération avec les universitaires, je souhaite éviter autant que possible les environnements payants
- Je ne veux pas dépendre d'un logiciel payant
[4] Raisons du choix d'un autre logiciel
| Logiciel | Raison |
|---|---|
| Windows | Parce qu'il n'y a pas peu d'utilisateurs de MS Office (Dans ce cas, vous pouvez créer un environnement similaire sur Mac) |
| Oracle VirtualBox | Je voulais créer un environnement virtuel sur un PC existant. Je voulais créer un environnement virtuel utilisable à la fois sous Windows et Mac. ※ Le détail estRésumons l'environnement virtuelDécrit dans |
| vagrant | Pour distribuer le même environnement. J'ai également essayé le populaire Docker récemment, mais il a échoué de différentes manières. |
| Ubuntu | Faire correspondre l'OS du serveur d'analyse * Je pense que la plupart des articles récents liés à l'analyse sont sur Ubuntu. |
| Anaconda | Parce que les bibliothèques nécessaires sont organisées et faciles |
| Teraterm | Je l'ai utilisé jusqu'à maintenant |
| WinSCP | Je ne sais pas ce qu'il y a d'autre |
référence
- http://www.datascientist.or.jp/news/2014/pdf/1210.pdf
- http://qiita.com/chiku_/items/29d8ffd4b2c13989a96b
Recommended Posts