Faites visionnaire des études de recherche sur le web en utilisant les données web profondes et excel requêtes web

Que diriez-vous si je vous disais que vous avez les outils à votre disposition pour faire-pelletée de terre, la recherche bouleversante? Eh bien, vous le faites, et je vais vous montrer comment.

Les gouvernements, les institutions universitaires et les organismes de recherche sans but lucratif publient des tables pleines de données dans le domaine public. Sans toute personne qui utilise ces informations, sa vraie valeur ne sera jamais connue. Malheureusement, peu de gens ont la perspicacité, les compétences ou les outils nécessaires pour prendre les données et faire des corrélations intéressantes entre les informations apparemment sans rapport.

Contexte

Beaucoup de la recherche que je fais pour mon propre blog consiste à creuser à travers ce qu`on appelle la Web invisible, pour découvrir des données qui a été rendu public, mais caché moteurs de recherche dans une base de données en ligne. C`est le web profond, et il est truffé de données précieuses. Très souvent, je tombe sur des pages Web juste à craquer rempli de quelques-unes des données les plus précieuses sur des sujets qui couvrent toute la gamme des données du recensement à des études épidémiologiques sur les maladies rares. J`ai constamment de nouvelles idées sur la façon d`essayer de corréler ces sources de données disparates en utilisant divers outils - et l`un des outils les plus précieux que j`ai trouvé est la requête Web à l`intérieur de Microsoft Excel.10 moteurs de recherche à explorer le Web Invisible10 moteurs de recherche à explorer le Web InvisibleNon, ce n`est pas le dernier outil de élingage Web de Spiderman, mais quelque chose qui est plus réel. Tout comme le World Wide Web.Lire la suite

Trouver des données intéressantes Corrélations

Ce que je vais vous montrer aujourd`hui est un exemple de la façon dont vous pouvez utiliser Excel Web requêtes pour importer des données de sites différents, et les tracer les uns aux autres afin de rechercher des corrélations potentielles entre les données.

Video: Access - Réaliser des Requêtes d'Analyse Croisée

La façon de commencer un exercice comme celui-ci est de trouver une hypothèse intéressante. Par exemple - pour garder les choses intéressantes ici - je vais postuler au hasard que la montée en flèche des taux d`autisme aux Etats-Unis sont causés soit par inoculations de vaccins ou la présence croissante des champs électromagnétiques dans et autour des enfants, tels que les téléphones cellulaires. Il est une hypothèse folle des gens dont vous trouverez sur la plupart des sites de théorie du complot, mais c`est ce qui rend ce plaisir. Donc, nous allons commencer, allons-nous?

Tout d`abord, ouvrir Excel, passer à l`élément de menu de données et trouver l`icône « à partir du Web » dans le ruban de menu.

C`est ce que vous allez utiliser pour importer les différentes tables de données du site beaucoup là-bas qui les ont publiés.

Importation de données Web dans Excel

Ainsi, dans les vieux jours, vous devriez essayer de copier les données de cette table sur une page Web, collez-le dans Excel, puis faire face à toutes les questions folles de formatage impliqués dans le faire. tracas total, et beaucoup de fois juste ne vaut pas le mal de tête. Eh bien, avec Excel requêtes Web, ces jours sont révolus. Bien sûr, avant de pouvoir importer les données, vous aurez besoin de Google votre chemin à travers le Web pour trouver les données dont vous avez besoin sous forme de tableau. Dans mon cas, j`ai trouvé un site qui avait publié les statistiques du ministère de l`Éducation pour le nombre d`élèves des écoles publiques américaines qui ont été identifiés comme ayant l`autisme. Une belle table, il a fourni les chiffres de 1994 tout au long de 2006.

Donc, vous cliquez simplement sur « à partir du Web », collez l`URL de la page Web dans le champ d`adresse de requête, puis faites défiler la page jusqu`à ce que la flèche jaune à côté de la table avec les données que vous souhaitez importer.

Cliquez sur la flèche pour qu`elle devienne une coche verte.

Enfin, dites-Excel ce champ que vous souhaitez coller les données de la table dans l`intérieur de votre nouvelle feuille de calcul.

Puis - Voila! Les données sont envoyées automatiquement à droite dans votre feuille de calcul.

Ainsi, avec une tendance des taux d`autisme des écoles publiques de 1996 - 2006 en place, il est temps d`aller à la recherche pour la vaccination et les tendances d`utilisation du téléphone cellulaire ainsi.

Heureusement, j`ai trouvé rapidement les tendances pour les abonnés de téléphonie cellulaire aux États-Unis dans de 1985 à 2012. excellentes données pour cette étude. Encore une fois, j`utilisé l`outil Web Query Excel pour importer cette table.

J`ai importé cette table dans une feuille propre, neuf. Puis, j`ai découvert les tendances de la vaccination pour le pourcentage des enfants scolarisés vaccinés contre différentes maladies. J`ai importé cette table en utilisant l`outil de requête Web dans une troisième feuille. Donc, finalement, j`avais trois feuilles avec les trois tables remplies avec les données apparemment sans rapport, je l`avais découvert sur le Web.

Video: Access - Tutoriel et Formation - Réaliser des Requêtes Sélection sous Access (Module n° 5)

L`étape suivante, utilise Excel pour analyser les données et essayer d`identifier des corrélations. C`est là un de mes outils d`analyse de données favorites entre en jeu - le tableau croisé dynamique.

L`analyse des données dans Excel avec le tableau croisé dynamique

Il est préférable de créer votre tableau croisé dynamique dans une feuille de marque nouvelle, vide. Vous voulez utiliser l`assistant pour ce que vous allez faire. Pour activer l`assistant de tableau croisé dynamique dans Excel, vous devez appuyer sur Alt-D en même temps jusqu`à ce qu`une fenêtre de notification apparaît. Relâchez ensuite ces boutons, puis appuyez sur la touche « P ». Ensuite, vous verrez le pop up assistant.

Sur la première fenêtre de l`assistant, vous voulez sélectionner « plusieurs plages de consolidation », qui vous permet de sélectionner les données de toutes les feuilles que vous avez importées. En faisant cela, vous pouvez consolider toutes ces données apparemment sans rapport en un seul, pivottable puissant. Dans certains cas, vous devrez peut-être masser une partie des données. Par exemple, je devais corriger le champ « année » dans le tableau de l`autisme afin qu`il a montré « 1994 » au lieu de « 1994-1995 » - ce qui en fait aligner mieux avec les tables sur les autres feuilles, qui avaient aussi l`année primaire champ.

Video: Partie 2 - Exercice Base de données Access - Requetes

Ce champ commun entre les données est ce que vous avez besoin pour essayer de corréler les informations, donc gardez cela à l`esprit lorsque vous le Web pour chasser vos données.

Une fois le tableau croisé dynamique est fait et vous avez toutes les différentes valeurs de données affichées dans une table, il est temps de faire une analyse visuelle pour voir s`il y a une connexion évidente qui vous saute au visage.

Visualisation des données est la clé

Avoir un tas de chiffres dans un tableau est très bien si vous êtes un économiste, mais le plus rapide et le plus simple d`avoir ce « aha! » Moment où vous essayez de trouver des connexions comme une aiguille dans une botte de foin, se fait par des graphiques et graphiques. Une fois que vous avez votre PivotChart en place avec tous les ensembles de données que vous avez recueillies, il est temps de créer votre graphique. En général, un graphique de ligne fera mieux, mais cela dépend des données. Il y a des moments où un graphique à barres fonctionne beaucoup mieux. Essayez de comprendre ce genre de données que vous regardez et quelle forme comparaisons fonctionnent le mieux.

Dans ce cas, je regarde les données au fil du temps, donc un graphique de ligne est vraiment la meilleure façon de voir les tendances au fil des ans. Charting les taux d`autisme (vert) par rapport aux taux de vaccination échelle réduite (bleu foncé), les vaccins-varicelle (bleu clair) et l`utilisation du téléphone cellulaire (violet), une corrélation étrange est apparu soudainement dans cet ensemble d`échantillons de données que je jouais avec.

Curieusement, la tendance à l`utilisation du téléphone cellulaire de 1994 à 2006 correspondait presque parfaitement la montée des taux d`autisme au cours de la même période. Alors que le modèle était complètement inattendu, il est un parfait exemple de la façon dont lier ensemble des données intéressantes peuvent révéler des pistes fascinantes - vous offrir un meilleur aperçu et la motivation pour continuer à faire avancer la recherche et pour plus d`informations qui peuvent en outre renforcer votre hypothèse.

Une corrélation comme ci-dessus prouve rien. Il y a beaucoup de tendances qui augmente avec le temps - le modèle pourrait être une coïncidence, mais il pourrait aussi être un indice important dans votre quête en cours pour plus de données sur Internet. Heureusement, vous avez un outil puissant appelé Excel Web requêtes qui va faire cette quête un peu plus facile.

Crédit photo: Kevin Dooley via photopin cc