Πώς μπορώ να εισαγάγω δεδομένα παρακολούθησης UFO στο Internet σε ένα υπολογιστικό φύλλο Google

Διαφήμιση

Όταν πρόκειται για τις σε απευθείας σύνδεση βάσεις δεδομένων και τις πληροφορίες που μπορούν να βρεθούν μέσα σε αυτό που είναι κοινώς γνωστό ως το "αόρατο web 10 Μηχανές αναζήτησης για να εξερευνήσετε την αόρατη Web 10 Μηχανές αναζήτησης για να εξερευνήσετε τον αόρατο web Γνωρίζουμε τον ιστό. Αλλά ξέρατε ότι υπάρχει μια τεράστια μνήμη πληροφοριών που οι μηχανές αναζήτησης όπως η Google δεν έχουν άμεση πρόσβαση; Αυτός είναι ο αόρατος ιστός. Διαβάστε περισσότερα ", δεν είμαι ο τυπικός χρήστης σας. Σίγουρα, ξοδεύω λίγο περισσότερο από το χρόνο μου κοσκινίζοντας μέσω ηλεκτρονικών βάσεων δεδομένων σε μέρη όπως το Εθνικό Αρχείο και την αίθουσα ανάγνωσης της CIA FOIA, αλλά πρέπει να πω ότι τίποτα δεν με κάνει πιο ενθουσιασμένο από ότι όταν βρω έναν πίνακα που βασίζεται σε HTML γεμάτο με τόμους φαινομενικά πολύπλοκων και ανεξάρτητων δεδομένων.

Το γεγονός είναι ότι οι πίνακες δεδομένων είναι ένα χρυσωρυχείο σημαντικών αληθειών. Τα δεδομένα συλλέγονται συχνά από στρατούς συλλήψεων συλλογής δεδομένων με μπότες στο έδαφος. Έχετε ανθρώπους από την Απογραφή των ΗΠΑ που ταξιδεύουν σε ολόκληρη τη χώρα για οικιακές και οικογενειακές πληροφορίες. Έχετε μη κερδοσκοπικές περιβαλλοντικές ομάδες που συλλέγουν κάθε είδους ενδιαφέρουσες πληροφορίες σχετικά με το περιβάλλον, τη ρύπανση, την υπερθέρμανση του πλανήτη και πολλά άλλα. Και αν βρίσκεστε στην παραφυσική ή στην ουθολογία, υπάρχουν επίσης συνεχώς ενημερωμένοι πίνακες πληροφοριών σχετικά με την παρατήρηση παράξενων αντικειμένων στον ουρανό πάνω από εμάς.

Κατά ειρωνικό τρόπο, θα σκεφτόσαστε ότι οποιαδήποτε κυβέρνηση στον κόσμο θα ενδιαφερόταν να μάθει τι είδους ξένα σκάφη εντοπίζονται στον ουρανό σε οποιαδήποτε χώρα, αλλά προφανώς όχι - τουλάχιστον όχι στις ΗΠΑ ούτως ή άλλως. Στην Αμερική, η συλλογή των ασυνήθιστων παρατηρήσεων των βιοτεχνών έχει υποβιβαστεί σε ομάδες ερασιτεχνών χομπίστρων που συρρέουν σε νέες εμφανίσεις UFO όπως σκώροι σε φλόγα. Το ενδιαφέρον μου για αυτές τις παρατηρήσεις δεν προέρχεται από τη γοητεία των αλλοδαπών ή των βιοτεχνιών από άλλους πλανήτες, αλλά από την επιστημονική γοητεία των μοτίβων - πού και γιατί περισσότεροι άνθρωποι βλέπουν πράγματα στον ουρανό και αν αυτές οι παρατηρήσεις μπορούν να αντικατοπτρίζουν κάτι πολύ πραγματικό και πολύ πιο κάτω προς τη Γη πράγματι συμβαίνει.

Για να διερευνήσουμε τους όγκους των δεδομένων που συλλέχτηκαν από τις ομάδες των UFO hobbyists, έχω αναπτύξει έναν τρόπο να εισάγουμε μεγάλους πίνακες HTML δεδομένων σε ένα υπολογιστικό φύλλο Google και στη συνέχεια να επεξεργαστούμε και να αναλύσουμε αυτά τα δεδομένα για να εξαγάγουμε και να ανακαλύψουμε σημαντικές και σημαντικές πληροφορίες. Σε αυτό το άρθρο, σκοπεύω να σας δείξω πώς να κάνετε το ίδιο.

Σημαντικά δεδομένα HTML σε υπολογιστικό φύλλο Google

Σε αυτό το παράδειγμα, θα σας δείξω πώς να εισαγάγετε στο υπολογιστικό φύλλο Google τα δεδομένα που μπορεί να αποθηκευτούν σε έναν πίνακα σε οποιονδήποτε ιστότοπο στο Internet. Σκεφτείτε τον τεράστιο όγκο δεδομένων που διατίθεται σήμερα στο Διαδίκτυο με τη μορφή πινάκων HTML. Μόνο η Wikipedia έχει δεδομένα σε πίνακες για θέματα όπως η υπερθέρμανση του πλανήτη, το Γραφείο Απογραφής των Η.Π.Α. έχει πολλούς πληθυσμούς σύνολα δεδομένων και λίγο Googling θα σας προσγειωθεί πολύ περισσότερο πέρα ​​από αυτό.

Στο παράδειγμά μου, ξεκινώ με μια βάση δεδομένων στο Εθνικό Κέντρο Αναφοράς UFO που πραγματικά μοιάζει με μια βάση δεδομένων βάσης δεδομένων ερωτημάτων, αλλά εάν παρατηρήσετε τη διάρθρωση των διευθύνσεων URL, είναι στην πραγματικότητα ένα ημι-πολύπλοκο web- βασισμένο στο σύστημα αναφοράς που αποτελείται από στατικές ιστοσελίδες και στατικούς πίνακες HTML - ακριβώς τι θέλουμε όταν ψάχνουμε τα δεδομένα για εισαγωγή.

Το NUForc.org είναι ένας από τους οργανισμούς αυτούς που χρησιμεύει ως ένα από τα μεγαλύτερα κέντρα αναφοράς για την παρακολούθηση UFO. Δεν είναι το μόνο, αλλά είναι αρκετά μεγάλο για να βρει νέα σύνολα δεδομένων με τις τρέχουσες παρατηρήσεις για κάθε μήνα. Επιλέγετε να προβάλετε τα δεδομένα ταξινομημένα βάσει κριτηρίων όπως η κατάσταση ή η ημερομηνία και κάθε μία από αυτές παρέχεται με τη μορφή μιας στατικής σελίδας. Εάν ταξινομήσετε κατά ημερομηνία και στη συνέχεια κάντε κλικ στην πιο πρόσφατη ημερομηνία, θα δείτε ότι στον πίνακα που αναγράφεται υπάρχει μια στατική ιστοσελίδα που ονομάζεται σύμφωνα με τη μορφή ημερομηνίας.

Έτσι, έχουμε τώρα ένα πρότυπο για να εξαγάγουμε τακτικά τις πιο πρόσφατες πληροφορίες εντοπισμού από αυτή τη βάση δεδομένων που βασίζεται σε HTML. Το μόνο που έχετε να κάνετε είναι να εισαγάγετε τον πρώτο πίνακα, να χρησιμοποιήσετε την πιο πρόσφατη καταχώρηση (την κορυφή) για να προσδιορίσετε την τελευταία ενημερωμένη έκδοση και στη συνέχεια να χρησιμοποιήσετε την ημερομηνία αυτής της ανάρτησης για να δημιουργήσετε τον σύνδεσμο URL όπου υπάρχει ο πιο πρόσφατος πίνακας δεδομένων HTML. Κάνοντας αυτό θα χρειαστεί απλά μερικές περιπτώσεις της συνάρτησης ImportHTML, και στη συνέχεια μερικές δημιουργικές χρήσεις των λειτουργιών χειρισμού κειμένου. Όταν τελειώσετε, θα έχετε ένα από τα πιο cool, αυτο-ανανεωμένα υπολογιστικά φύλλα αναφορών της δικής σας. Ας αρχίσουμε.

Εισαγωγή πινάκων και χειρισμός δεδομένων

Το πρώτο βήμα, φυσικά, είναι να δημιουργήσετε το νέο υπολογιστικό φύλλο.

Έτσι, πώς εισάγετε πίνακες HTML; Το μόνο που χρειάζεστε είναι η διεύθυνση URL όπου αποθηκεύεται ο πίνακας και ο αριθμός του πίνακα στη σελίδα - συνήθως ο πρώτος που αναγράφεται είναι 1, ο δεύτερος είναι 2 και ούτω καθεξής. Εφόσον γνωρίζω τη διεύθυνση URL αυτού του πρώτου πίνακα που απαριθμεί τις ημερομηνίες και τις μετρήσεις των παρατηρήσεων που αναφέρονται, είναι δυνατή η εισαγωγή πληκτρολογώντας την ακόλουθη συνάρτηση στο κελί A1.

= importhtml ("http://www.nuforc.org/webreports/ndxpost.html?" & H2, "πίνακας", 1)

Το H2 κρατά τη λειτουργία " = ώρα (τώρα ()) ", οπότε ο πίνακας θα ενημερώνεται κάθε ώρα. Αυτό είναι πιθανώς ακραίο για τα δεδομένα που ενημερώνουν αυτό σπάνια, οπότε θα μπορούσα πιθανότατα να ξεφύγω από το να το κάνω καθημερινά. Εν πάση περιπτώσει, η παραπάνω λειτουργία ImportHTML φέρνει στον πίνακα όπως φαίνεται παρακάτω.

Θα χρειαστεί να κάνετε λίγο χειρισμό δεδομένων σε αυτή τη σελίδα προτού να μπορέσετε να μοιραστείτε τη διεύθυνση URL του δεύτερου πίνακα με όλες τις παρατηρήσεις UFO. Αλλά προχωρήστε και δημιουργήστε το δεύτερο φύλλο στο βιβλίο εργασίας.

Πριν προσπαθήσετε να δημιουργήσετε αυτό το δεύτερο φύλλο, ήρθε η ώρα να εξαγάγετε την ημερομηνία μετάδοσης από αυτόν τον πρώτο πίνακα, για να δημιουργήσετε τη σύνδεση με τον δεύτερο πίνακα. Το πρόβλημα είναι ότι η ημερομηνία εισάγεται ως μορφή ημερομηνίας και όχι ως συμβολοσειρά. Επομένως, πρώτα πρέπει να χρησιμοποιήσετε τη λειτουργία TEXT για να μετατρέψετε την ημερομηνία δημοσίευσης αναφοράς σε μια συμβολοσειρά:

= κείμενο (A2, "mm / dd / yy")

Στο επόμενο κελί στα δεξιά, θα πρέπει να χρησιμοποιήσετε τη λειτουργία SPLIT με τον οριοθέτη "/" για να σπάσετε την ημερομηνία σε μήνα, ημέρα και έτος.

= διαίρεση (D2, "/")

Δείχνει καλά! Ωστόσο, κάθε αριθμός πρέπει να εξαναγκαστεί σε δύο ψηφία. Κάνετε αυτό στα κελιά ακριβώς κάτω από αυτά χρησιμοποιώντας ξανά την εντολή TEXT.

= κείμενο (E2, "00")

Μία μορφή "00" (αυτές είναι μηδενικά) αναγκάζει δύο ψηφία ή ένα "0" ως σύμβολο κράτησης θέσης.

Τώρα είστε έτοιμοι να ξαναφτιάξετε ολόκληρη τη διεύθυνση URL στον πιο πρόσφατο πίνακα HTML νέων παρατηρήσεων. Μπορείτε να το κάνετε αυτό χρησιμοποιώντας τη λειτουργία CONCATENATE και συνδυάζοντας όλα τα κομμάτια των πληροφοριών που μόλις εξάγετε από τον πρώτο πίνακα.

= concatenate ("http://www.nuforc.org/webreports/ndxp", G3, E3, F3, ".html")

Τώρα, στο νέο φύλλο που δημιουργήσατε παραπάνω (το κενό φύλλο), θα κάνετε μια νέα συνάρτηση "importhtml", αλλά αυτή τη φορά για την πρώτη παράμετρο σύνδεσης URL, επομένως θα επιστρέψετε στο πρώτο υπολογιστικό φύλλο και κάντε κλικ στο κελί με τη σύνδεση URL που μόλις δημιουργήσατε.

Η δεύτερη παράμετρος είναι "πίνακας" και η τελευταία είναι "1" (επειδή ο πίνακας παρατηρήσεων είναι ο πρώτος και μόνο στη σελίδα). Πατήστε enter και τώρα έχετε εισαγάγει ολόκληρο τον όγκο των παρατηρήσεων που δημοσιεύθηκαν την συγκεκριμένη ημερομηνία.

Επομένως, νομίζετε ότι αυτό είναι μια ωραία καινοτομία πράξη και όλα - εννοώ, τελικά, αυτό που κάνατε είναι να εξάγετε τις υπάρχουσες πληροφορίες από ένα τραπέζι στο Διαδίκτυο και να το μεταφέρετε σε άλλο τραπέζι, αν και ιδιωτικό στην Λογαριασμός Εγγράφων Google. Ναι αυτό είναι αλήθεια. Ωστόσο, τώρα που βρίσκεται στον ιδιωτικό λογαριασμό σας Google Docs, έχετε στα χέρια σας τα εργαλεία και τις λειτουργίες για την καλύτερη ανάλυση αυτών των δεδομένων και αρχίστε να ανακαλύπτετε εκπληκτικές συνδέσεις.

Χρησιμοποιώντας αναφορές περιστροφής για την ανάλυση των εισαγόμενων δεδομένων

Μόλις πρόσφατα έγραψα ένα άρθρο σχετικά με τη χρήση των αναφορών περιστροφής στο Google Spreadsheet Γίνετε εμπειρογνώμονας Αναλυτής δεδομένων Χρησιμοποιώντας τα εργαλεία αναφοράς του υπολογιστικού φύλλου Google Γίνετε εμπειρογνώμονας Αναλυτής δεδομένων Χρησιμοποιώντας τα εργαλεία αναφοράς του υπολογιστικού φύλλου Google Γνωρίζατε ότι ένα από τα μεγαλύτερα εργαλεία όλων για τη διεξαγωγή δεδομένων η ανάλυση είναι στην ουσία το Google Spreadsheet; Ο λόγος για αυτό δεν είναι μόνο επειδή μπορεί να κάνει σχεδόν όλα όσα μπορεί να θέλετε να ... Διαβάστε περισσότερα για να εκτελέσετε όλα τα είδη των δροσερό υποθέσεις ανάλυση δεδομένων. Λοιπόν, μπορείτε να κάνετε την ίδια εκπληκτική ακροβατική ανάλυση δεδομένων στα δεδομένα που έχετε εισάγει από το Internet - δίνοντάς σας τη δυνατότητα να αποκαλύψετε ενδιαφέρουσες συνδέσεις που πιθανώς δεν έχει αποκαλύψει κανείς άλλος πριν από σας.

Για παράδειγμα, από τον πίνακα τελικών παρατηρήσεων, θα μπορούσα να αποφασίσω να χρησιμοποιήσω μια αναφορά περιστροφής για να ρίξω μια ματιά στον αριθμό των διαφορετικών μοναδικών σχημάτων που αναφέρθηκαν σε κάθε κράτος, σε σύγκριση με τον συνολικό αριθμό των παρατηρήσεων στην συγκεκριμένη κατάσταση. Τέλος, φιλτράρω και οτιδήποτε αναφέρει "αλλοδαπούς" στο τμήμα σχολίων, για να ελπίζουμε ότι θα εξαλείψουμε κάποιες από τις πιο φτερωτές συμμετοχές.

Αυτό αποκαλύπτει πραγματικά αρκετά ενδιαφέροντα πράγματα από το ρόπαλο, όπως το γεγονός ότι η Καλιφόρνια έχει σαφώς τον μεγαλύτερο αριθμό αναφερόμενων παρατηρήσεων σε οποιοδήποτε άλλο κράτος, μαζί με τη διάκριση της αναφοράς του μεγαλύτερου αριθμού σκαφών στη χώρα. Δείχνει επίσης ότι η Μασσαχουσέττη, η Φλόριντα και το Ιλλινόις είναι μεγάλοι παίκτες στο τμήμα παρακολούθησης UFO (τουλάχιστον στα πιο πρόσφατα δεδομένα).

Ένα άλλο καλό στοιχείο για το Google Spreadsheet είναι το ευρύ φάσμα των διαθέσιμων για εσάς χάρτες, συμπεριλαμβανομένου ενός Geo-Map που σας επιτρέπει να διαχωρίζετε τα "καυτά σημεία" των δεδομένων σε γραφική μορφή που πραγματικά ξεχωρίζει και καθιστά τις συνδέσεις αυτές μέσα στα δεδομένα προφανή.

Εάν το σκεφτείτε, αυτό είναι πραγματικά μόνο η κορυφή του παγόβουνου. Εάν μπορείτε τώρα να εισαγάγετε δεδομένα από πίνακες δεδομένων σε οποιαδήποτε σελίδα του Internet, απλά σκεφτείτε τις δυνατότητες. Αποκτήστε τους πιο πρόσφατους αριθμούς μετοχών ή τα πιο πρόσφατα 10 κορυφαία βιβλία και συγγραφείς στη λίστα με τα bestseller της New York Times ή τα μεγαλύτερα αυτοκίνητα που πωλούν στον κόσμο. Υπάρχουν πίνακες HTML εκεί έξω για σχεδόν οποιοδήποτε θέμα που μπορείτε να φανταστείτε και σε πολλές περιπτώσεις οι πίνακες αυτοί ενημερώνονται συχνά.

Το ImportHtml σάς δίνει τη δυνατότητα να συνδέσετε το υπολογιστικό φύλλο Google στο Internet και να τροφοδοτείτε τα δεδομένα που υπάρχουν εκεί. Μπορεί να γίνει το δικό σας κέντρο πληροφοριών που μπορείτε να χρησιμοποιήσετε για να χειριστείτε και να κάνετε μασάζ σε μια μορφή με την οποία μπορείτε πραγματικά να εργαστείτε. Είναι ένα ακόμα πολύ ωραίο πράγμα που αγαπάμε για το Google Spreadsheet.

Έχετε ποτέ εισαγάγει δεδομένα στα υπολογιστικά σας φύλλα; Τι ενδιαφέροντα πράγματα ανακαλύψατε σε αυτά τα δεδομένα; Πώς χρησιμοποιήσατε τα δεδομένα; Μοιραστείτε τις εμπειρίες και τις ιδέες σας στην παρακάτω ενότητα σχολίων!

Συντελεστές εικόνας: επιχειρηματικό γράφημα