Gabriel Brooks
0 
1378
131
Çevrimiçi veritabanları ve yaygın olarak bilinenlerin içinde bulunabilecek bilgiler söz konusu olduğunda “görünmez web Görünmez web keşfetmek için en iyi 12 arama motoru Görünmez web keşfetmek için en iyi 12 arama motoru Google veya Bing her şeyi arayamaz. Görünmez ağı keşfetmek için bu özel arama motorlarını kullanmanız gerekir.. “, Ben senin tipik kullanıcın değilim. Tabii ki, zamanımın birazını Ulusal Arşivler ve CIA FOIA okuma odası gibi yerlerde çevrimiçi veritabanları üzerinden geçirerek geçiriyorum, ancak hiçbir şey söylemem gerek, hacimli bir HTML tabanlı masa bulmamdan daha fazla heyecanlı kılmamı gerektirmiyor. görünüşte karmaşık ve bağlantısız veri.
Gerçek şu ki, veri tabloları önemli gerçeklerin altın madenidir. Veriler çoğu zaman toprağa bağlı botlarla veri toplama homurdanma orduları tarafından toplanır. ABD Nüfus Sayısından gelen insanları ev ve aile bilgileri için tüm ülkeyi gezdiriyorsunuz. Çevre, kirlilik, küresel ısınma ve daha fazlası hakkında her türlü ilginç bilgiyi toplayan kar amacı gütmeyen çevre gruplarına sahipsiniz. Eğer paranormal veya Ufolojideyseniz, üstümüzde bulunan gökyüzünde garip nesnelerin görülmesi ile ilgili sürekli güncellenen bilgi tabloları vardır..
İronik olarak, dünyadaki herhangi bir hükümetin, herhangi bir ülkenin üzerindeki göklerde ne tür bir yabancı geminin tespit edildiğini bilmekle ilgileneceğini, ancak görünüşe göre - en azından ABD’de olmadığını düşünürdünüz. Amerika'da, sıradışı el sanatları manzaraları koleksiyonu, alev gibi güveler gibi yeni UFO manzaralarına akan amatör hobilerden oluşan ekiplere verildi. Bu manzaralara olan ilgim aslında uzaylılara ya da diğer gezegenlerden gelen el sanatlarına duyduğum bir meraktan değil, aynı zamanda desenlerin bilimsel bir cazibesinden - neden daha fazla insanın gökte bir şeyler gördüğü ve bu manzaraların çok gerçek ve çok şeyleri yansıtıp yansıtmadığıdır. daha aşağıya doğru dünya gerçekten oluyor.
UFO hobileri ekipleri tarafından toplanan verilerin hacimlerini araştırmak için, aslında büyük HTML veri tablolarını bir Google E-Tablo'ya içe aktarmanın bir yolunu geliştirdim ve daha sonra anlamlı ve önemli bilgiler elde etmek ve keşfetmek için bu verileri işleyip analiz ettim. Bu yazıda, size aynı şeyi nasıl yapacağınızı göstermek niyetindeyim.
Google E-Tablodaki Önemli HTML Verileri
Bu örnekte, size İnternet'teki herhangi bir web sitesinde bir tabloda depolanabilecek herhangi bir verinin Google E-tablonuza nasıl aktarılacağını göstereceğim. Bugün İnternette mevcut olan muazzam veri hacmini HTML tabloları şeklinde düşünün. Sadece Vikipedi küresel ısınma gibi konularla ilgili tablolarda veriye sahip, ABD Sayım Bürosu tonlarca nüfus veri setine sahip ve biraz Googling sizi bundan çok daha fazlasını alacak.
Örneğim, Ulusal UFO Rapor Merkezi'nde, aslında sorgu tarzı bir derin web veritabanı gibi görünen bir veritabanıyla başlıyorum, ancak URL yapılanmasını gözlemlerseniz, aslında yarı karmaşık bir web sitesidir. statik web sayfaları ve statik HTML tablolarından oluşan tabanlı raporlama sistemi - tam olarak ne veri almak istediğimizde istiyoruz.
NUForc.org, UFO manzaraları için en büyük raporlama merkezlerinden biri olarak hizmet veren kuruluşlardan biridir. Tek değil, ama her ay için geçerli olan yeni veri setleri bulmak için yeterince büyük. Verileri, Durum veya Tarih gibi ölçütlere göre sıralanmış olarak görüntülemeyi seçtiniz ve bunlardan her biri statik sayfa biçiminde sağlandı. Tarihe göre sıralarsanız ve en son tarihe tıklarsanız, listelenen tablonun tarih biçimine göre adlandırılmış statik bir web sayfası olduğunu göreceksiniz..
Bu nedenle, artık bu HTML tabanlı veritabanından en son görüş bilgilerini düzenli olarak çıkarmak için bir modelimiz var. Tek yapmanız gereken ilk tabloyu içe aktarmak, en son güncellemeyi tanımlamak için en son girişi (en üstteki) kullanmak ve ardından en son HTML veri tablosunun bulunduğu URL bağlantısını oluşturmak için bu gönderinin tarihini kullanmaktır. Bunu yapmak, basitçe ImportHTML işlevinin birkaç örneğini ve daha sonra metin işleme işlevlerinin yaratıcı kullanımlarını gerektirir. İşiniz bittiğinde, kendinize ait en havalı, kendini güncelleyen raporlama elektronik tablolarından birine sahip olacaksınız. Başlayalım.
Tabloları İçe Aktarma ve Verileri Yönetme
İlk adım, elbette, yeni elektronik tabloyu oluşturmaktır..
Peki, HTML tablolarını nasıl içe aktarırsınız? İhtiyacınız olan tek şey tablonun saklandığı URL ve sayfadaki tablonun sayısı - genellikle ilk listelenen 1, ikincisi 2, vb. Listelenen tarihleri ve sayıları listeleyen ilk tablonun URL’sini bildiğimden, aşağıdaki işlevi A1 hücresine yazarak almak mümkündür..
= ImportHtml (“http://www.nuforc.org/webreports/ndxpost.html?”ve H2,”tablo”,1)
H2 işlevi tutar “= Saat (şimdi ())“, böylece masa her saat güncellenecektir. Bu, muhtemelen bu sık sık güncellenen veriler için aşırıdır, bu yüzden muhtemelen günlük yapmaktan kurtulabilirim. Neyse, yukarıdaki ImportHTML işlevi aşağıdaki tabloda gösterildiği gibi getirir.
İkinci tablonun URL’sini tüm UFO görüşleriyle birlikte arayabilmeniz için bu sayfada biraz veri işleme yapmanız gerekecektir. Ancak devam edin ve çalışma kitabındaki ikinci sayfayı oluşturun.
Bu ikinci sayfayı oluşturmaya çalışmadan önce, ikinci tabloya bağlantı oluşturmak için bu ilk tablodan gönderim tarihini çıkarma zamanı. Sorun, tarihin bir dize değil, tarih biçiminde getirilmesidir. Bu nedenle, önce rapor gönderme tarihini bir dizeye dönüştürmek için TEXT işlevini kullanmanız gerekir:
= Metni (A2,”aa / gg / yy”)
Sağdaki bir sonraki hücrede, SPLIT işlevini şu işlevlerle kullanmanız gerekir. “/” ayracı ay, gün ve yıla kadar tarih ayırmak için sınırlayıcı.
= Bölme (D2,”/”)
İyi görünüyor! Ancak, her sayının iki basamağa zorlanması gerekir. Bunu tekrar TEXT komutunu kullanarak altındaki hücrelerde yaparsınız..
= Metni (E2,”00" )
Bir biçim “00” (bunlar sıfırdır) iki basamak zorlar veya bir “0” yer tutucu olarak.
Artık, URL’nin tamamını yeni görüşlerin en son HTML tablosuna yeniden oluşturmaya hazırsınız. CONCATENATE işlevini kullanarak ve ilk tablodan yeni çıkardığınız tüm bilgileri bir araya getirerek yapabilirsiniz..
= BİRLEŞTİR (“http://www.nuforc.org/webreports/ndxp”,G3, E3, F3,”.html”)
Şimdi, yukarıda oluşturduğunuz yeni sayfada (boş sayfa), yeni bir şey yapacaksınız. “ImportHtml” işlev, ancak bu kez ilk URL link parametresi için, böylece ilk e-tabloya geri dönüp yeni oluşturduğunuz URL linkini içeren hücreyi tıklayın..
İkinci parametre “tablo” ve son “1” (çünkü manzaralar tablosu sayfadaki ilk ve tekdir). Enter tuşuna basın ve şimdi belirli bir tarihte gönderilen tüm görüşme hacmini içe aktardınız.
Bu nedenle, muhtemelen bunun güzel bir yenilik eylemi olduğunu düşünüyorsunuz ve her şey - Yani, sonuçta, yaptığınız şey, İnternet'teki bir masadan mevcut bilgileri çıkartıp, özel bir masaya da olsa başka bir masaya geçirdi. Google Dokümanlar hesabı. Evet bu doğru. Bununla birlikte, artık kendi özel Google Dokümanlar hesabınızda olduğu için, bu verileri daha iyi analiz etmek ve şaşırtıcı bağlantılar keşfetmeye başlamak için gerekli araç ve işlevlere sahip olursunuz..
Alınan Verileri Analiz Etmek için Pivot Raporlarını Kullanma
Kısa süre önce, Google E-Tablo’da Pivot Raporları kullanma hakkında bir makale yazdım Google E-Tablo Rapor Araçlarını Kullanarak Bir Uzman Veri Analisti Olun Google E-Tablo Rapor Araçlarını Kullanarak Bir Uzman Veri Analisti Bir Gece Olun Google E-Tablo Rapor Araçlarını Kullanarak en iyi araçlardan birinin veri yürütmek için olduğunu biliyor muydunuz? analiz aslında Google Spreadsheet? Bunun nedeni sadece, her türlü harika veri analizi özelliğini gerçekleştirmek için isteyebileceğiniz hemen her şeyi yapabilmesidir. İnternetten aktardığınız verilere aynı şaşırtıcı veri analizi akrobasi yöntemlerini uygulayabilirsiniz - size muhtemelen daha önce kimsenin keşfetmediği ilginç bağlantıları bulma imkanı verir..
Örneğin, son görüş tablosundan, her bir durumda bildirilen farklı benzersiz şekillerin sayısına bakmak için, o belirli bir durumdaki toplam görüşme sayısına kıyasla, bir özet rapor kullanmaya karar verebilirim. Sonunda, bahsettiğim her şeyi filtreledim “uzaylılar” Yorumlar bölümünde, umarım daha fazla kanat cevizinin bazı girişimlerini temizleyelim..
Bu aslında, yarasadaki bazı ilginç şeyleri ortaya koyuyor; Kaliforniya'nın, ülkedeki en fazla el sanatları şeklini bildirme ayrımının yanı sıra, başka bir Devletin rapor ettiği en fazla sayıda görüşe sahip olduğu gerçeği gibi. Ayrıca Massachusetts, Florida ve Illinois’in de UFO manzaraları bölümündeki büyük hitleri olduğunu gösteriyor (en azından en yeni verilerde)..
Google E-Tablo ile ilgili bir başka harika şey de, düzenleyebilmenizi sağlayan bir Coğrafi Harita da dahil olmak üzere kullanabileceğiniz çok çeşitli grafiklerdir. “sıcak noktalar” Verilerin gerçekten göze çarpan ve veri içindeki bu bağlantıları oldukça belirgin kılan grafik biçiminde.
Eğer düşünürseniz, bu gerçekten buzdağının görünen kısmı. Artık İnternet'teki herhangi bir sayfadaki veri tablolarından veri aktarabilirseniz, olasılıkları düşünün. New York Times'ın en çok satanlar listesinde en son hisse senedi numaralarını veya en son 10 kitabı ve yazarı veya dünyanın en çok satan otomobillerini alın. Hayal edebileceğiniz hemen her konuda HTML tabloları var ve çoğu zaman bu tablolar sık sık güncellenir.
ImportHtml, Google E-tablonuzu İnternet’e bağlayabilmenizi ve orada bulunan verileri beslemenizi sağlar. Üzerinde çalışabileceğiniz bir formatta manipüle etmek ve masaj yapmak için kullanabileceğiniz kendi kişisel bilgi merkeziniz olabilir. Google Spreadsheet hakkında sevmek için sadece bir çok güzel şey.
Elektronik tablolarınıza hiç veri aktardınız mı? Bu verilerde ne gibi ilginç şeyler keşfettiniz? Verileri nasıl kullandınız? Deneyimlerinizi ve fikirlerinizi aşağıdaki yorumlar bölümünde paylaşın!
Resim Kredisi: İşletme Grafiği