web-scraping

7ısı

2cevap

Python Web Kazıma - urlopen hatası [Errno -2] Adı veya hizmet Projem için <a href="http://civiccommons.org/apps" rel="noreferrer">Civic Commons Apps</a> bağlantısından veri ayıklamak çalışıyorum

bilinmemektedir. İhtiyacım olan sayfanın bağlantılarını elde edebiliyorum. Ben bağlantıları açmaya çalıştığınızda Ama "urlopen hatası [Errno -2] Adı veya hizmet bilinmez" olsun web kazıma piton kodu:

8ısı

1cevap

Python ile dosyayı indirme

Dosyayı python kullanarak bir web sitesinden indirmeye ve mekanize etmeye çalışıyorum. Geçerli kodum başarılı bir şekilde web sitesinde oturum açar ve indirme bağlantısını içeren sayfayı açar. indirme

12ısı

1cevap

Python'da HTMLParser'ı Kullanma 3.2

Web sitelerinden verileri kopyalamak ve bunu yaparken html kodlamasını kaldırmak için HTML Ayrıştırıcısını kullanıyorum. Güzel Çorba gibi çeşitli modüllerin farkındayım, fakat "dış" modüllere bağlı ol

5ısı

1cevap

Scrapy CrawlSpider: öğenin farklı düzeylerde ayrıştırılmasıyla ilgili öğeye nasıl erişilir?

Bir web sitesini tararım (yalnızca iki seviye derin) ve her iki düzeyde de sitelerden bilgi almak istiyorum. İçinde bulunduğum sorun, bir öğenin alanlarını her iki düzeydeki bilgilerle doldurmak istiy

6ısı

2cevap

PHP: strip_tags - sadece belirli etiketleri (ve içeriklerini) kaldırın?

strip_tags() işlevini kullanıyorum ancak bazı etiketlerini (ve tüm içeriğini) kaldırmalıyım. <div> <p class="test"> Test A </p> <span> Test B </span> <div> Test

5ısı

2cevap

Pençe ben isime sahip bir sitenin içeriğini kazımak için çalışıyorum

emniyete Güvenli Giriş ile bir site içeriği ancak sitenin giriş, parola, burada şifre ben kod üç seçenek kullanıcı adı yapamadığı etti <?php // HTTP authentication $url = "http://aftabcurrency.com

25ısı

1cevap

Html Agility Pack. Web sayfasını yükleyin ve kazıyın

en iyi kazıma sırasında bir web sayfası almanın yolu bu mu? HttpWebRequest oReq = (HttpWebRequest)WebRequest.Create(url); HttpWebResponse resp = (HttpWebResponse)oReq.GetResponse(); var doc = new H

8ısı

1cevap

Haskell'de Metin veya ByteString'i HXT'de kullanmak mümkün mü?

Haskell'deki bir XML/HTML işleme kitaplığı olan HXT, DOM ağaçlarının Oklarla çaprazlanması ve manipüle edilmesi için gerçekten esnek ve güçlü yöntemlere sahip olduğunu düşünüyorum. http://adit.io/post

9ısı

1cevap

Google Scholar

Kazıma için tor ve python kullanma Dergi makalelerinin nasıl alıntı yapıldığı analiz etmek için bir proje üzerinde çalışıyorum. Büyük bir dergi makale isimleri dosyam var. Onları Google Akademik'e ile

6ısı

2cevap

Python indir görüntü

Ben buna benzer bir HTML kodundaki bir resim bulmalıyız. İşte kodudur: import lxml from lxml import html import requests url = 'http://www.example.com' r = requests.get(url) tree = lxml.html.fr