終了済み

Estrazione dati con tecniche di Web Scraping/Crawling e Pannello Back-End per la gestione dei dati --

Pannello di gestione Back-End (area riservata e non pubblica) per la rappresentazione dei dati di un database destinato al settore immobiliare (esempio realizzazione in laravel, codeigniter o altri framework similari). Quattro tipologie di visualizzazione:

1. Elenco completo degli elementi

2. Mappa con collocazione geografica di tutti gli elementi

3. Riquadro con immagine di copertina e info sintetiche di tutti gli elementi.

4. Scheda dettaglio del singolo elemento (immobile)

La piattaforma dovrà permettere di filtrare i risultati (per città, contenuto testuale, categoria, collocazione geografica con raggio d’azione, ecc..)

Le principali informazioni che dovranno essere presenti in ogni singola scheda (singolo elemento) saranno: descrizione del bene, località, coordinate sulla mappa, galleria foto, foto copertina, dimensione mq, prezzo di vendita, perizie, avvisi di vendita, link dell’asta, ecc..

I dati dovranno essere estrapolati da alcuni portali specifici del settore delle aste giudiziarie e aste fallimentari con la tecnica del Web Scraping / Web Crawling ([login to view URL], [login to view URL], [login to view URL], [login to view URL], [login to view URL], [login to view URL], [login to view URL]).

In particolare per l’estrapolazione dei dati saranno necessari:

1. Rotazione IP, o altri servizi proxy che permettano di instradare le richieste attraverso una serie di indirizzi IP differenti.

2. Impostare uno User Agent reale

3. Impostare altre intestazioni HTTP per far sembrare il web scraper un browser reale

4. Impostare intervalli causali tra le richieste (ad esempio tra 2 e 10 secondi), in modo da non sovraccaricare il server.

5. Impostare un referrer

6. Navigare in modalità Headless (senza interfaccia)

7. Evitare le trappole Honeypot

Tutte Tecniche e accorgimenti necessari per procedere con il web scraping sulla maggior parte di siti web senza alcun problema di blocco presente o futuro.

Infine la piattaforma dovrà permettere di generare un file xml con tutto il contenuto del database. Per candidarsi e rispondere a quest'annuncio scrivere il risultato di cinque per tre prima della presentazione.

スキル: PHP, コードイグナイタ, ウェブ記事のスクラップ, Laravel, Web Crawling

さらに表示: web scraping visual basic, web scraping flash sites, web spider crawling website robot vbnet, web scraping jobs, google base web scraping, data mining web scraping, web scraping projects, web scraping practice projects, web scraping experience, windows fotografia e design software di web design, web crawling, web scraping, web scraping, data mining, web crawling, business data, web crawling vs web scraping, web scraping vs web crawling, scrapy: powerful web scraping & crawling with python, mastering python web scraping get your data back, python web scraping vs crawling, scrapy: powerful web scraping & crawling with python download, scrapy: powerful web scraping & crawling with python free, scrapy: powerful web scraping & crawling with python free download

採用者について:
( 0件のレビュー ) Lecce, Italy

プロジェクトID: #25467360

4人のフリーランサーが、このジョブに平均€605で入札しています

alifinteractive

Hello sir, I have more than 5 years experience in Laravel development. I can do this project with good understanding. Please review my some Laravel projects with below URLs. [login to view URL] http://www もっと

€750 EUR 20日以内
(102件のレビュー)
7.4
arturkandalyan

Hi sir, I am a Web & Data Scraping Expert who have career for 6 years over. I am very happy to bid on your job. I have already worked on several similar projects for collect data & contact & business information such a もっと

€500 EUR 3日以内
(6件のレビュー)
4.8
vplsapp

Ciao Grazie per aver pubblicato i requisiti del tuo progetto. Studiamo le tue esigenze e le capiamo. Per capire di più e chiarire i nostri dubbi, vogliamo discutere con voi alcune domande. Quindi, inviaci un messagg もっと

€670 EUR 8日以内
(レビュー1件)
2.4
jnash1

Sviluppatore italiano con 12 anni di esperienza in settore web e mobile. conoscono benissimo le tecnologie proposte, sono curioso di fare una chiacchierata con voi e conoscere maggiori dettagli sul progetto, così da fa もっと

€500 EUR 2日以内
(0件のレビュー)
0.0