Ditutup

Crawler pour trouver des noms de domaines expirés

J'ai que quelqu'un me développe un outil pour trouver des noms de domaines expirés.

Ce qui me faudrait :

Je donne un mot-clé à l'outil, par exemple "annuaire travaux".

1) L'outil va récupérer les 100 premiers résultats de Google.

2) Pour chaque site, il crawle l'ensemble des pages (comme Xenu).

3) Il checke chaque URL sortante pour savoir si elle est KO (c'est à dire qu'il n'y a pas de code retour de 4xx, 5xx, 2xx).

4) Chaque URL sortante KO est listée dans un fichier.

5) L'outil retourne la liste des NDD sous forme de fichier.

Je suis moi-même développeur est j'ai déjà créé cet outil sous PHP. Le seul souci c'est qu'il est très lent. Je pourrais donc vous donner l'algorithme que j'ai créé et des pistes pour optimiser l'outil

Kemahiran: HTML, Scrapy, SEO, Web Crawling, Pengikisan Web

Lihat lebih lanjut: sites pour trouver des freelances, site pour trouver des free lancer, site pour trouver des freelance, meilleur site pour trouver des missions freelance, les meilleurs sites pour trouver des freelance, site pour trouver un developpeur d application, trouver des travaille freelance photoshop, trouver des freelance gratuit, site pour trouver des freelancer android, meilleurs site pour trouver un developpeur d application, freelance pour faire des caricature, application pour gestion des tournages, tracker des alias domaines dans analytics, interface pour editer des xml, solution gratuite pour avoir des creditsdans livejasmin

Tentang Majikan:
( 0 ulasan ) Spain

ID Projek: #15811118

20 freelancers are bidding on average €449 for this job

unibiz365

-------------------We PASSED [url removed, login to view] SEO LEVEL – 3 EXAM WITH NO.1 RANK. ----------------- We do white hat Research based SEO only. Please if possible Message us; I need some information on your project. Please Lagi

€250 EUR dalam 30 hari
(453 Ulasan)
8.5
pointlogic

Tengo un conocimiento profundo de php, mysql, javascript, jquery, integraciones de paypal, API, css, html, html5, wordpress. Esperaré hablar con usted. Gracias.

€500 EUR dalam 10 hari
(153 Ulasan)
7.5
ukroficer

Bonjour, vous avez besoin de créer un outil pour trouver des noms de domaines expirés ou juste besoin du coup de main sur le travail.? Merci

€555 EUR dalam 10 hari
(82 Ulasan)
6.9
€350 EUR dalam 10 hari
(2 Ulasan)
5.5
Harun1986

Hello, I will provide you active and expire domain and following details. Please let me know if you want a sample? Waiting for your reply. Thank you

€250 EUR dalam 10 hari
(57 Ulasan)
5.5
technoweb7

A proposal has not yet been provided

€555 EUR dalam 10 hari
(6 Ulasan)
4.7
€555 EUR dalam 10 hari
(12 Ulasan)
4.7
yuzhao4989

Hello, I read your job description carefully. I have rich experience of web scraping and crawler. I have ever built the script similar with this project. The project is to crawl urls from Google, Yahoo, Bing, and g Lagi

€555 EUR dalam 10 hari
(3 Ulasan)
4.2
missexpert7

Hello Sir we provide your website URL for FREE Website Analysis so we will identify SEO technical errors and make the tailored based white hat SEO plan as per new Google Algorithm 2017 for achieving Page #1 Ranking f Lagi

€250 EUR dalam 60 hari
(11 Ulasan)
4.3
€555 EUR dalam 10 hari
(9 Ulasan)
3.9
superman1987417

Greeting I am expert Data Miner and Site Crawler. You can check my skills from work history. I can do it quickly and perfectly. Regards.

€250 EUR dalam 2 hari
(8 Ulasan)
3.9
justdotweaks

Hello Sir/mam, As a Web & App development company we have investigate your project and find that we can do this but first i would like to show u my exp. Our specialities: - iOS/Android development - PHP Develope Lagi

€555 EUR dalam 10 hari
(12 Ulasan)
4.2
pvsysgroupinc

We are Expert Team of Making Crawler I give a keyword to the tool, for example "job directory". 1) The tool will recover the first 100 results from Google. answer : we can 2) For each site, it crawl all Lagi

€750 EUR dalam 30 hari
(1 Ulasan)
3.0
francima

Ingénieur spécialisé en développement Web et gestion des Données, j'ai dores et déjà développé un crawler de "News" (presse tech & startup) avec Scrapy ainsi que des scrapers qui récupèrent des profils de startups sur Lagi

€555 EUR dalam 10 hari
(0 Ulasan)
0.0
pankajsaini1989

Hi, I understand that what you exactly want in these 5 points. And I have 7 plus years of experience in all the skills that this job require. I will make that tool fast. As, I am a PHP expert so will definitely Lagi

€555 EUR dalam 10 hari
(0 Ulasan)
0.0
Codingtech1

Hi, I have gone check your projects descriptions so I can do it perfectly. I have 7 years+ experience with all Software development, Programming’s. I have completed lot of projects with Web scraping, Web crawling, PHP Lagi

€250 EUR dalam 5 hari
(0 Ulasan)
0.0
slashtechnology

We are a team whose members are very experienced in Graphics Design, Template design,web design,logo design, banner design. Our Key Skills HTML| CSS | JavaScript| PSD Template|  Logo Design, Adobe Photoshop Lagi

€555 EUR dalam 10 hari
(0 Ulasan)
0.0
IThub06

Hello, I am expert in Web scrapping, Data crawling, Web crawling, PHP, HTML, . I have more than 7 years experience in web scrapping i have successfully completed more than 1000 projects in web scrapping. You will be Lagi

€250 EUR dalam 4 hari
(0 Ulasan)
0.0
benet6

Sir i understand your requirement, will complete it ASAP. Kindly give a proper brief. where in we can move forward

€333 EUR dalam 10 hari
(0 Ulasan)
0.0
AnthonyBstd

Une petite application développé sous Node.js (Javascript) devrait faire le travail correctement et rapidement.

€555 EUR dalam 10 hari
(0 Ulasan)
0.0