A tool to extract specific URLs from different websites

Project # 96287

Job Statistics

5 Bids
budget
5,000 ILS - 10,000 ILS
bidding ends in
bidding closed
bid range
170 ILS - 270 ILS / hour
1,500 ILS - 6,500 ILS / project
average bid
220 ILS / hour
4,533 ILS / project

Job Info And Actions

Posted: 11:06, 17 May., 2016
Ends: 14:40, 18 May., 2016
A tool to extract specific URLs from different websites
Required a freelance with experience in Linux, Python, HTML parsing, inspecting websites using firebug or similar.


Description of the project:
1. Research, using Firebug or similar tools, how ads look like in a list of websites. They can be from various sources and look different from one another.
2. From the knowledge gained in the research above, create a tool that gets a list of websites and returns a list of all links to those ads, and the size of the image of each ad.


Some important points:
1. The tool you'll provide should run on a Centos7 machine.
2. Suggested language is Python, using libraries that help parse html code.
3. The programmer should understand HTML quite well, in order to understand how to find the right links to the ads.
4. Work involve investigation of different websites and refreshing many times, to learn how to create the tool that can extract the right links. Note that you might need different code for different ads types.
5. The tool should imitate different web browsers on different devices, using different user-agents-strings. We'll supply those strings. To make things simpler. You'll start with the standard Mozilla one, like in the link above.

attachments

the client

updates

Bid from asafg

270 ILS
Per hour
6 projects
אסף גרי
אבטליון
שלום אורי, אני מביא עמי נסיון של קרוב לעשרים שנה בפיתוח תוכנה, רובו בטכנולוגיות Java. מעבר לJava אני שולט במגוון שפות וטכנולוגיות אחרות, כולל שפות סקריפטים למיניהן (Perl, Python, Ruby/RoR, bash, sed וכו'), שפות "כבדות" יותר (כגון ++C/C ו-Scala), וכמובן טכנולוגיות Web למיניהן. אשמח לכתוב עבורכם את הכלי, גם אני חושב שכדאי לכתבו ב-Python, אם כי גם שפות אחרות (Java, Ruby, Perl וכו') תצלחנה למשימה. הצעת המחיר שנתתי היא שעתית. אשמח לקבל פרטים נוספים, בכדי שאוכל לתת לך הצעה למחיר קבוע (fixed price). אנא צור עמי קשר בטלפון 054-2215733. בברכה, אסף גרי
Bid # 1254956
Submitted: 17 May. 2016

Private Bid

Private Bid
3 projects
Bid # 1255366
Submitted: 18 May. 2016

Private Bid

Private Bid
4 projects
Bid # 1255144
Submitted: 18 May. 2016

Private Bid

Private Bid
0 projects
Bid # 1255124
Submitted: 18 May. 2016

Private Bid

Private Bid
15 projects
Bid # 1254748
Submitted: 17 May. 2016