C'è un'applicazione che mi avvisa quando un oggetto che corrisponde alle mie parole chiave viene pubblicato sulla mia craigslist locale?

Ciao,

Disclaimer: ho aiutato a creare Alertpedia (http://alertpedia.com), che fornisce avvisi su craigslist e altro.

Cosa costituisce un buon servizio di allerta?

1. Tempo giusto: questo non è facile quando non si possiede Craigslist o si ha accesso a una Push-API da loro. Devi interrogare i dati (RSS in questo caso, ma potrebbe essere peggio - scraping HTML!) regolarmente - il che pone un carico sia su CL che su Alertpedia. Quando il contenuto cambia così velocemente come su CL, abbiamo un problema nel soddisfare questa metrica.

2. Avvisi giusti: Il servizio dovrebbe permettere di filtrare gli avvisi in base a testo, posizione, prezzo, qualità, ecc. Nel caso di CL, è facile filtrare su testo e posizione perché forniscono feed RSS specifici per la posizione. Ma poiché il testo non è strutturato, è difficile filtrare sul prezzo, ecc. Molto più facile con l'API di Amazon, per esempio.
Al tempo stesso, non dovrebbe mancare nessun avviso - di nuovo con un impatto sul carico di entrambi i server.

3. Prezzo giusto: Vicino al gratis

Alertpedia fa bene il #2 (filtrare per testo e posizione) e il #3 (gratis).

Siccome si trova fuori da Craigslist, può tracciare il sito solo così tante volte al giorno e quasi necessariamente perderà alcuni degli annunci sul sito. Penso che questo vada bene perché c'è molto contenuto ridondante su CL (quanti divani vanno in vendita in un giorno a Denver? :) ), il contenuto non è critico per la vita (a differenza degli avvisi di terremoto e richiamo di prodotti su Alertpedia). In realtà adatta il tasso di allerta alla "dinamica" del sito di origine.

A proposito, tra le oltre dozzine di categorie su Alertpedia, la maggior parte degli avvisi viene impostata su Craigslist, seguita molto indietro dagli avvisi di Airfare. L'ultimo della lista? Avvisi di tsunami - il che è ironico perché abbiamo iniziato Alertpedia in risposta allo tsunami dell'Oceano Indiano!

Spero che questo aiuti, Vishy

PS: fammi sapere se vuoi maggiori dettagli sull'architettura o sull'analisi di alertpedia.