Come creare un motore di ricerca in C#

Question

Sto provando a creare un'applicazione Web in ASP.NET MVC e ho bisogno di creare una funzione di ricerca piuttosto complessa. Quando un utente inserisce un termine di ricerca, desidero cercare una varietà di fonti di dati che includono documenti, tabelle nel database, URL di pagine Web e alcune API come Facebook. Eventuali suggerimenti, tutorial e suggerimenti sarebbero molto apprezzati.

Answer 1

La tua domanda suggerisce che probabilmente non stai pianificando di implementare l'intera funzionalità da zero, quindi ecco alcuni link che potresti trovare utili.

• One (il più facile) opzione sarebbe quella di utilizzare un motore di ricerca di terze parti (ad esempio Google Custom Search, ma Bing probabilmente ha un'API simile). Ciò ti consente di cercare (solo) la tua pagina utilizzando Google e visualizzare i risultati in modo personalizzato. La limitazione è che cerca solo i dati visualizzati su alcune pagine (collegate).

• Un approccio più sofisticato consiste nell'utilizzare alcune librerie .NET che implementano l'indicizzazione per l'utente (in base ai dati forniti dall'utente). Una libreria popolare è ad esempio Lucene.Net. In questo caso, gli dai i dati che vuoi cercare esplicitamente (contenuto pertinente da pagine web, contenuto del database, ecc.), In modo da avere un maggiore controllo di ciò che viene cercato (ma è un po 'più di lavoro).

Answer 2

Costruire le strutture e gli algoritmi dell'indice di ricerca attuali non è un'impresa da poco. Ecco perché le persone usano Lucene, Sphinx, Solr, ecc. L'uso di google.com, come raccomandato nei commenti, non ti darà alcun controllo e una corrispondenza inadeguata rispetto a quello che otterrai da uno di questi motori di ricerca gratuiti, se correttamente configurato e Usato.

Raccomando dare un'occhiata a Solr, ti dà il potere di Lucene, ma è molto più facile da usare, più esso aggiunge diverse caratteristiche di comfort, come il caching, sharding, sfaccettatura, ecc

SolrNet è un client Solr per .Net, ha un'app ASP.NET MVC di esempio che puoi usare per vedere come funziona e come base per il tuo progetto.

Disclaimer: Sono l'autore di SolrNet.

Answer 3

Ho scritto un motore di ricerca personalizzato per il mio sito MVC 4. Analizza le directory View e legge tutti i file .cshtml, facendo corrispondere i termini forniti con un'espressione regolare. Ecco il codice di base:

List<string> results = new List<string>(); 
     DirectoryInfo di = new DirectoryInfo(System.Configuration.ConfigurationManager.AppSettings["PathToSearchableViews"]); 
     //get all view directories except the shared 
     foreach (DirectoryInfo d in di.GetDirectories().Where(d=>d.Name != "Shared")) 
     { 
      //get all the .cshtml files 
      foreach (FileInfo fi in d.GetFiles().Where(e=>e.Extension == ".cshtml")) 
      { 
       //check if cshtml file and exclude partial pages 
       if (fi.Name.Substring(0,1) != "_") 
       { 
        MatchCollection matches; 
        bool foundMatch = false; 
        int matchCount = 0; 
        using (StreamReader sr = new StreamReader(fi.FullName)) 
        { 
         string file = sr.ReadToEnd(); 
         foreach (string word in terms) 
         { 
          Regex exp = new Regex("(?i)" + word.Trim() + "(?-i)"); 
          matches = exp.Matches(file); 
          if (matches.Count > 0) 
          { 
           foundMatch = true; 
           matchCount = matches.Count; 
          } 
         } 
         //check match count and create links 
         // 
         // 
        } 
       } 
      } 
     } 
     return results;