Invece di memorizzarlo come testo, convertilo il numero, con il metodo Color.ToArgb. Il metodo restituisce un numero intero a 32 bit, nel database dovrai ovviamente usare un tipo di campo appropriato. Una volta salvato, per riconvertirlo in color usa il metodo Color.FromArgb.