Hierfür hilft Convert.ChangeType weiter:

object foo = GetFoo();
Type t = typeof(double);
double bar = Convert.ChangeType(foo, t);