Ganz einfach: einfach den Char zum Int casten:
int asciiValue = (int)char.Parse(categoryName.Substring(0, 1));