Ну вот, собственно, полное письмо:

http://www.civilwarhome.com/leepierce.htm

Там дальше идет прекраснодушное (о рабах!):

The blacks are immeasurably better off here than in Africa, morally, physically, and socially.

(разумеется, когда тебя заставляют работать на износ и забивают насмерть - то тебе живется лучше, чем в Африке, морально, физически и социально)

и об аболиционистах:

Although the abolitionist must know this, must know that he has neither the right not the power of operating, except by moral means; that to benefit the slave he must not excite angry feelings in the master

Нельзя злить рабовладельцев, нельзя!



Так что я с Вами соглашусь - нельзя запрещать цитировать генерала Ли. Просто желательно цитировать, не выдергивая фразы из контекста.