Hong Kong fue una colonia británica desde 1841 hasta 1997. Como la mayoría de las colonias, era una sociedad de clases, con los británicos y otros extranjeros pertenecientes a la clase alta. En las sociedades de clase, las clases bajas tienden a adoptar hábitos y tendencias de las clases altas y esto es básicamente lo que sucedió.
Alrededor de 1840, el té de la tarde se hizo popular entre la clase alta británica. Luego, los funcionarios del gobierno británico y Tai-pans llevaron estas costumbres a Hong Kong. Las clases medias y bajas de Hong Kong comenzaron a tomar el té de la tarde como una costumbre propia, probablemente hacia finales del siglo XIX.
He leído artículos que dicen que debido a que el tipo de té británico es demasiado débil para los gustos chinos, la gente de Hong Kong agregó leche y azúcar para hacerlo más fuerte. Sin embargo, dudo seriamente de que sea correcto, ya que los chinos tradicionalmente no agregan leche o azúcar a sus tés. (La lechería rara vez es consumida por los chinos históricamente). Sin embargo, si nos fijamos en la cultura británica del té, hay muchas similitudes. A los británicos les gusta agregar azúcar a su té, crema, limón, etc. a su té, que, IMO, se convirtió en el té de leche, té de limón, etc., que son prominentes en Cha Chaan Tengs. (Cafés al estilo de Hong Kong.)
Entonces, los británicos aprendieron a apreciar el té de la cultura china del té, desarrollaron su propia cultura del té y luego regresaron a Hong Kong. Los plebeyos en Hong Kong luego tomaron la cultura británica del té, la combinaron con sus propios gustos y crearon Milk tea, junto con otras cosas únicas de Hong Kong como Egg Tarts, Pineapple Buns, Lemon tea, Yuanyang (café mezclado con té), etc.
El proceso real de preparar té de leche probablemente se desarrolló horas extras. Lan Fong Yuen (蘭芳 園) afirma ser el que inventó el método más famoso / prominente en la actualidad para hacer té con leche, es decir, té con leche de seda, que usa un filtro de tela de saco para preparar el té. 
