Si bien la ilustración de Cacao es una de las muchas muchas en su estudio, Sloane desarrolló una relación especial con ella, una que le trae casi tanta notoriedad hoy como su fundación del Museo Británico. Como dice la historia, como la mayoría de los viajeros a las colonias, Sloane participó de la bebida de chocolate en Jamaica, pero tenía una aversión a lo que él percibía como su sabor amargo. La leyenda dice que agregó lácteos a la cerveza para cortar su mordisco, creando la primera leche de chocolate. La anécdota de Sloane ayudó a inaugurar una tradición de europeos que afirman mejorar la bebida mesoamericana amarga al adaptarla a su sabor supuestamente más refinado. Los académicos ahora consideran que estos cuentos son parte y parcela de la pretensión colonial general para civilizar los trópicos (ver Delbourgo y Norton en la bibliografía). De hecho, los aztecas endulzaron su chocolate con miel y lo alisaron con harina de maíz, además de agregar una gran cantidad de especias médicamente beneficiosas, muchas de las cuales fueron disfrutadas por los colonos españoles e ingleses durante generaciones. Aquellos que importaban cacao para su preparación en Europa buscaron lógicamente alternativas a los ingredientes difíciles de encontrar en el continente, como el maíz, y recurrieron a lo que tenían. Ya en la década de 1660, un tratado de Henry Stubbe y un diálogo ingenioso de Bollicosgo Armuthaz recomendaron agregar leche o huevo, como agente de unión y para el sabor. Si bien Sloane, por lo tanto, no inventó la idea de agregar un producto lácteo como la leche al chocolate, su nombre ayudó a la receta Garner Press. Los astutos confidenciales ya comenzaron a usar la notoriedad de Sloane para marcar la leche de chocolate en el siglo XVIII, y alrededor de 1850, Cadbury imprimió la receta de «Sloane» en su etiqueta de leche con chocolate, formalizando la conexión. Al igual que las ilustraciones históricas del árbol, las historias sobre chocolate tienden a decir tanto sobre los intereses de su narrador como sobre los detalles de su tema.
