No solo no es perjudicial, es excelente para su suelo. Así es como el suelo obtiene su fertilidad natural después de todo.
No hay absolutamente ninguna razón para tirar restos de frutas y verduras en el cubo. Guardo un pequeño contenedor en mi banco para restos orgánicos. Ese contenedor se vacía en un contenedor de compost más grande en mi patio. El compost finalmente se agrega a mi suelo de jardín en primavera cuando siembro nuevas plantas y semillas.
Si no tienes un contenedor de compost enterrar esos restos en el jardín es igual de efectivo. Sin embargo, es posible que deba vigilar las semillas que brotan y vuelva a enterrar las plántulas que no desee conservar (tengo plantas de pimiento que crecieron a partir de semillas de pimientos que compra en la tienda).