Buenas:
df2[i,] significa la fila i. Se podría haber hecho igual por columnas.
En R cuando compara un vector con un número te devuelve un vector con valores TRUE/FALSE. Así df2[i,] < 2 devuelve un vector con TRUE/FALSE según se verifique la condición.
Cuando en un índice se especifican valores TRUE/FALSE se toman únicamente aquellos elementos del vector que cuyo índice es TRUE.
Si realmente te interesa la programación en R te recomiendo mires despacio la forma en que se trabaja en R con matrices y vectores, pues se pueden hacer cosas bastante sofisticadas utilizando únicamente operaciones con índices.
Un saludo.