手持ちの図鑑によれば、ヒメジョオンとハルジョオンの違いで一番わかりやすいのが、茎が中実か中空かのようです。
簡単に言うと茎の中身が詰まっているか空洞か。　そこを頭にいれて、蕾に注目すると垂れ下がった蕾が「く」程度なのがヒメ、「つ」のようにぐにゃりと垂れているのがハルと覚えると、わざわざ手折らなくてもどちらなのかわかるかもしれません。