常肆无忌惮地嘲讽他。在大哥的威逼下，高洋也自毁形象，表现地越加木讷，对大哥所求无不顺从。连他讨好自己老婆的小玩意，也经常被哥哥高澄霸占。对此，他常常一笑了之。他明白，天下都是大哥的，自己何必在乎这些小玩意。

岂止哥哥，连比他小的弟弟也欺负他。他和三弟高浚一同去拜见大哥高澄，刚好鼻涕很不争气地跑出来。结果老三高浚竟然大声斥责高洋的手下：“浑蛋，怎么还不给我二哥擦去鼻涕！”

高洋好歹也是堂堂一个郡公，在弟弟嘴里，竟然成为一个生活不能自理的白痴。这耻辱，对高洋的伤害有多深，可想而知。

除兄弟外，他的族叔高隆之也常欺负他，毫无顾忌。而晋阳的功勋之臣，他父亲的老朋友们，也都认为这二小子懦弱、木讷，不是可造之才。连本最应该疼爱他的母亲，也对他颇有成见。连在他准备称帝的时候，还是这么小瞧他：你父兄是龙，是虎，而你是个什么东西，也敢称帝？

虽然是高欢的二公子，却常受白眼。你若是看过安徒生的《丑小鸭》，便明白他的艰难处境，他便是那只混入天鹅群的丑小鸭。