一、责任主体是建筑物的使用人

根据《中华人民共和国民法通则》第一百二十六条的规定，如果从建筑物中抛掷物品或者从建筑物上坠落的物品造成他人损害，且难以确定具体侵权人的情况下，除非能够证明自己不是侵权人，责任应由可能加害的建筑物使用人承担补偿责任。这里的建筑物使用人指的是在侵权行为发生时实际使用该建筑物的人，包括建筑物所有人、承租人、借用人以及其他使用该建筑物的人。

二、责任主体是可能加害的建筑物使用人

根据上述规定，高楼抛掷物或坠物致人损害的责任主体是可能加害的建筑物使用人，也就是被推定为加害人的人。这意味着如果无法确定具体的侵权人，那么可能加害的建筑物使用人将被视为承担赔偿责任的主体。

三、责任主体是无法举证排除自己是侵权人的建筑物使用人

在这种情况下，如果无法举证排除自己是侵权人的建筑物使用人，也将被视为承担赔偿责任的主体。换句话说，如果该建筑物使用人无法提供证据证明自己不是造成损害的侵权人，那么他将被认定为具有赔偿责任。综上所述，根据《中华人民共和国民法通则》的规定，对于由建筑物中抛掷物品或者从建筑物上坠落的物品造成的他人损害，责任主体包括建筑物的使用人、可能加害的建筑物使用人以及无法举证排除自己是侵权人的建筑物使用人。这些责任主体应当承担相应的民事赔偿责任，除非能够证明自己没有过错。