android-レイアウトコントロールは多点タッチ禁止です。

外のLayoutにセットするだけです。

android:splitMotionEvents="false"

この属性は、この問題を完璧に解決することができます。
参考記事:
http://blog.csdn.net/aikongmeng/article/details/42238285