框选组件的功能如何实现

现有一个大的Panel里面包含若干个子Panel（以数组的形式存在），现在想通过拉框的办法选择到里面的某些Panel对象，应该怎么弄，我搞不清楚应该在子Panel加拖动的监听器还是在大的里面加，如果在大的里面加好像判断起来就有很大的困难，因为Panel数组的值是不确定的，大的Panel加了滚动条，如果判断坐标应该很难做