我想告他遗弃罪，我哥们他着了起诉离婚，请问法官会考虑孩子的意见吗，我叫他起诉他不起诉

两个儿子，一个一岁五个月，一个六岁，都是为了自己带，从去年十月份给婆婆带，我想要大多少孩子，他也要跟我，从小都是我带大的，他虐待孩子，不让孩子吃饭饿一天，还把孩子关外面不让孩子进家门，把孩子送到我小姨家就走了，两次了，明天他要把小的宝宝送我小姨家去，我想告他遗弃罪，我哥们他着了起诉离婚，他想我跟他私下离婚什么的财产都不要就带个孩子走，孩子有80个平方安置房我也有40平方，他好几次都不给饭孩子吃，对孩子恐吓，我该怎么样起诉，他找不到我的人就每天骚扰我家人，现在这么热的天他不不让孩子吃饭，把孩子丢在楼下不让那孩子进门，我想问一下我能选着带大儿子吗，这两个孩子都是我自己带大的，都缠我，特别大儿子，我老公多次恐吓孩子，有几次不让孩子吃饭，饿一天，然后把孩子送到我小姨家，根本八竿子打不着，他说要把孩子弄死，还多次威胁我，威胁我家人，我躲了他两个月没理他，他现在就天替你折磨孩子，不给饭孩子吃，饿一天，暴力对待孩子，孩子比较亲我，他主动要跟我，请问法官会考虑孩子的意见吗，他一向比较亲我，怕他爸爸跟奶奶，我怕他明天又把孩子送我小姨家，还有我被他弄的得了严重的抑郁症住了十天院，现在每天还要吃药，他还到处造谣说我出轨，找男人，我在电池厂上班两班倒，每天很辛苦，里面铅很重每天要接触，他，现在耍无奈，找不到我的人就每天把孩子送我小姨家，已经严重骚扰到一家人的生活，我叫他起诉他不起诉，他想我净身出门就带个孩子，我想问一下我这种情况该怎么做