其实，在察哈尔内部也并不平静。林丹淫乐无度，骄横狂妄，不纳忠言，在察哈尔数十员将领头目中，他只偏听偏信贵阿英哈一人。
但是，贵阿英哈也不是一个可倚重的好人。他自恃武艺高强，把林丹的宠信当作资本，在众将领中飞扬跋扈，目空一切，胡作非为，任意凌辱他人，使得业已危机四伏的察哈尔部，很快走到了分崩离析的边缘。
在贵阿英哈的建议下，林丹决定在通往建州的必经之地--库兹里山口，建筑一座石头城。
有了这座库兹里石头城，既可以阻止来自建州的攻袭，也可以依据这城堡去攻袭、劫掠科尔沁、喀尔喀的城寨。
从各方面看，尤其是在军事上，库兹里城地处要冲，位置重要。贵阿英哈自行设计、绘制了图纸，林丹任命他亲自监工督造。
这座库兹里城，按照贵阿英哈的设计、要求，城分内外两重，彼此之间还有地下连接，城外留有出口。
由于工程浩大，所需材料很多，贵阿英哈对五部首领催逼得厉害。他竟异想天开，把五部首领的妻子、女儿全部集中一起，关押在一所房子里，当作人质，迫使五部首领拼尽全力，加速完成建城任务。
在数十名五部首领的妻子之中，不乏有姿色秀丽者，贵阿英哈本是一个好色之徒，便以为“近水楼台先得月”，居然对她们伸出了魔爪，肆意进行姦淫、凌辱。
五部首领得到这消息之后，不堪忍受屈辱，一起去找林丹控诉贵阿英哈的兽行。
不料林丹只是对他们道：“他也是为了我们察哈尔部的利益，想尽快把城建好，才关押她们。”
“那畜牲任意姦淫她们，难道也是为了我们察哈尔部的利益么？”
“看人要从大的方面着眼，这是一些生活小事，怎能……”
五部首领实在听不下去了，大家商量以后，回到家里领着各自的儿子，妻子、女儿不要了，一起离开了察哈尔部。
后来，林丹的孙子扎尔布、色楞，对祖父宠信贵阿英哈也深为不满，他们对五部首领的被迫出走更是同情，向林丹提出劝诫，却遭到林丹的痛斥：“小小年纪，瞎操心，你们懂什么？”
两个孙子仍不服气，并说道：“我们的年纪虽然不大，但我们为了察哈尔的前途，不能不提出自己的意见，我们不希望察哈尔被葬送在极少数人的手里！”
这一下可激怒了他们的祖父林丹，他恼羞成怒，向他们大声喝道：“你们这话是什么意思？你们所说的‘极少数人’是指谁？”
林丹越说越气，居然命令身边的侍卫，对两个孙子进行惩处，每人受到鞭笞二十的责罚。
事后，扎尔布、色楞一气之下，双双逃往科尔沁部，又随着科尔沁人一起归附了建州。他们打心眼里敬仰努尔哈赤，见面时，二人向这位建州大王虔诚地行了“叩首礼”。努尔哈赤热忱地欢迎他们，也把二人留在帐前听用，享受带兵将领的待遇。
鑑于林丹内外交困，众叛亲离的情况，努尔哈赤为了顺应天时、合乎民意，在臣服漠南蒙古科尔沁、喀尔喀等部之后，便向察哈尔部林丹发动军事攻势。
明朝崇祯五年（1632年），努尔哈赤之子皇太极统领建州兵马和投顺建州的科尔沁、喀尔喀、扎鲁物、奈曼等部的蒙古骑兵，大举进攻察哈尔部。
林丹得到消息之后，派贵阿英哈大将带领兵马五千人前往库兹里城，迎战建州军。
贵阿英哈哪里是皇太极的对手，三日之后，库兹里城被攻克，贵阿英哈也死在了昂纳克的刀下。
皇太极带领众将官，把军队开进库兹里城。
清扫战场之后，他们查点人数，这一仗，建州军阵亡一千五百余人，察哈尔部死伤三千多，被俘获二千余人，缴获盔甲五千副，战马三千余匹，兵器等不计其数。
后来，皇太极派遣科尔沁原部长明安的第五子巴特玛台吉守库兹里城。
自此，这座闻名于漠南蒙古的石头城上，飘扬着建州的大旗。
两年后，皇太极鑑于察哈尔部长林丹坚持对抗建州的政军，不接受安抚，便亲自带领一万兵马，前去征讨林丹。
自从失去库兹里城，林丹对察哈尔各部使出各种手段，增强兵力。他让各部首领，有人出人，有马出马，有钱出钱。运用各种高压办法，经过多方软磨硬压，终于组成了一支五千多人的军队。
通过半年多的训练，林丹又亲自带着去偷袭了喀喇沁和土然牧部，有意培养这支队伍成为嗜杀成性、劫掠成习的战争工具。
林丹的察哈尔城，也是由贵阿英哈设计、塑造的石头城，其坚固方面，更有过于库兹里城。它是一座三重石头城。外城高约一丈八尺，城墙宽约三尺多。城外有又宽又深的护城河，河上架着吊桥。中城更坚固，里面住着察哈尔部的将领及其亲属，中城与外城之间盖了许多草屋，住着兵马。
里城实际上就是一座四合院，为林丹的住室，全是砖石结构，共有两层，可以由暗室走出城外。
这次皇太极带兵来讨伐的消息一传到，林丹立即召开各部首领、将领开会。他说道：“只要守住城，就不怕建州兵马来犯，我们储备的粮草足够大半年用，怕他什么呀？他皇太极跑这么远来打我们，战线太长，粮草难以接济，时间长了，他非自动撤兵不可！到那时候，我们随后追杀，准能打个大胜仗！”