一天，国王极其友好地来找格列弗，因为他遇到了很大的麻烦。毗邻的布来夫斯古国的君王已威胁要把小人国夷为平地。布来夫斯古国的海军有五十艘大战船，正在准备启航。格列弗就又趟水又游泳地到达了他们停泊船只的主要港湾。用小刀割断了五十艘战船的锚索，接着，在每条船上栓上一根缆绳，拖着船走了回来。这一来，就迫使布来夫斯古国投降了。

这一功绩为格列弗带来了荣耀，也给他树立了几个强敌，其中的一个是小人国海军的高级将军。当然如果格列弗愿意的话，他可以把他们这些人和整个王国都碾碎在他的靴子下，但格列弗曾保证不伤害他们。因此，当他们密谋要审判格列弗并将他的眼睛刺瞎时，格列弗别无他法，只好逃走了。格列弗来到布来夫斯古国，他们为他举行了盛大的欢迎会，请他留下来。可格列弗对国王和亲王们都感到厌倦了，他告诉他们，自己什么都不需要，只要一只船离开。

他们在船上储备了一百头牛、三百只羊，有母牛，有公牛，还有四百个厨师准备好的肉，这样格列弗就不会挨饿了。第三天格列弗启航了。在途中遇到一个英国商船船长，当格列弗把他的故事告诉他时，他认为格列弗疯了。直到格列弗从口袋里拿出几头牛，他这才相信了格列弗。让格列弗非常伤心的是，在回家的路上，船上的一只老鼠拖走了他的一头羊。

回到家，格列弗才知道叔叔约翰去世了，他把在埃皮附近的庄园留给了格列弗，这些财产足以使格列弗一家不再遭受贫困。但格列弗心中还是热切渴望着漫游，他又一次出海了，这次乘的是到苏拉特去的“冒险号”船。

航行途中，一场大风暴之后，船驶进了一个陌生的海湾去找淡水。在岸上漫步时，格列弗和他的同伴们走散，落入了当地大人国的巨人手中，这些巨人几乎没有哪一个身高低于六十英尺。

他们把格列弗拿出去展览，格列弗的名声传到了国王和王后的耳朵里；他们命令把他带到宫廷去。格列弗被带到了那儿，由一个抓获他的人的女儿照管，那个小姑娘名字叫格卢姆达克里奇，她九岁了，个头长得比年龄小，还不到三十英尺高。

乘着王室的火车，格列弗游遍了他们的王国，这个国度长六千英里，宽三千至五千英里。京城长五十四英里，宽四十五英里，是个很奇妙的城市。国王的宫殿方圆七英里，主殿高达二百四十英尺，宽度和长度相称。国王的马厩也是一幢漂亮的建筑，能容下五百匹马，这些高贵的牲口都身高五十四至六十英尺。

格列弗常说，小人国里的人从外表看没有瑕疵，而大人国的人却粗糙不堪。后来他才想到，小人国里的人的瑕疵与他们的个头成比例，缺点太小，看不出来；而大人国的人可能比他们实际上显得更粗糙一些，那是因为他们巨大的身子把每一个缺陷都放大了。这些身体庞大的人至少在有些问题上心胸更开阔，比如说：打开一枚鸡蛋，是从大的一端打好，还是从小的一端打好？这个问题几乎使小人国一分为二，但是大人国的人根本就不会被这种事搞得睡不着觉。这一点格列弗是从大人国国王谈到一个政治问题时看出来的。格列弗讲起了自己的国家——英国。“一个政府要求持不同观点的人改变或是不改变他们的意见，”他说，“这是专制。”

陛下对英国很感兴趣。格列弗详细地讲述了英国的历史，他为此感到十分惊讶。他断言那似乎只不过是一连串的阴谋、凶杀、革命、流放，都是贪婪、内讧、虚伪、憎恨、欲望、怨恨和野心带来的最不的结果。“怎么能让这种可恶的害人虫在地球上爬行呢！”他说。他的这种诽谤性的判断令格列弗痛苦万分。