于是他不悦地直言道：“当今天下大乱，英雄尽起。明公为朝庭的重臣，却不收罗豪杰，扶济艰危，而专以踞傲以示天下之士，实在令人不敢苟同。”
杨素一听到这话大感到吃惊，心想：这一个无名之辈，竟敢在这里口出狂言，真的是太放肆了。他想发火，但想到自己的身份，若与眼前这位初生之犊的书生计较的话，实在是失于大度，于是反而转怒为喜，起身夸赞李靖的胆识，并请他坐下，与李靖畅谈天下的大事。
李靖侃侃而谈，从天下时势谈到治国安邦之道，见解精辟，头头是道；杨素听了频频点头称是，然而最后的结论却说：“老夫来日不多，多承指教，然而时不我予，无可奈何？”这话彷佛给李靖的满腔热情浇上了一瓢冷水，让他失望之极。
李靖向杨素讨教一盘围棋，因为李靖的围棋棋逢无敌手，就连韩擒虎也远远不是他的对手。在杨素的眼中，李靖毕竟还是个年轻人，不管他的围棋有多么的厉害，总得先跟同年龄的人下下看，再来定夺是否自己要给与指导。
杨素叫来了大儿子杨玄感让他和李靖过过招，杨玄感的年纪和李靖差不多，棋力也不弱，然而终究和李靖有一段差距，因此很快就败下阵来。李靖原以为这样应该可以引起杨素的注意了，没想到