公交车驾驶员在驾驶过程中不说话就直接停车去做自己的事，确实算违纪。针对这一问题，我们可以从以下几个方面进行分析：

一. 公交车驾驶员的职责

1. 确保乘客安全：公交车驾驶员的首要职责是确保乘客的安全，这包括在行驶过程中保持专注，不随意停车。
2. 遵守交通规则：驾驶员必须严格遵守交通规则，不得在不允许停车的地方停车，也不得在驾驶过程中擅自离开车辆。

二. 相关法规依据

1. 根据《中华人民共和国道路交通安全法》：驾驶员在驾驶车辆时，应当保持高度的注意力，确保行车安全，不得有妨碍安全驾驶的行为。
2. 公交公司内部管理规定：虽然具体的内部规定可能因公司而异，但通常都会明确规定驾驶员在驾驶过程中的行为规范，包括不得擅自停车离开车辆等。

三. 行为性质分析

1. 违纪行为：公交车驾驶员在驾驶过程中不说话就直接停车去做自己的事，显然违反了其职责和交通规则，属于违纪行为。
2. 安全隐患：这种行为不仅可能导致乘客的不满和投诉，还可能引发交通事故，对乘客和驾驶员自身的安全都构成威胁。

综上所述，公交车驾驶员在驾驶过程中不说话就直接停车去做自己的事，确实构成了违纪行为。这种行为不仅违反了驾驶员的职责和交通规则，还可能对乘客和驾驶员自身的安全造成隐患。我建议公交公司应加强对驾驶员的培训和管理，确保驾驶员严格遵守交通规则和公司规定，确保乘客的安全和满意。如有进一步需要，您可以继续咨询我。