下列说法错误的是$(\quad)$

A. 经过两点，有且仅有一条直线

B. 平面内过一点有且只有一条直线与已知直线垂直

C. 两点之间的所有连线中，线段最短

D. 平面内过一点有且只有一条直线与已知直线平行

1. 分析A选项的正确性

A选项：“经过两点，有且仅有一条直线”。根据直线的性质“两点确定一条直线”，可知经过两点有且只有一条直线，故A说法正确，不符合题意。

2. 分析B选项的正确性

B选项：“平面内过一点有且只有一条直线与已知直线垂直”。根据垂线的性质，在同一平面内，过一点有且只有一条直线与已知直线垂直，故B说法正确，不符合题意。

3. 分析C选项的正确性

C选项：“两点之间的所有连线中，线段最短”。根据线段的性质“两点之间，线段最短”，故C说法正确，不符合题意。

4. 分析D选项的正确性并得出结论

D选项：“平面内过一点有且只有一条直线与已知直线平行”。根据平行公理，在同一平面内，过直线外一点有且只有一条直线与已知直线平行。若该点在已知直线上，则不存在平行线，故D说法错误，符合题意。因此，错误的说法是D。