400万单位的青霉素配制成皮试液的步骤如下：
1.准备药品：400万单位的青霉素、0.9%氯化钠注射液、1ml注射器、4.5#针头。
2.溶解青霉素：取80万单位的青霉素，加入0.9%氯化钠注射液2ml，溶解后摇匀。
3.稀释青霉素：用1ml注射器从上述溶液中抽取0.25ml，然后加入0.9%氯化钠注射液至1ml，摇匀。
4.再次稀释青霉素：用1ml注射器从上述溶液中抽取0.1ml，然后加入0.9%氯化钠注射液至1ml，摇匀，即制成皮试液。
需要注意的是，在配置皮试液的过程中，要严格按照无菌操作进行，避免污染。同时，要注意观察患者的反应，如有不适及时处理。