Наречие ИСКОСА образовано от прилагательного косой.
Приставка ИС- является глухой, поэтому на конце наречия пишется суффикс -А.
Если бы приставка была звонкой (например, ИЗ-), то суффикс был бы -О (например, изнутри).
Правило гласит: после приставок, оканчивающихся на глухой согласный (к, п, с, т, ф, х, ц, ч, ш, щ), пишется суффикс -А, а после приставок, оканчивающихся на звонкий согласный или гласный, — суффикс -О.
Приставка ИС- заканчивается на глухой согласный С, поэтому пишется суффикс -А.