집에 다른 안쓰는 배터리가 있나 찾아보니까
SKY 폰 배터리가 2개 있네요. 모델명 BAT-6500M 표준형 배터리 팩
(3.7V, 1350mAh, 5.0Wh Li-ion 2차 전지)

사이즈는 훨씬 작지만, 배터리를 한쪽 끝으로 몰면...
핀 위치는 딱 들어맞습니다.

(폰에서) 충전 살짝 해 주고, 핀 위치 맞춰서 계산기 켜보니 문제 없이 잘 켜지네요.
궁한 상황에서는 어댑터?(브라켓?) 비슷한 걸 만들어 끼워서 사용해 볼 수도 있겠습니다.

[추가] HP Prime에 잘 고정되도록 만든 다음에, 충전케이블을 꼽아 봤는데, 
계산기는 잘 돌아가지만, 충전은 안되네요.

충전 표시(=번개)가 아예 뜨질 않습니다. 탈락!