处理小留学生扰民的问题，可以采取以下步骤：

沟通协商：

首先尝试与扰民者进行沟通，表达自己的困扰和需求，寻求共识，达成协议。

记录噪音情况：

在确定违反噪音规定的情况下，记录发生的时间并保留证据，最好维持一周左右的时长。可以使用分贝测量仪检测噪音大小，以便提供具体的噪音数据。

收集证据：

收集噪音发生时的录音、视频或其他形式的证据，这些证据在投诉或报警时将起到关键作用。

投诉与报警：

可以先向宿舍管理部门投诉，如果未得到解决，再向当地执法部门报警。报警时，可以直接拨打110，由警方出面解决问题。

警方处理：

警方接到报警后，一般会先予以警告，并要求制造噪音的人停止扰民行为。如果继续扰民，警方可以视情况对其进行治安处罚，包括罚款或处以15日以下的行政拘留。在严重扰乱社会秩序的情况下，可能涉嫌犯罪，将受到更严厉的刑事处罚。

法律途径：

如果噪音扰民已经影响到正常生活，还可以通过法律途径向法院提起诉讼，要求停止侵害行为、整改或减少噪音排放及作业时间。

自卫措施：

在紧急情况下，可以采取必要的自卫措施，保护自己和他人的人身安全。

在处理过程中，建议遵循法治原则，通过沟通协商、调解、举报投诉等多种途径，维护自己和他人的合法权益。同时，了解并确认所在公寓楼或居住区域规定的安静时间段，有助于在投诉和报警时提供有力的依据。