非吸罪犯手机拿回的时间主要取决于手机与案件的关系：
如果手机与案件无关
公安机关应当在三日以内解除扣押，退还原主。
如果手机是案件关键证据
手机可能在整个调查或审判流程中持续扣押，直至案件结束并作出判决。在案件审结并判决后，如果手机无需再用作证据或未能确认为应没收之物，则必须依法归还给其真正的所有人。
对于服刑期间的犯人
手机一般是在刑期满了之后才归还，或者是犯人同意将手机交给家属，家属才能去领取。
综上所述，非吸罪犯手机拿回的时间主要取决于手机是否与案件有关。如果手机与案件无关，通常会在三日内归还；如果手机是案件证据，则可能需等待案件结束并作出判决后才能归还。